自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

恩典

Hadoop学习轨迹

  • 博客(12)
  • 资源 (2)
  • 收藏
  • 关注

原创 跨域访问解决方案

在web应用的web.xml中配置filter,使返回的头信息中允许跨域访问。刚开始尝试的是将filter的配置放入到tomcat的web.xml中,但是不起作用。配置filter时注意filter的顺序,如果不起作用,可将filter的顺序向前调整,因为tomcat加载filter时是有顺序的。配置如下<filter> <filter-name>...

2020-04-28 23:24:55 172

原创 clouder manager uuid文件导致无法添加主机问题

初接触CM不久,公司要求部署一个三个节点的测试集群(虚拟机)。dn01dn02dn03整个集群安装好之后才发现dn03的硬盘分的太小了,导致CM集群一些项以红色警告方式提醒,先尝试重新挂在一块硬盘,由于linux水平有限,没有成功,只好重新安装dn03。删除CM集群上的Cluster 1  集群,然后将移除dn03,然后重装虚拟机,安装好之后,jdk、ssh等配置完毕。我直

2016-01-14 09:40:29 1958

原创 自编译 hadoop-2.5.2 x64安装包 下载

本人虚拟机安装centos6.5 x64 ,安装hadoop时发现官网下载安装包为32位,需要自己编译64位包才能使用,根据网上教程编译了一个可运行的包,现分享给大家交流学习:hadoop-2.5.2 x64位包编译方法参考 :http://blog.csdn.net/wulantian/article/details/38111999 点击打开链接hadoop-2.5.2

2015-04-23 15:39:43 1497

原创 Call From hostname/169.168.1.12 to cm:9000 failed on connection exception 解决方法

做一个简单的java读取hdfs的demo。环境:客户端:win7 +eclipse。服务器端,虚拟机:centos 64 + hadoop2.5.2服务器core-site.xml关键配置如下fs.default.namehdfs://localhost:9000本地eclipse项目中引用core-site.xml关键配置如下fs.d

2015-04-23 14:41:34 4887

转载 Caused by: java.lang.IllegalArgumentException: Wrong FS: hdfs:// :9000/ expected: hdfs:// :9000

原文地址:http://blog.itpub.net/23073818/viewspace-730691/

2014-05-23 10:59:48 1813

转载 eclipse加载maven工程提示pom.xml无法解析org.apache.maven.plugins:maven-resources-plugin:2.4.3解决方案

在别的机子上创建一个maven工程,复制到本机上导入,出现pom.xml文件错误,提示错误如下Multiple annotations found at this line:- Execution default-testResources of goal org.apache.maven.plugins:maven-resources- plugin:2.4.3:

2014-04-21 10:51:59 1008

转载 在hadoop启动的时候,会出现各种各样的问题

在hadoop启动的时候,会出现各种各样的问题,NameNode,JobTracker等各个模块都会有莫名奇妙的问题出现,在这里对hdfs的问题进行一下简单的记录1:HDFS initialized but not 'healthy' yet, waiting...这个日志会在启动hadoop的时候在JobTracker的log日志文件中出现,在这里就是hdfs出现问题,导致Dat

2014-04-21 10:49:50 537

转载 用Maven构建Hadoop项目

用Maven构建Hadoop项目Hadoop家族系列文章,主要介绍Hadoop家族产品,常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa,新增加的项目包括,YARN, Hcatalog, Oozie, Cassandra, Hama, Whirr, Flume, Bigtop,

2014-04-21 10:26:13 1151

转载 编译hadoop-eclipse插件

编译hadoop-eclipse插件 目录 一、所需软件… 2 二、Ant和Cygwin安装… 2 三、编译hadoop-eclipse-plugin-1.0.3.jar插件… 5 前言: 由于开发人员使用不同的eclipse版本,hadoop自0.20.x版本后不再提供现成的hadoop-eclipse插件而是给出了源码自行编译。 

2014-04-11 17:07:16 530

原创 Linux访问Windows共享文件夹

下文一些东西来自于网络,不过更重要的是加入自己配置过程中的一些经历,把自己经历的错误和解决方法分享给大家。 环境:         Linux     VMWare虚拟机,Ubuntu12.04         Windows Windows7 操作:         从Linux中访问Windows的共享文件 在Linux命令行下输入下列命令:# moun

2014-04-09 18:26:52 710

转载 在hadoop启动的时候,会出现各种各样的问题

在hadoop启动的时候,会出现各种各样的问题,NameNode,JobTracker等各个模块都会有莫名奇妙的问题出现,在这里对hdfs的问题进行一下简单的记录1:HDFS initialized but not 'healthy' yet, waiting...这个日志会在启动hadoop的时候在JobTracker的log日志文件中出现,在这里就是hdfs出现问题,导致DataNod

2014-03-20 08:25:51 710

原创 mysql 启动报错:The server quit without updating PID file (/usr/local/mysql/data/ubuntu.pid)

这个错误算是比较粗心时范的,忘切换用户了,就是hadoop用户没有执行mysql的权限,如下:hadoop@ubuntu:/usr/local/mysql$ support-files/mysql.server startStarting MySQL. * The server quit without updating PID file (/usr/local/mysql/data/

2014-03-05 19:46:12 8541

storm+kafka源码示例

压缩包里有一个topology类的文件,主要是kafkaspout类的配置和调用方法,另包含需要的kafkaspouot的jar包。

2015-04-15

hadoop-eclipse-plugin-1.0.3.jar

windows下hadoop 的 eclipse 插件,eclipse3.7版本测试通过,lib里面包含解决windows下连接linux权限问题的hadoop-core.jar文件。

2014-04-21

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除