karo_lee-CSDN博客

Spring for Apache Hadoop 的 reference HBase支持部分

7.1. HBaseSHDP通过hbase-configuration命名空间元素为HBase提供了基本的配置。<!—default bean id is ‘hbaseConfiguration’ that uses the existing ‘hadoopConfigurati...

2015-05-09 02:06:34 120 1

Spring for Apache Hadoop 的 Reference 二

1. MapReduce和分布式缓存4.1. 创建Hadoop作业Hadoop配置完成之后需要提交一些作业。SHDP让这个过程变得很简单，不管是map-reduce类型的还是streaming。下面看一个例子：<hdp:job id=”mr-job” input-...

2015-05-07 10:44:38 99

Spring for Apache Hadoop 的 Reference 一

I. 简介1. 环境需求Spring for Apache Hadoop 2.1使用JDK 7、Spring Framework 4.1编译测试，对应的Hadoop版本是2.6。• Spring for Apache Hadoop 2.1支持如下版本的发布版：• Apache H...

2015-05-07 10:31:29 168

Spring for Apache Hadoop 的 Reference 目录

作者：考斯丁.里奥，托马斯.里斯伯格，简尼.沃尔克拉蒂目录I. 简介1. 环境需求2. 其他资源II. Spring 和 Hadoop3. Hadoop配置3.1. 使用Spring for Hadoop的命名空间3.2. 使用Spring for Hadoop的JavaConfig3.3. 配置Hadoop3.4. 运行支持3.4.1. spring...

2015-05-07 10:21:39 99

Spring for hadoop 简介

Spring for hadoop提供了统一的配置模式以简化Apache Hadoop的开发，并也易于调用HDFS、Mapreduce、Pig和Hive的API。它还提供了与Spring生态圈的其他项目集成的能力，例如Spring Intergration 和Spring Batch，让你可以优雅地开发大数据的提取/导出和Hadoop工作流项目。从OReilly公司下载Spring-d...

2015-05-07 10:18:11 229

原创典型的大数据应用软件

数据摄取层 Apache Flume,Storm Hadoop存储 HDFS NoSQL数据库 HBase,Cassandra 规则引擎 MapReduce任务管理平台查...

2014-05-06 10:16:04 98

hbase regionserver 启动失败的一个原因

今天在RHEL 5.5上分布式安装hbase遇到一个错误，查看regionserver的log：regionserver.HRegionServer:reportForDuty failed;sleeping and then retrying.regionserver.HRegionServer:reportForDuty to master=localhost,6000,139xx...

2014-04-28 15:41:23 2614

一个tomcat服务添加多个solr索引应用

据说multi core这种方式在并发增加后相应速度比标准配置慢。《解密搜索引擎技术实战》中推荐使用部署在同一个web服务器中的多个solr应用这种方式。书上只是抛砖引玉，在此做个详细记录1、tomcat安装sorl成功后。参考http://blog.csdn.net/zhufeng609/article/details/243501312、复制一份 $TOMCAT_HOME/weba...

2014-04-24 13:15:28 145

原创 Spring与RMI整合

不管使用java多久肯定听说过RMI（Remote Method Invocation 远程方法调用）。RMI第一次被引入Java开发平台是在JDK1.1，给程序员一个强大的Java程序间通信的工具。在RMI之前，程序员们唯一的选择远程调用选择是CORBA或者是难以驾驭的socket编程。不过开发使用RMI服务比较冗长无趣。这个过程包含几个步骤，有编码有设置。Spring通过提...

2014-03-03 14:16:25 91