- 博客(0)
- 资源 (28)
- 收藏
- 关注
hadoop 容量调度器
mapred.capacity-scheduler.queue.<queue-name>.capacity:设置调度器中各个queue的容量,这里指的是占用的集群的slots的百分比,需要注意的是,所有queue的该配置项加起来必须等于100,否则会导致JobTracker启动失败。
mapred.capacity-scheduler.queue.<queue-name>.maximum-capacity:设置调度器中各个queue最大可以占有的容量,默认为-1表示最大可以占有集群100%的资源,和设置为100的效果是一样的。
2014-01-06
基于cloudera搭建hadoop集群
一. Cloudera Manager 4
二. 下载地址 4
三. 安装环境 4
四. 机器设置 5
1. 网络配置 5
2. 修改主机名(hostname) 6
3. 关闭selinux 6
4. 子节点互通配置 6
5. 用户sudo功能设置 7
6. 挂载硬盘 7
7. 配置yum源 9
8. 关闭防火墙 9
9. 配置ssh免key(可以不配置) 10
10. 配置时间同步 10
11. 设置hadoop存储目录 11
12. 配置cm源文件 11
五. 安装 12
1. 安装cm 12
2. 安装cdh 22
六. 卸载 33
七. 参数调整 33
1. Mapreduce 33
2. Hdfs 34
3. Hbase 34
4. hive 35
5. Oozie 35
八. 常用命令 37
1. 安全模式 37
2. 查看block大小 37
九. 其他 37
1. 修改修改centos bogon主机名 37
2. 安装ganglia 38
3. 安装redis 38
4. 安装VMware客户端 39
5. 60天使用到期. 40
十. 遇到的问题 40
1. 缺包 40
2. Yum问题 41
3. 安装manager的时候遇到要关闭selinux 41
4. 操作系统版本 41
5. 启动service cloudera-scm-agent start 失败 42
2013-11-27
tomcat5 配置jndi
1. 修改tomcat server.xml <Host>节点内增加
2。 \apache-tomcat-5.5.26\conf\Catalina\localhost 目录下增加: XXX.xml
3。 项目xml文件下 <web-app>节点下增加
4。 apache-tomcat-5.5.26\common\lib 下增加数据库对应驱动jar
2010-12-28
Memcached Client 使用手册
Cache Client接口定义 2
Cache Client依赖及配置 2
Cache Client第三方依赖 2
Cache Client单客户端配置 2
Cache Client集群配置 2
Cache Client Demo 2
Cache Manager 2
2010-11-25
在Eclipse中导入dtd和xsd文件,使XML自动提示
在Eclipse中导入dtd和xsd文件,使XML自动提示
DTD 类型约束文件
1. Window->Preferences->XML->XML Catalog->User Specified Entries窗口中,选择Add 按纽
2.在Add XML Catalog Entry 对话框中选择或输入以下内容:
Location: F:\soft\programmingSoft\Framework\Ibatis\sql-map-config-2.dtd
Key Type: URI
2010-03-05
seam build.properties文件详解
#Generated by seam setup
#Mon Jun 08 21:07:28 CST 2009
#数据库密码
hibernate.connection.password=testSeamGen
#工作目录
workspace.home=E\:/workspace_seam
#实体存放路径
model.package=com.gresoft.core.entity
#数据源jar包
driver.jar=F\:\\jboss-seam-2.1.1.GA\\lib\\ojdbc14.jar
#action文件路径
action.package=com.gresoft.core.bo.inf
#测试文件路径
test.package=com.gresoft.core.test
2010-03-05
windows下mysql5安装图解
下面的是MySQL安装的图解,用的可执行文件安装的,详细说明了一下! 打开下载的mysql安装文件mysql-5.0.27-win32.zip,双击解压缩,运行“setup.exe”,出现如下界面:
2010-03-05
分页-含源码,页面,sql
1. 分页公共类:
com.gresoft.commons.page.Pager.
2. 分页公共页面:
在需分页页面中加入
<s:include value="/pages/include/page.jsp" />
注意:放到搜素的form中
3. 公共Dao SupportDao
com.gresoft.commons.dao
2010-03-05
redhat as4 下安装mysql5
Linux 下 MySQL 5 安装
RPM安装包安装方法:
一.先查看是否已经安装MySQL :
(1)查询
[root@yourdomainname/]# rpm -qa | grep mysql (或MySQL)
mysql-3.23.58-9
php-mysql-4.3.4-11
mod_auth_mysql-20030510-4.1
mysql-server-3.23.58-9
说明:rpm –qa | grep mysql 命令是为了把mysql相关的包都列出来,我上面的例子是fedora core2默认安装mysql的rpm软件包列表,如果是别的linux版本列出来的列表有可能会不一样,不过不用担心,不管是什么,卸载都从最下面的一个包开始,直到卸载掉第一个为止。
(2)卸载MySQL
2010-03-05
在Spring中使用dwr
在Spring中使用dwr,配置详解<servlet>
<servlet-name>dwr-invoker</servlet-name>
<servlet-class>uk.ltd.getahead.dwr.DWRServlet</servlet-class>
<init-param>
<param-name>debug</param-name>
2008-09-02
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人