pzhu_ye-CSDN博客

原创 Hadoop 安装

1.虚机拓扑 2.下载hadoop,使用版本hadoop-0.20.2http://archive.apache.org/dist/hadoop/core/hadoop-0.20.2/3.配置所有节点Host文件，保证集群内部名称解析4.建立专门的运行hadoop的用户，grid5.配置集群内SSH免密码登录6.剩下的参加PPT7.安装过程中需要注意各节点

2014-02-13 16:37:26 425

原创 Hadoop-实现集群内免密码登录

1.配置两机之间免密码登录http://hi.baidu.com/nwpujunesky/item/eac7f9fe0976020185d2787a其中需要注意的是./ssh authorized_keys权限需要配置为600，否则配置会失败参见http://blog.csdn.net/budapest/article/details/80229262.使用脚本配置集群互免密

2014-02-10 16:05:48 566

原创 CACTI环境搭建

1.基本的CACTI环境搭建http://liyaoyi.blog.51cto.com/442933/846891一定注意安装所有相关的软件包2.cacti在配置snmp时，按如下方法配置V3进行加密传输 SNMP 的第三个版本 SNMPv3是一个比前面的版本更加安全的选择，因为它加密了所有的数据并且采用用户名口令组合来验证客户端. 用户名在文件/etc/snmp/snmp

2014-01-03 16:05:58 558

原创数据库使用拾遗

1.对数据列统计主要用到group by例句如下 select count(id),swname from log group by swname;

2014-01-02 16:13:52 374

原创 4.数据高可用搭建--数据库

受限对两个互备的站点进行数据同步由于没有独立的数据库存储服务器。Mysql数据同步还是使用rsync+inotify，同步数据文件/var/lib/mysql由于从服务器是做备份，所以及时性基本满足要求有一点需要注意，数据文件同步到从服务器上之后，mysql需要重启才能看到刚才更新的数据，这个可以在故障切换时，自动重启mysql满足要求。

2013-12-04 10:44:20 425

原创 3.数据高可用搭建--静态网站

数据高可用，分为静态的网站数据和数据库数据首先进行对静态数据的高可用，采用rsync+inotify: a.rsync的搭建分为1.配置文件，2.开启守护进程xinetd对rsync的监听.3.创建同步目录（指定则不需要）4.配置同步密码1.配置文件实例 /etc/rsyncd.conf uid = nobody gid=nobody

2013-12-02 22:26:19 437

原创 2.系统管理之----日志管理

1.系统日志，配置文件 /etc/rsyslog.conf(6.0之前是syslog.conf) 这里引用一下，说明了系统日志的部分功能http://tech.ddvip.com/2013-06/1372063143197735.html 分析下其他工具结合syslog做日志收集，以keepalive做分析 a.首先配置keepalived，将日志发给syslog来

2013-11-29 16:34:00 435

原创 1.系统安装

1.选择的版本为centos 6 64位系统2.硬盘大小60G，开始划分分区 3.配置本地yum源（由于是在内网） a.挂载光驱：mount (目标) （本地路径） mount /dev/sr) /mnt/centos b.vim /etc/yum.repos.d/CentOS-Base.repo[yum]name=yumbaseu

2013-11-29 14:40:12 463

原创 python连接mysql时出现DeprecationWarning: the sets module is deprecated

以下修改部分为转载，不过在我实际使用过程中，总结亮点1.以下提到的修改部分为 mySQLdb的源码安装包里面的__init__.py2.基于以上，所以在修改之后需要重新编译安装，才能生效警告：Python26\lib\site-packages\MySQLdb\__init__.py:34: DeprecationWarning: the sets module is de

2013-11-19 13:15:43 4233

原创 ipython2.7安装时候无法使用tab补全，删除，左右等键

ipython tab补全等功能需要readline的支持。在python make阶段，注意观察，最后会出一个提示，Python build finished, but the necessary bits to build these modules were not found:_curses _curses_panel _sqlite3

2013-11-13 11:11:09 1776

原创读Python在linux系统运维中的应用http://wuhan88.bitbucket.org

一些问题 1. http返回头中的chunked是什么意思答：HTTP协议中使用Content-Length这个头来告知数据的长度。然后，在数据下行的过程中，Content-Length的方式要预先在服务器中缓存所有数据，然后所有数据再一股脑儿地发给客户端。如果要一边产生数据，一边发给客户端，WEB 服务器就需要使用"Transfer-Encoding: chun

2013-10-31 16:16:19 850

原创追忆

繁星邀月赏人间，天地一色共缠绵。 击水为乐惊拍岸，我辈逍遥羡神仙。

2010-07-07 21:38:00 282

hi, 今天早做业务的时候，出了点问题，我承认我有责任，因为拿了钱就要做好，但是可悲的是，我的工作是需要100分，我只做了90，准确的说只要有差错就是0分。哎，说实话不能全怪我的，我一新人什么还不是很上道，以一个成熟的工程师标准来要求自己，好的方面就是可以让自己高标准的完成业务，但是这也在无形之中不断打击我的自信，并且leader毫无耐心一味指责的态度让我极不能接受，以为自己的权威必须树立在别人一直说是这个字上，其实他错的他妈的一塌糊涂，止住，不要影响自己的水准；

2010-07-05 23:07:00 451

原创写下我的第一天

hi, 一直想了很久，想要找个地方写下自己的心情，虽然以前有写日记在本子的习惯，但日子久了都不知道被我藏到哪儿去了。blog还真是个好东西，至少你不用费心去保管他。以前也在人人网，QQ空间写，但是上面都是些熟人，写东西难免有点估计，所以我就想找个安静的地方写下自己的心情，毫无顾忌的写下自己的真是感受。 今天来写这篇文章还有个背景； 刚刚从学校毕业找了份，看起来还不错的工作，但是和我的初衷实在是有很大差距；以前在学校学习的开发工作，几乎全是自学，也和同学

2010-07-04 14:39:00 285

pzhu_ye的专栏