owen-li-CSDN博客

转载 tcpdump抓包分析详解

Linux操作系统tcpdump抓包分析详解 PS：tcpdump是一个用于截取网络分组，并输出分组内容的工具，简单说就是数据包抓包工具。tcpdump凭借强大的功能和灵活的截取策略，使其成为Linux系统下用于网络分析和问题排查的首选工具。tcpdump提供了源代码，公开了接口，因此具备很强的可扩展性，对于网络维护和入侵者都是非常有用的工具。tcpdump存在于基本的Li

2017-06-07 19:49:33 1275

原创 hadoop-2.6.0下hive-1.2.2安装与配置

1集群组成集群建设与centos7上ServerNameHadoop ClusterZookeeperHBase Clusterserver1Name node & Resource manager,secondary name nodeyesmasterserver2Data node & Node manager

2017-05-13 22:15:39 1174

Hadoop为了防止数据丢失，启动了“安全模式”的设置，每次启动hadoop后一段时间内集群处于安全模式，该模式下集群会检查各节点文件块的记录，如果数据块中满足replication设置值的数据块的数量在总数据块数量中所占比例没有超过一定值（称为安全模式阀值，默认为0.999f），那么集群将持续处于安全模式，在该模式下，文件系统中的内容不允许修改也不允许删除，直到安全模式结束。安全模式主要是为了系

2017-05-13 21:23:46 3943

原创 virtualbox安装增强工具失败解决方法

在virtualbox中安装centos7后，再安装增强工具失败。安装出现如下错误：Building the VirtualBox Guest Additions kernel modules [FAILED] Your system does not seem to be set up to build kernel modules. Look at /var/log/vbo

2017-05-10 16:01:00 11972

转载 hadoop2.X如何将namenode与SecondaryNameNode分开配置

问题导读1.如何将namenode与SecondaryNameNode分开？2.SecondaryNameNode单独配置，需要修改那些配置文件？3.masters文件的作用是什么？我们这里假设你已经安装配置了hadoop2.2，至于如何配置可以参考，hadoop2.2完全分布式最新高可靠安装文档在这个基础上，我们对配置文件做一些修改：1.增加maste

2017-05-07 20:50:22 909

原创 ganglia监控hadoop集群配置

1：ganglia简介ganglia是UC Berkeley发起的一个开源集群监控项目，设计用于测量和监控数以千计的节点。主要是采用监控系统性能，如cpu，内存，硬盘使用率，I/O负载，网络流量情况等。ganglia采用多层次的结构模式，是的ganglia可以实现良好的扩展。gmond带来的负载非常少，这使得它成为在集群中各台计算机上运行的一段代码，而不会影响用户性能。2：g

2017-04-21 16:45:59 2984

原创 nginx实现反向代理和负载均衡

1：为什么要实现负载均衡：当一台服务器的单位时间内访问量越大的时候，服务器压力会越大，当一台服务器压力大得超过自身的承受压力的时候，服务器会崩溃，为了避免服务器崩溃，让用户更好的体验，我们通常通过负载均衡的方式来分担服务器的压力。那么什么是负载均衡呢？我们可以建立很多个服务器，这些服务器组成一个服务器集群，然后当用户访问我们的网站的时候，先访问一个中间服务器，再让这个中间服务器在服务器

2017-04-13 18:58:13 1274

原创 Centos7下yum安装配置nginx与php

开始安装Nginx和PHP-FPM之前,首先卸载系统中以前安装的Apache和PHP保证安装不会冲突。用root登录输入下面的命令：yum remve httpd* php*增加额外资源库默认情况下，CentOS的官方资源是没有php-fpm的, 但我们可以从Remi的RPM资源中获得，它依赖于EPEL资源。我们可以这样增加两个资源库：1：安装nginx：y

2017-04-13 09:34:29 19150

原创 HBase配置web界面

为了学习个Hbase，所有的配置都正常，也能正常启动，但就是访问不到web界面。用某老师的话说，这就有点闹心了哈！仔细一看原来版本不一样，1.0.1版本的hbase的master web 默认是不运行的，所以需要自己配置默认端口。在hbase-site.xml中加入一下内容即可 hbase.master.info.port60010每台机子都加一下，然后重启hbase即

2017-04-13 08:30:44 45683

原创 hadoop2.6集群下Zookeeper与Hbase的安装与配置

1下载zookeeper-3.4.5.tar.gz，hbase-1.0.1.1.tar.gz安装包解压ZooKeeper安装包，并将解压后的文件夹名称改为zookeeper：(1) 上传ZooKeeper安装包到 /usr/local/hadoop-2.6.0/，我这里使用的是3.4.5版本：(2) 解压ZooKeeper安装包，并将解压后的文件夹名称改为zookeeper执行命令

2017-04-13 08:07:19 2435 1

转载基于NFS共享存储kvm虚拟机动态迁移操作梳理

相比KVM虚拟机静态迁移中需要拷贝虚拟机虚拟磁盘文件，kvm虚拟机动态迁移无需拷贝虚拟磁盘文件，但是需要迁移到的虚拟主机之间需要有相同的目录结构虚拟机磁盘文件，本文这部分内容通过nfs来实现，当然也可以采用GFS2集群文件系统来实现,本文的动态迁移是基于共享存储动态迁移。KVM动态迁移目前有两种，一种是基于共享存储的动态迁移，一种是基于基于数据块的动态迁移，需要qemu-kvm-0.12.

2017-04-07 21:57:05 6152 2

原创 Centos7下批量创建用户

#!/bin/bash#this shell is use to bachusers if [ $# != 1 ];then echo "Usage:root/batchusers"elif [ -f $1 ];then for line in `cat $1` do name=`echo $line | cut -d : -f

2017-04-03 21:04:59 6827

原创 mysql管理数据库用户和访问权限

1：创建一个数据库用户：MariaDB [(none)]> create user jarry@localhost identified by "root";Query OK, 0 rows affected (0.00 sec)解释：该账户的用户名：jarry，主机名localhost,密码“root”该用户账户只能从localhost使用密码root进行连接，并且没有任何特权，

2017-03-31 15:24:30 18674 1

原创 eclipes远程连接hadoop 权限错误 Permission denied: user=root, access=WRITE, inode="/":hdfs:super

eclipse连接hadoop后运行报错，显示用户权限不够。17/03/30 21:14:29 WARN mapred.LocalJobRunner: job_local1761927032_0001org.apache.hadoop.security.AccessControlException: Permission denied: user=admin, access=WRITE, in

2017-03-30 23:33:49 2439 3

原创 Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Wi

eclipse远程连接hadoop2-6.0运行程序是报错：Exception in thread "main" Java.lang.UnsatisfiedLinkError: org.apache.Hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z解决方法设置环境变量 HADO

2017-03-30 23:01:05 11869

原创 eclipse远程连接hadoop-2.6.0

1：准备工作；工具：hadoop2-6.0 tar包eclipse连接hadoop的eclipse插件：hadoop-eclipse-plugin-2.6.0可以自行到官网下载，此处提供三者下载链接。百度云盘下载：链接：http://pan.baidu.com/s/1dFGIeXz 密码：j8sh2：下载hadoop2.6和eclipse解压到自己电脑硬盘。

2017-03-30 22:34:48 7497 1

原创 centos7KVM虚拟化常用虚机管理命令

1：kvm安装虚拟机；virt-install --name centos7.1 --boot network,cdrom,menu=on --ram 1024 --vcpus=1 --os-variant=rhel6 --accelerate --cdrom=/usr/local/iso/CentOS-7-x86_64-DVD-1511.iso --disk path=/usr/loc

2017-03-30 11:31:59 8594 2

原创 Mysql数据库备份与恢复

一：前言：备份数据库非常重要，数据库通常包含公司的大部分任务关键数据（销售、客户等待）执行备份是系统管理员能够在下列几种类型时间之后恢复数据：1：操作系统故障2：电源故障3：文件系统崩溃4：硬件问题5：安全漏洞6：数据库损坏7：数据中毒二：数据库备份方法：逻辑备份：纯文本文件中到处信息和记录特征1.数据库结构是通过查询数据库检索的；2.可移植性高

2017-03-29 22:38:31 1071 1

原创 nginx简介与安装配置

1nginx简介：是个服务器，主要是php常用到的服务器。Nginx ("engine x") 是一个高性能的 HTTP 和反向代理服务器，也是一个 IMAP/POP3/SMTP 服务器。 Nginx 是由 Igor Sysoev 为俄罗斯访问量第二的 Rambler.ru 站点开发的，第一个公开版本0.1.0发布于2004年10月4日。其将源代码以类BSD许可证的形式发布，因它的稳定

2017-03-28 14:58:24 1331

原创 webmin脚本安装与配置

1：What is webminWebmin是目前功能最强大的基于Web的Unix系统管理工具。管理员通过浏览器访问Webmin的各种管理功能并完成相应的管理动作。目前Webmin支持绝大多数的Unix系统，这些系统除了各种版本的linux以外还包括：AIX、HPUX、Solaris、Unixware、Irix和FreeBSD等 Webmin 让您能够在远程使用支持 HTTPS (SSL

2017-03-23 22:21:04 3689 2

转载 hadoop 启动指令

start-all.sh 启动所有的Hadoop守护进程。包括NameNode、 Secondary NameNode、DataNode、JobTracker、 TaskTrackstop-all.sh 停止所有的Hadoop守护进程。包括NameNode、 Secondary NameNode、DataNode、JobTracker、 TaskTrackstart-dfs.sh 启动Ha

2017-03-22 15:23:12 1176

原创 linux正则表达式详解

1：什么是正则表达式：简单的说，正则表达式就是处理字符串的方法，它是以行为单位进行字符串的处理行为，正则表达式通过一些特殊符号的辅助，可以让用户轻易达到查找，删除，替换某特定字符串的处理程序。2：一些参数：grep [-A] [-B] [--color=auto] '收索字符串' filename-A :后面可加数字，为after的意思，除了列出该行以外，后续的n行也被列出来。

2017-03-20 21:01:38 6152

转载 10 个你需要了解的 Linux 网络和监控命令

注意啦！10 个你需要了解的 Linux 网络和监控命令下面列出来的10个基础的每个Linux用户都应该知道的网络和监控命令。网络和监控命令类似于这些：hostname,ping, ifconfig, iwconfig, netstat, nslookup, traceroute, finger, telnet, ethtool 用于查看linux服务器ip地址,管理服

2017-03-16 11:55:18 880

转载解决PHP date调用警告：It is not safe to rely on the system's timezone settings

PHP调试的时候出现了警告:It is not safe to rely on the system解决方法,其实就是时区设置不正确造成的,本文提供了3种方法来解决这个问题。实际上，从PHP 5.1.0开始当对使用date()等函数时，如果timezone设置不正确，在每一次调用时间函数时，都会产生E_NOTICE 或者 E_WARNING 信息，而又在php中，date.timezo

2017-03-08 09:55:31 2562

原创 Redhat7修复常见启动问题

一：恢复root密码root密码重置请点击跳转：二：修复启动时候出现的文件系统问题：/etc/fstab中的错误和损坏的文件系统可能会阻止系统启动。在大多数情况下，systemd实际上会在超时后继续启动，或者将至需要提供root密码的紧急修复shell.x。下表列出了常见的错误及结果：在所有的情况下，管理员都可以使用emergency.target目标来

2017-03-08 09:38:55 6379

原创设置Redhat7的启动级别

Redhat7和Redhat6的系统级别完全不同：对比一、切换系统运行级别使用命令：init 0-6 0 关机。1 单用户模式，root权限，用于系统维护，禁止远程登陆，就像Windows下的安全模式登录。2 多用户模式，没有NFS网络支持。3 完整的多用户文本模式，有NFS，登陆后进入控制台命令行模式。4 系统未使用，保留一般不用，在一些特

2017-03-08 09:01:56 5871

原创 linux7修改root密码

1：开机键盘按e计入编辑界面：光标移到到linux16开头的那一行，然后按按end键将光标移至最行末，敲一个空格然后敲如下参数rd.break：如图所示：

2016-11-09 21:20:21 10606

原创 centos7修改主机名方法

CentOS7修改服务器主机名方法CentOS7下修改主机名第一种：hostname 主机名01.hostname 主机名称 hostname xxx这种方式，只能修改临时的主机名，当重启机器后，主机名称又变回来了。centos7修改主机名和7以下的版本都不一样，这就搞得很懵逼了，度娘还是很强大滴。第二种：hostnamectl set-hostna

2016-10-19 22:56:23 49598

转载 linux at和crontab命令解析

在linux系统中你可能已经发现了为什么系统常常会自动的进行一些任务？这些任务到底是谁在支配他们工作的？在linux系统如果你想要让自己设计的备份程序可以自动在某个时间点开始在系统底下运行，而不需要手动来启动它，又该如何处置呢？这些例行的工作可能又分为一次性定时工作与循环定时工作，在系统内又是哪些服务在负责？还有，如果你想要每年在老婆的生日前一天就发出一封信件提醒自己不要忘记，linux系统下

2016-09-29 22:10:08 752

原创利用RZ和SZ命令在xshell中传输文件

通过XShell，使用linux命令sz可以很方便的将服务器上的文件下载到本地，使用rz命令则是把本地文件上传到服务器。首先得保证服务器里面安装了lrzsz yum install lrzsz rz和sz这两个东西，就两个字母，每次都容易记错了。 sz中的s意为send（发送），告诉客户端，我（服务器）要发送文件 send to cilen

2016-09-28 19:48:05 5991

原创 centos下hadoop2.7.1伪分布式搭建

Hadoop有三种运行模式，分别如下：单机(非分布式)模式伪分布式(用不同进程模仿分布式运行中的各类节点)模式完全分布式模式注：前两种可以在单机运行，最后一种用于真实的集群环境，通常用在生产环境上。我们可以搭建本地的伪分布式模式来模拟分布式环境的执行。下面我们将搭建hadoop2.7.1伪分布式。可以按照官方文档进行安装。官方文档链接二、软硬

2016-09-13 20:58:03 3801

原创 hadoop常用命令

启动Hadoop进入HADOOP_HOME目录。执行sh bin/start-all.sh关闭Hadoop进入HADOOP_HOME目录。执行sh bin/stop-all.sh 1、查看指定目录下内容Hadoop dfs –ls [文件目录]eg: hadoop dfs –ls /user/wangkai.pt2、打开某个已存在

2016-09-10 19:21:05 13498

转载 hadoop自带例子wordcount的具体运行步骤

1.在linux系统中，所在目录“/home/kcm”下创建一个文件夹input[ubuntu@701~]$ mkdir input2.在文件夹input中创建两个文本文件file1.txt和file2.txt，file1.txt中内容是“hello word”,file2.txt中内容是“hello Hadoop”、“hello mapreduce”(分两行)。[ub

2016-09-10 19:10:00 3221

转载 mysql 远程连接数据库的二种方法

一、连接远程数据库：1、显示密码如：MySQL 连接远程数据库（192.168.5.116），端口“3306”，用户名为“root”，密码“123456”C:/>mysql -h 192.168.5.116 -P 3306 -u root -p1234562、隐藏密码如：MySQL 连接本地数据库，用户名为“root”，C:/>mysql -h localhost

2016-08-17 12:29:39 540

原创 hadoop源码编译环境安装配置

hadoop运行报错：在运行hadoop的时候，出现警告：WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform… using builtin-java classes where applicable原因：hadoop官方编译的tar包是32位的，我们的系统是64位的，故

2016-07-19 10:56:12 2531

转载 centos忘记root密码，重新设置的方法

在虚拟机安装了Centos，今天要开机却忘记了密码，于是开始百度查找重新设置的方法，经过实验操作，确实有效，现将方法记录如下：（1）重新启动Centos，在启动过程中，长按“ESC”键，进入GNU GRUB界面。（GNU GRUB是一个来自GNU项目的多操作系统启动程序。GRUB是多启动规范的实现，它允许用户可以在计算机内同时拥有多个操作系统，并在计算机启动时选择希望允许的操作系统

2016-07-18 09:57:12 4589

原创 html5常用标签汇集

文本标记语言，即HTML（Hypertext Markup Language），是用于描述网页文档的一种标记语言。HTML之所以称为超文本标记语言，是因为文本中包含了所谓“超级链接”点。所谓超级链接，就是一种URL指针，通过激活（点击）它，可使浏览器方便地获取新的网页。这也是HTML获得广泛应用的最重要的原因之一。 HTML是一种规范，一种标准，它通过标记符号来标记要显示的

2016-07-18 09:50:29 13823

原创 centos下hadoop-2.6.0完全分布式搭建

一、Hadoop运行模式：Hadoop有三种运行模式，分别如下：单机(非分布式)模式伪分布式(用不同进程模仿分布式运行中的各类节点)模式完全分布式模式注：前两种可以在单机运行，最后一种用于真实的集群环境，通常用在生产环境上。我们可以搭建本地的伪分布式模式来模拟分布式环境的执行。二、软硬件设备及安装前环境搭建：操作系统：CentOS 6.5软件版本：hadoop-2.

2016-07-15 23:40:47 13748

原创 centos安装与配置

1、准备安装 1.1 系统简介　　CentOS 是什么？　　CentOS是一个基于Red Hat 企业级 Linux 提供的可自由使用的源代码企业级的 Linux 发行版本。每个版本的 CentOS 都会获得七年的支持（通过安全更新方式）。新版本的 CentOS 每两年发行一次，而每个版本的 CentOS 会定期（大概每六个月）更新一次，以便支持新的硬件。这样，建立一

2016-07-13 20:28:34 9235

原创 linux常用操作命令

常用指令ls　　显示文件或目录-l 列出文件详细信息l(list)-a 列出当前目录下所有文件及目录，包括隐藏的a(all)mkdir 创建目录-p 创建目录，若无父目录，则创建p(parent)cd

2016-05-31 21:05:03 399

ocp-052最新题库-2019年3月最新

ocp-052最新题库，2019年3月考过后整理更新。覆盖率以及准确率都在百分之90以上。答案正确率检验过。

2019-03-12

构建最高可用Oracle数据库系统

《构建最高可用Oracle数据库系统(Oracle11gR2RAC管理维护与性能优化)》从硬件和软件两个维度系统且全面地讲解了Oracle11g R2RAC的架构、工作原理、管理及维护的系统理论和方法，以及性能优化的技巧和最佳实践，能为构建最高可用的Oracle数据库系统提供有价值的指导。它实践性非常强，案例都是基于实际生产环境的，为各种常见疑难问题提供了经验性的解决方案，同时阐述了其中原理，授人以鱼，也授人以渔

2018-10-29