scfial-CSDN博客

原创 ambari spark2.3.2 集成hive及ES问题集

1、beeline出现org.apache.thrift.TApplicationException: Required field 'client_protocol' is unset! Struct:TOpenSessionReq(client_protocol:null, configuration:{set:hiveconf:hive.server2.thrift.resultset.de...

2019-07-02 19:08:09 2544 4

原创 hadoop2.6及HBase1.1节点日常维护

Hadoop DataNode节点添加： 1、修改hdfs-site.xml文件，添加如下配置 2、在etc/hadoop目录slaves文件添加节点 3、将修改的hdfs-site.xml、slaves文件分发到各个节点,然后执行 hdfs dfsadmin -refreshNodes

2015-12-18 14:51:06 731

原创 oozie4.1环境搭建

1)、配置环境变量： export OOZIE_HOME=/home/hadoop/CDH5/oozie-4.1.0-cdh5.4.8 export OOZIE_CONFIG=$OOZIE_HOME/conf 2)、修改conf/oozie-site.xmloozie.service.JPAService.create.db.schematrueoozi

2015-12-16 17:30:53 921

原创 elasticsearch2.1 elasticsearch-hadoop安装

1、下载elasticsearch-hadoop-2.2.0beta1.jar，拷贝到hive的lib目录中，然后以如下方式打开hive命令窗口：bin/hive -hiveconf hive.aux.jars.path=/root/hive/lib/elasticsearch-hadoop-2.2.0beta1.jar这个也可以写在hive的配置文件中， h

2015-12-16 17:20:15 3025

原创 Elasticsearch2.1.0安装中文分词插件ik1.6

1、到github网站下载源代码，网站地址为：https://github.com/medcl/elasticsearch-analysis-ik 2、将解压目录文件中config/ik文件夹复制到ES安装目录config文件夹下。 3、将打包得到的zip文件解压,复制elasticsearch-analysis-ik-1.6.0.jar、httpclient-4.4.1.

2015-12-16 16:51:32 2027

原创 Oralce分析函数

sum(sale) over(partition by product_line order by week rows between unbounded preceding and (current row)/(unbounded following)) sale列的动态求和lag/lead(sale,n,sale) over(partition by product_line or

2014-04-08 00:43:05 588