- 博客(11)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 训练九：hive安装
1、到下载地址http://apache.fayea.com/hive/，下载apache-hive-2.3.3-bin.tar.gz，解压tar -xzvf apache-hive-2.3.3-bin.tar.gz 2、配置环境变量sudo vim /etc/profile # hiveexport HIVE_HOME=/home/hadoop/tools/hiveexport PATH...
2018-05-10 11:01:29
183
原创 训练八：sqoop+pyspark实战
1. 下载安装下载地址： http://archive.cloudera.com/cdh5/cdh/5/sqoop-1.4.6-cdh5.9.3.tar.gz 下载 sqoop-1.4.6-cdh5.9.3.tar.gz解压后安装在/home/hadoop/tools/文件夹下2. 修改环境变量sudo vim /etc/profile# SQOOPexport SQOOP_HOME=/home...
2018-05-10 10:47:15
520
原创 训练七：集群启动
1. 各组件启动顺序zookeeper--hadoop--hbase--kafka--storm--spark2. 集群启动shell命令#!/bin/bash# nimbus节点nimbusServers='master'# supervisor节点supervisorServers='master slave01 slave02'# all节点BROKERS="master sla...
2018-05-10 10:22:56
249
转载 训练六：spark安装配置
1. 配置scala# scala# 在最后添加下面内容export SCALA_HOME=/home/hadoop/tools/scalaexport PATH=$PATH:${SCALA_HOME}/bin2. 配置spark2.1 环境变量# sparkexport SPARK_HOME=/home/hadoop/tools/spark2export PATH=$PATH:${SP...
2018-05-10 10:19:27
172
转载 训练五：storm安装部署
1 . 下载解压安装stormtar -zxvf apache-storm-1.2.1.tar.gz解压安装包到“/home/hadoop/tools/storm"文件夹中2. 修改conf下"storm.yaml"配置文件# 注意：严格遵守ymal格式，相同层级关系必须左对齐storm.zookeeper.servers: - "master" - "slave01" ...
2018-05-10 10:15:26
139
转载 训练四：kafka安装部署
1. 下载好的Kafka安装包解压tar -zxvf kafka_2.9.1-0.8.2.1.tgz2. 配置环境变量sudo vim /etc/profileexport KAFKA_HOME=/home/hadoop/kafka_2.11-0.8.2.1export PATH=$PATH:$KAFKA_HOME/bin3. 配置Kafka的zookeeper.properties # Lic...
2018-05-10 10:01:09
403
转载 训练三：hbase安装部署
3.1 安装过程3.1.1 下载HBase安装包hbase-2.0.0-bin.tar.gztar -zxf hbase-2.0.0-bin.tar.gz然后将其移动到/home/hadoop/tools/文件夹下3.1.2 设置环境变量1. 修改系统环境变量sudo vim /etc/profileexport HBASE_HOME=/app/hbase-0.96.2export PATH=$...
2018-05-10 09:37:57
330
转载 训练二：hadoop安装配置
配置JDK1.8Hadoop3.1.0要求最低JDK8.0，到官网下载压缩版本解压至任意目录，然后添加环境变量export JAVA_HOME=/home/hadoop/tools/jdk8export JRE_HOME=${JAVA_HOME}/jreexport CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/libexport PATH=${JAVA_...
2018-05-10 09:22:22
140
转载 训练一：zookeeper安装配置
Zookeeper安装配置ZooKeeper服务器是用Java编写创建，它运行在JVM。所以需要使用JDK 6或更高版本。 第1步：验证安装Java 假设你已经在系统上安装Java环境。只需使用下面的命令验证它。 $ java -version如果您的计算机上已经安装了Java，那么可以查看已安装的Java版本。否则，请执行以下的简单步骤来安装Java最新版本。 步骤1.1：下载JDK jdk-...
2018-05-10 09:15:58
139
转载 ubuntu18.04环境下hadoop3.1,spark虚拟机分布式安装笔记
环境：Ubuntu18.04 LTS系统虚拟机：选择的是Virtul Box，占用资源比较少 安装三个虚拟机，主机名分别是：master、slave01、slave02，用户名都设置为hadoop设置网络，桥接模式，可以实现局域网访问系统安装完毕后，更新系统，sudo apt updatesudo apt upgrade同时安装vimsudo apt install vim修改hosts修改ho...
2018-04-27 12:48:34
1158
原创 ubuntu 16.04 mysql安装及远程配置
1、命令安装mysqlsudo apt install mysql-serversudo apt isntall mysql-clientsudo apt install libmysqlclient-dev2. 以上3个软件包安装完成后，使用如下命令查询是否安装成功：jiahe@jiahe-nlp:~$ sudo netstat -tap | grep mysqltcp 0 ...
2018-04-10 10:54:42
153
jclasslib_win64_5_3_1-64位，最新版
2019-05-07
主成分分析
2012-08-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人