- 博客(84)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 win10 右键添加命令行打开
win10 右键添加命令行打开新建 a.reg ，内容添加如下，运行后右键就会出现 OpenCMDHereWindows Registry Editor Version 5.00[HKEY_CLASSES_ROOT\Directory\Background\shell\OpenCMDHere]"ShowBasedOnVelocityId"=dword:00639bc8[HKEY_CL...
2020-04-12 10:58:25
198
原创 docker 安装和使用
文章目录安装配置国内镜像容器路径daemon.json详解docker 基本操作安装centos7yum install -y yum-utils device-mapper-persistent-data lvm2 #相关依赖yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/doc...
2020-03-29 15:01:39
250
原创 centos7 修改静态地址设置
vi /etc/sysconfig/network-scripts/ifcfg-enp0s3BOOTPROTO=“none”ONBOOT=yesIPADDR=“192.168.1.150”PREFIX=“24”GATEWAY=“192.168.1.1”DNS1=“192.168.1.1”重启网卡systemctl restart network.service...
2020-03-17 20:34:15
350
1
原创 samba安装
安装yum install samba samba-client samba-swat -y# samba-4.8.3-4.el7.x86_64查看安装情况rpm -qa|grep samba修改配置文件cp /etc/samba/smb.conf /etc/samba/smb.conf.bakvi /etc/samba/smb.conf配置文件[global] workgrou...
2020-03-17 20:33:29
217
原创 maven 代码混淆
proguard代码混淆<!-- Build Settings --> <build> <plugins> <plugin> <groupId>com.github.wvengen</groupId> <artifactId>proguard-maven-plugin</artifactId>...
2020-03-17 20:26:49
2612
1
原创 maven换阿里镜像仓库
<?xml version=”1.0” encoding=”UTF-8”?><!–为仓库列表配置的下载镜像列表。高级设置请参阅镜像设置页面 –><settings xmlns=”http://maven.apache.org/SETTINGS/1.0.0“xmlns:xsi=”http://www.w3.org/2001/XMLSchema-instance“...
2020-03-17 20:24:01
341
原创 mysql在linux上安装
检查是否安装mysql rpm -qa | grep mysql如果有 卸载mysql rpm -e mysql // 普通删除模式 rpm -e --nodeps mysql // 强力删除模式，如果使用上面命令删除时，提示有依赖的其它文件，则用该命令可以对其进行强力删除通过yum来进行mysql的安装 yum list | grep mysql...
2020-03-17 20:21:57
199
原创 mysql 编译安装
卸载旧版本rpm -qa | grep mysqlrpm -e --nodeps mysql下载MySQL 5.6.14cd /usr/local/src wget http://cdn.mysql.com/Downloads/MySQL-5.6/mysql-5.6.31.tar.gz tar -zxvf mysql-5.6.31.tar.gz cd mysql-5....
2020-03-17 20:20:05
123
原创 mysql 配置文件
一[mysqld]basedir=/usr/local/mysql/mysql-5.6.31/datadir=/usr/local/mysql/mysql-5.6.31/datasocket=/usr/local/mysql/mysql-5.6.31/mysql.sockuser=mysqlport=3306lower_case_table_names=1event_schedul...
2020-03-17 20:19:36
128
原创 neo4j使用
1. 基础概念实体 Nodes关系 RelationShip属性 Properties标签 Label2.资源描述框架这是一个相关概念 markRDF （Resource Description Framework）使用语法名称 Cypher官方实例MATCH (actor:Person)-[:ACTED_IN]->(movie:Movi...
2020-03-17 20:17:41
435
原创 redis 编译安装 及使用
准备yum -y install tcl下载解压cd /usr/local/src wget http://download.redis.io/releases/redis-3.2.1.tar.gz tar -zxvf redis-3.2.1.tar.gz cd redis-3.2.1编译安装mkdir /usr/local/redis/redis-3.2.1make &am...
2020-03-17 20:16:50
327
原创 redis 压力测试
/usr/local/redis/bin/redis-benchmark --help Usage: redis-benchmark [-h ] [-p ] [-c ] [-n <requests]> [-k ] -h Server hostname (default 127.0.0.1) -p Server port (default 6379) -s Server soc...
2020-03-17 20:16:17
455
原创 ntp时间同步
安装ntpcentos 6.4已经自带了ntp了，无需安装检查是否已安装了ntp rpm -qa | grep ntp如果需要安装：yum -y install ntp设置开机启动检查是否开机启动sudo chkconfig --list ntpd设置开机启动sudo chkconfig ntpd on手工同步一下时间为了防止时间相差过大，请先手工同步一下服务端时间servi...
2020-03-16 22:40:27
1383
原创 linux 桌面安装
安装步骤参见：CentOS 7命令行安装GNOME、KDE图形界面https://www.linuxidc.com/Linux/2018-04/152000.htmXmanager远程桌面连接CentOS7https://blog.csdn.net/one312/article/details/81063552xmanager5连接centos7https://www.cnblogs....
2020-03-16 22:37:25
443
原创 hadoop 安装配置
文章目录大数据环境安装机器准备机器配置静态IP配置主机名配置linux 无密码登录ntp时间同步编辑配置文件 hadoop1 hadoop2 hadoop3 都需要编辑jdk 安装zookeeper安装zookeeper 使用hadoop 配置安装配置初次启动hadoop验证测试集群工作状态的一些指令 ：3台主机部署安装日常启动和停止开机启动脚本大数据环境安装机器准备机器配置静态IP配置...
2020-03-16 22:31:50
146
原创 centos ping 未响应
1 查看ifcfg-enp0s3 未发现异常2 重启网卡 未发现异常3 查看虚拟机网络 nat转换 修改为桥接模式后网络畅通
2020-03-16 22:30:32
1417
原创 windows下jdk环境变量配置
JAVA_HOMEC:\Program Files\Java\jdk1.8.0_111CLASSPATH.;%JAVA_HOME%\lib;%JAVA_HOME%\lib\tools.jarPATH%JAVA_HOME%\bin;%JAVA_HOME%\jre\bin;
2020-03-16 22:29:45
88
原创 anaconda2 使用
Conda的环境管理# 创建一个名为python34的环境，指定Python版本是3.4（不用管是3.4.x，conda会为我们自动寻找3.4.x中的最新版本）conda create --name python34 python=3.4# 安装好后，使用activate激活某个环境activate python34 # for Windowssource activate pytho...
2020-03-15 10:46:57
745
原创 jupyter notebook
生成密码打开ipython, 创建一个密文密码In [1]: from notebook.auth import passwdIn [2]: passwd()Enter password: Verify password: Out[2]: 'sha1:8f712e0271c9:04adafdaa079bf151da7ac4343e473e11d0c2be3'修改默认配置文件pip...
2020-03-15 10:43:18
88
原创 Linux下搭建DNS教程
1.安装DNS服务器组件yum install -y bind bind-chroot bind-utils2编辑DNS主配置文件vi /etc/named.conflisten-on port 53 { any; };//listen-on-v6 port 53 { ::1; };allow-query { any; };增加zonevi /etc/named.rfc1...
2020-03-15 10:40:57
154
原创 maven 使用
<build> <plugins> <plugin> <groupId>org.apache.maven.plugins</groupId> <artifactId>maven-compiler-plugin</artifactId> ...
2020-03-15 10:33:08
141
原创 azkaban 安装
准备工作1） 创建相应的文件夹mkdir /opt/azkaban-3.342） 编译环境yum -y install make gcc-c++ cmake bison-devel ncurses-devel构建azkaban获取源代码git clone https://github.com/azkaban/azkaban.git2.进入目录执行项目构建cd /opt/azk...
2020-03-15 10:32:21
215
1
原创 flume 编译
flume 笔记源码编译下载源码https://github.com/apache/flume/tree/release-1.7.0编译mvn install -Dmaven.test.skip=true重要事情说三遍一定要开代理，否则很难编译通过一定要开代理，否则很难编译通过一定要开代理，否则很难编译通过编译包位置apache-flume-1.7.0-src\flume...
2020-03-15 10:30:41
552
原创 git 笔记
客户端 git for windows、配置git config --global user.name "xxx"git config --global user.email "[email protected]"假如说 客户端乱码了 可以设置git config --global gui.encoding utf-8如果客户端无法登陆，先将ssh-key上传到github上git 常用...
2020-03-15 10:29:22
78
原创 windows 命令
窗口失去焦点后不能切换1、按“Win+R”打开“运行”窗口，输入“regedit”命令后按回车打开注册表；2、找到HKEY_CURRENT_USER\Control Panel\Desktop里面ForegroundLockTimeout的选项；3、把这个数值改成10进制的任何6位数以上(系统默认200000毫秒/十六进制30d40)；win server 2012 开启硬盘监控disk...
2020-03-15 10:28:06
248
原创 kafka配置和使用
文章目录官方文档下载安装配置启动停止消费者生产者其他查看topic的详细信息查看所有topic为topic增加副本创建topic为topic增加partition.kafka生产者客户端命令kafka消费者客户端命令kafka服务启动删除topic查看consumer组内消费的offset最大字节调整kafka 查询所有分区数官方文档http://kafka.apache.org/下载安装...
2020-03-15 10:27:32
1107
原创 hadoop2.6.2centos 配置文件说明
文章目录hadoop2.6.2centos 配置文件说明1修改hadoo-env.sh2修改core-site.xml3修改hdfs-site.xml4修改mapred-site.xml5修改yarn-site.xml6修改slaves7配置免密码登陆hadoop2.6.2centos 配置文件说明hadoop2.0的配置文件全部在$HADOOP_HOME/etc/hadoop下cd $HA...
2020-03-15 10:16:13
307
原创 hive 配置
hive 配置下载hive本次使用版本 2.3.0tar -zxvf apache-hive-2.3.0-bin.tar.gzcd /opt/apache-hive-2.3.0-bin拷贝mysql 驱动jar 到lib目录下mkdir logsmkdir tmphive配置文件cp /opt/apache-hive-2.3.0-bin/conf/hive-default.xml...
2020-03-15 10:12:59
261
原创 hive 使用
hive动态分区设置set hive.exec.dynamic.partition=true;(可通过这个语句查看：set hive.exec.dynamic.partition;) set hive.exec.dynamic.partition.mode=nonstrict; SET hive.exec.max.dynamic.partitions=100000;(如果自动分区数大于这个参...
2020-03-15 10:12:13
239
原创 hive 常见问题
hive 常见问题点击hive表时，hiveserver2 挂掉 out of memory原因 flume 导入的orc 格式 ，建表语句存储格式 textfile 不匹配导致修改方案 建表语句和hdfs格式一致即可建表时 乱码解决修改表字段注解和表注解alter table COLUMNS_V2 modify column COMMENT varchar(256) chara...
2020-03-15 10:11:17
236
原创 sqoop 安装及使用
文章目录#sqoop学习笔记sqoop官方用户手册：http://sqoop.apache.org/docs/1.4.6/SqoopUserGuide.html简介： sqoop是工具，一个可以把ORACLE、MYSQL中的数据导入到HDFS、HIVE、HBASE中（反过来也可以）的工具。下面是一些使用的例子。##sqoop导入导出#从Mysql中抽取数据到HDFSsqoop impo...
2020-03-15 10:05:11
156
原创 spark安装配置
##spark安装下载spark2.2.0下载地址上传spark安装java参见jdk安装安装scalascala安装###安装hadoophadoop分布式安装解压tar -zxvf spark-2.2.0-bin-hadoop2.7.tgz mv spark-2.2.0-bin-hadoop2.7 spark-2.2.0配置环境变量vi /etc/profile...
2020-03-15 10:03:02
239
原创 spark使用
文章目录spark sql如果在eclipse上直接调试先看一下WordCount的代码action操作#spark学习笔记##tipsspark sqlspark-sql --executor-memory 4G --total-executor-cores 20如果在eclipse上直接调试conf.setMaster("local");可以直接在本地调试 ;也可设置成本地模式...
2020-03-10 20:42:37
424
原创 hadoop使用
修复hdfs 受损的block检查hdfs block 是否因为租约问题无法读写hadoop fsck /user/hive/warehouse/ods_aquarius30.db/orderinfo/st_date=20171018 -openforwrite | egrep -v ‘^\.+$‘ | egrep "MISSING|OPENFORWRITE" | grep -o "/[^ ]...
2020-03-10 20:32:22
62
原创 spark eclipse 环境配置
eclipse安装版本本是eclipse oxygen 也可以直接用去下scala 的eclipse 版本eclipse scala 插件安装help->eclipse market 搜索 scala 找到scala ide 插件 安装 重启hadoop util 安装github地址maven 包配置参照列子demo##其他配置Failed to locate...
2020-03-10 20:30:16
158
原创 mysql 使用
mysql 读写超时时间show variables like ‘%timeout%’;set global net_read_timeout=600;set global net_write_timeout=600;mysql 开启binlogserver_id=101log_error = /opt/lampp/var/error.loglog_bin = /opt/lampp/...
2020-03-10 20:28:52
173
原创 flume安装配置
flume安装配置下载flumewget http://mirror.bit.edu.cn/apache/flume/1.8.0/apache-flume-1.8.0-bin.tar.gz /opt/apache-flume-1.8.0-bin.tar.gzcd /opt/tar zxvf apache-flume-1.8.0-bin.tar.gzcd apache-flume-1.8....
2020-03-10 20:27:23
121
原创 linux 命令
linxu 解压war包unzip -oq jenkins2.164.war -d jenkins查询所有的软连接find ./ -lname v1.txt查询全部服务systemctl list-unit-files服务文件放置的位置/lib/systemd/system/查看 开机启动状态systemctl status rc-local.servicenohupnohu...
2020-03-10 20:24:14
156
原创 外网ip获取
纯IPip.6655.com/ip.aspxwhatismyip.akamai.comicanhazip.com/ident.mev4.ident.me其他http://myip.ipip.net
2020-03-10 20:21:01
439
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人