happy-coding-CSDN博客

原创安装es遇到的问题

1、[1] bootstrap checks failed[1]: max file descriptors [4096] for elasticsearch process is too low, increase to at least [65536]　每个进程最大同时打开文件数太小，可通过下面2个命令查看当前数量ulimit -Hn ulimit -Sn　　修改/etc/security/limits.conf文件，增加配置，用户退出后重新登录生效[root@hadoop63 ~]

2021-03-15 11:07:23 375

原创 Sqoop同步MySQL数据时遇到Timestamp列为0000-00-00 00:00:00.000000报错

Sqoop在导入MySQL数据时遇到Timestamp列为0000-00-00 00:00:00.000000报错CONSOLE#20/12/15 03:09:43 INFO mapreduce.Job: Task Id : attempt_1595581261973_624830_m_000000_0, Status : FAILEDCONSOLE#Error: java.io.IOException: SQLException in nextKeyValueCONSOLE#a...

2020-12-15 10:04:43 463

原创 flink 的编译之路

编译flink-1.9.31. Java 的安装和配置在各个操作系统上安装和配置 Java 的教程有很多，这里有三个要点需要注意：● Flink 编译和运行要求 Java 版本至少是 Java 8，且最好选用 Java 8u51 及以上版本● 如果要能够编译 Flink 代码，需要安装 JDK● 安装好 Java 后，还需要配置 JAVA_HOME 和 PATH● maven 的安装目录配置为 MAVEN_HOME，并把 maven 的 bin 目录加到 PATH 中下载m.

2020-06-10 15:14:01 1049

原创 Maven错误信息：Missing artifact jdk.tools:jdk.tools:jar:1.6

JAVA_HOMED:\dev\Java\jdk1.6.0_45CLASS_PATH.;%JAVA_HOME%\lib\dt.jar;%JAVA_HOME%\lib\tools.jarPath%JAVA_HOME%\bin;%JAVA_HOME%\jre\bin;Maven错误信息：Missing artifact jdk.tools:jdk.tools:jar:1.6...

2020-03-27 12:02:18 141

原创 hibernate 访问mysql时表名转成大写

项目现已时遇到一个问题，hibernate 访问mysql的表都变成了小写，导致Table doesn't exist，这是因为mysql的表名对大小写敏感show Variables like '%table_names';(0表示敏感，1表示不敏感)在不修改数据库的情况下，修改hibernate 的命名策略：import org.hibernate.cfg.ImprovedN...

2020-03-26 12:07:57 966

原创 redis的编译安装

下载 http://download.redis.io/releases/redis-5.0.8.tar.gztar -xzvf redis-5.0.8.tar.gzcd redis-5.0.8[hadoop@node1 redis-5.0.8]$ yum install gcc tcl -y[hadoop@node1 redis-5.0.8]$ mkdir -p /home/hadoo...

2020-03-21 15:18:00 138

原创安装Python模块minepy报错[error] Microsoft Visual C++ 14.0 is required

pip install minepyerror: Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual C++ Build Tools": http://landinghub.visualstudio.com/visual-cpp-build-tools到下载https://www.lfd.uci.edu/~goh...

2018-05-22 15:34:26 2298

转载 http、TCP/IP协议与socket之间的区别

源地址：http://www.2cto.com/net/201211/166537.html网络由下往上分为: 物理层-- 数据链路层--网络层-- IP协议传输层-- TCP协议会话层--表示层和应用层-- HTTP协议

2017-07-29 17:44:40 563

原创 Hbase API 的简单使用

public class HbaseTableTest { private static Configuration conf; static TableName tableName = TableName.valueOf("hbase_table"); static { conf = HBaseConfiguration.create(); } public static voi

2017-06-10 18:03:34 364

原创 maven:missing artifact jdk.tools:jar:1.7

http://stackoverflow.com/questions/11118070/buiding-hadoop-with-eclipse-maven-missing-artifact-jdk-toolsjdk-toolsjar1只要编辑eclipse根目录下的eclipse.ini文件重启eclipse如果不可以就执行以下操作1.把/jdk/lib下的tool

2017-06-07 14:55:00 1158

原创 Hive中装载数据的几种方式

装载数据1、以LOAD的方式装载数据LOAD DATA [LOCAL] INPATH 'filepath' [OVERWRITE] INTO TABLE tablename [PARTITION(partcol1=val1, partcol2=val2 ...)]1) 使用LOCAL这个关键字，那么这个路径应该为本地文件系统路径，是拷贝本地数据到位于HDFS上的目标位置，而不使用L

2017-06-04 14:00:01 1826

原创 Windows 7 下安装mysql-5.7.18-winx64.zip

mysql-5.7以后压缩包安装有了不小的变化第一步：到官网下载https://dev.mysql.com/downloads/mysql/第二步：解压到一个文件夹第三步：配置环境变量把;%MYSQL_HOME%\bin插入到Path的最后面第四步：以管理员的身份运行命令行，按win+R 输入cmd，点鼠

2017-05-18 17:06:07 3121