自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(13)
  • 问答 (1)
  • 收藏
  • 关注

原创 win10系统网络连接只显示飞行模式

1.win+x打开设备管理器。2.点击网络设置,不出意外,你的第一项应该是黄色感叹号。3.右键点击禁用,之后再点击启用,就ok了。

2020-04-11 15:31:37 15591 5

原创 更改集群节点静态ip(centos7)

当我们集群的节点使用的是静态ip时,每当我们的办公环境改变,ip也会改变,有些同学就会犯愁了,怎么ping不通了呢,下面我来给小白讲解一下。1.在Windows中win+r调出控制台,输入ipconfig因为我是无线连接,所以显示的是WLAN,网线连接则显示以太网。这里红框标出来的就是我们的Windows的ip2.打开各个节点。2.1vim /etc/sysconfig/network...

2020-02-04 15:30:08 517

原创 查询使用sqoop从mysql导入hive的数据时,查询结果为NULL

出现此问题的原因是,你在创建hive表的时候没有指定表的字段以什么分隔,而执行sqoop导入命令时指定的分隔符和创建hive表时默认的分隔符不一致,导致查询时全为空值。解决方法就是把表删了,重新创建,指定分隔符。create table stu(id int,name string,sex string) row format delimited fields terminated by ‘\...

2019-09-30 15:06:10 996

原创 sqoop导入mysql数据到hive中报错:Cannot run program "hive": error=2, No such file or directory

导致这个错误的最大原因是因为,可能你是在使用sqoop做实验,没有在sqoop-env.sh中配置hive的环境变量。配置一下环境变量即可,另外为了以后方便,建议把其他提示的环境变量也配置一下最好。...

2019-09-30 14:55:24 1622

原创 配置hadoop免密登陆(自身节点和其他节点)

1.在根目录下cd .ssh2.使用命令:ssh-keygen -t rsa 连敲三下回车3.使用ls 查看生成了相应的公私钥文件4.免密登陆自己:使用命令:ssh-copy-id master (这里首先保证你的主机名叫master,并且在/etc/hosts文件里设置了ip和主机名的映射关系),之后ls 查看是否多了一个authorized_keys文件,并且大小不为0,再使用命...

2019-09-23 21:10:16 611

原创 hive启动的时候1045问题

Underlying cause: java.sql.SQLException : Access denied for user ‘root’@‘master’ (using password: YES)SQL Error code: 1045Use --verbose for detailed stacktrace.*** schemaTool failed ***解决这个问题的普遍方法...

2019-09-20 21:34:44 897

原创 hive初始化时报错

Metastore connection URL: jdbc:derby:;databaseName=metastore_db;create=trueMetastore Connection Driver : org.apache.derby.jdbc.EmbeddedDriverMetastore connection User: APPStarting metas...

2019-09-20 21:27:55 1577

原创 sqoop导入数据异常处理

java.sql.SQLException: Streaming result set com.mysql.jdbc.RowDataDynamic@65d6b83b is still active. No statements may be issued when any streaming result sets are open and in use on a given connection...

2019-09-19 18:47:29 358

原创 在完全分布式搭建中,namenode无法启动的问题

在港搭建完完全分布式的时候,遇到namenode起不来的问题或者起来之后不能工作或者过一会就挂掉,这时候看一下你的主机名是不是还是localhost,如果是,连同从节点的主机名一起改了,建议使用master、slave1、slave2这种名字。别再用localhost1、localhost2了,说出去让人笑话。...

2019-09-19 18:27:55 716

原创 使用flume消费kafka数据时,不成功问题解决

做电商数仓项目时,遇到了一个奇怪的问题,flume消费kafka时,在hdfs上没有传递过来数据,这样我很头疼,经过测试,我发现在kafka中可以读取到日志采集flume发过来的数据,这就证明在消费flume之前的配置是没有问题的,后来我找到了问题所在。由于是才有脚本群起的集群,在生成日志时,消费者flume由于没有完全启动的原因,使其在消费数据时不成功,所以应该在群起脚本中设置sleep时间,...

2019-09-19 18:23:54 2771 5

原创 解决Linux无法ping通外网和网关的问题

由于某些原因,像换了环境,网络不能连接,或者某些莫名其妙的原因导致ping不通外网、在Windows可以ping通Linux的ip,但是反向却不行,而且也无法ping通外网,我们来解决一下。使用命令vim /etc/sysconfig/network-scripts/ifcfg-xxx //这个名字因人而异我的是ifcfg-enp0s3如果像配置静态ip的话将BOOTPROTO改成...

2019-09-19 18:02:24 6535

原创 解决navicat连接Linux mysql出现1045问题

1.第一个原因,你之前在navicat上使用过该数据库,然后又改了主机名,即使使用ip登陆也会显示1045错误,这时候使用第一个方法,更改一下MySQ的密码,再次登录,对,就是这么奇怪,参照这篇文章来https://blog.csdn.net/gududelang22/article/details/829845092.第二种方法用于改密码也没用的用户,在MySQL中添加权限:use mys...

2019-09-19 17:58:23 2237

原创 使用sqoop将MySQL中的数据导入hdfs时报错问题No columns to generate for ClassWriter

有些人看到的报错信息是最后一行的No columns to generate for ClassWriter,但问题实际不出在jar包上,应该继续往上找,我的错误是这样的ERROR manager.SqlManager: Error executing statement: com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Ac...

2019-09-19 17:46:01 798

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除