不会技术的IT男-CSDN博客

原创 SpringBoot2.0关于启动应用自动加载schema-all.sql文件的改动

SpringBoot2.0在自动加载类路径下的schema-all.sql文件的时候，自动加载不成功数据库驱动需要更改driver-class-name:...

2020-07-26 15:18:07 306

原创客户端远程连接docker容器中的mysql 报1251错误

1、启动容器：[root@localhost ~]# docker run -d -e MYSQL_ROOT_PASSWORD=123456 -p 3306:3306 mysql2、进入容器：[root@localhost ~]# docker exec -it 容器id bash3、进入mysql：root@2288abcb...

2020-07-26 15:16:44 185

原创 Docker服务启动报错:Job for docker.service failed because the control process exited with error

报错信息: Job for docker.service failed because the control process exited with error code. See "systemctl status docker.service" and "journalctl -xe" for details.使用命令: sys...

2020-07-26 15:13:49 335

原创 IDEA 启动Tomcat 时控制台乱码问题

问题描述：使用Intellij IDEA启动Tomcat，发现乱码问题，虽然不影响正常使用，但是本人有轻度强迫症，所以还是想把乱码改过来。乱码情况：IDEA默认展示的三个log信息，全部乱码。 &nbs...

2020-07-26 15:03:03 114

原创 SpringBoot入门系列(一)：IDEA自动创建SpringBoot项目(内附基本的SpringBoot pom.xml配置文件)

SpringBoot简介简化Spring应用开发的一个框架；整个Spring技术栈的一个大整合； J2EE开发的一站式解决方案；微服务martin fowler：微服务：架构风格（服务微化）一个应用应该是一组小型服务；可以通过HTTP的方式进行互通；单体应用：ALL IN ONE微服务：每一个功能元素最终都是一个可独立替换和独立升级的软件单元；详细参照微服务文档环境准备–jdk1.8：Spring Boot 推荐jdk1.7及以上；java version "1.8.0_112"

2020-07-11 10:38:46 1527

原创 Log4j日志配置与详细解析(log4j.properties)

Log4j日志配置详解1.log4j日志级别DEBUG：输出调试信息；指出细粒度信息事件对调试应用程序是非常有帮助的。 INFO：输出提示信息；消息在粗粒度级别上突出强调应用程序的运行过程。 WARN：输出警告信息；表明会出现潜在错误的情形。 ERROR：输出错误信息；指出虽然发生错误事件，但仍然不影响系统的继续运行。 FATAL：输出致命错误；指出每个严重的错误事件...

2019-12-10 15:47:35 1369

原创 PostgreSQL实现数据库数据存在就修改没有就删除

说明：今天在使用log4j将日志信息写入数据库时有这么一个需求：如果数据库存在一条记录，则将新插入的值，作为更新，如果没有这样一条记录，则新增。实现：表结构：通过查阅资料发现postgre有这么一个方法：insert on conflict do 实现如下INSERT INTO "warnLog" ("datatime", "log_level", "method", ...

2019-12-10 15:18:54 1284

原创 kerberos常用基本命令

授权添加yarn账户 [root@xxx ~]# kadmin.local Authenticating as principal cloudera-scm/[email protected] with password.kadmin.local: addprinc [email protected]...

2019-11-22 09:53:34 1776 1

原创 git解决error: The following untracked working tree files would be overwritten by checkout

2019-09-24 17:49:59 3912

原创 git push origin master 报错

2019-09-23 15:45:33 213 1

转载 GitHub新手详细教程

2019-09-08 09:07:07 203

原创 sqoop job执行delete、exec、show时避免输入密码(免密执行)

一、问题1.创建jobsqoop job -create job1 -- import --connect jdbc:mysql://192.168.14.217:3306/workflow --username root --password gzp --table project --target-dir /sqoop/job/job12.在执行如下命令提示输入密码:sqo...

2019-08-31 20:11:53 653

原创 sqoop将mysql数据导入hive时常见报错报错解决方案

一、导入命令：sqoop import --connect jdbc:mysql://172.20.5.117:3306/userinfo --username root --password gzp --table userinfo --target-dir /test2 --hive-import --hive-table userinfo二、报错一：ERROR tool.Imp...

2019-08-31 18:36:20 958 2

原创 hive语句分区归档时报错：java.lang.NoClassDefFoundError: org/apache/hadoop/tools/HadoopArchives

一、报错信息：在我执行分区归档时命令：alter table hive_text archive partition (folder='docs');报错如下：查看日志：cat /tem/hive/root/hive.log(这是我的日志路径),报错日志如下默认日志路径：/tmp/<user.name>文件夹的hive.log文件中，全路径就是/tmp/当前用户名(...

2019-08-30 16:39:12 831

原创 Hbase的Java AIP操作(最新版本2.2.0)实现创建表、删除表、插入删除获取数据等操作

首先创建maven项目，并修改pom.xml，导入hbase第三方jar包。如下所示<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org...

2019-08-27 22:22:57 663

原创 hbase下载安装与配置

一、准备工作安装hive的前提是已经在主机中安装好JDK、hadoop、zookeeper如果准备还没有安装这样三个，可以参考如下文章安装JDK:https://blog.csdn.net/qq_42668255/article/details/97368887hadoop:https://blog.csdn.net/qq_42668255/article/details/913850...

2019-08-24 16:52:43 3834

原创 Spark完全分布式集群搭建

一、准备工作安装jdk:https://blog.csdn.net/qq_42668255/article/details/97368887 搭建hadoop集群：https://blog.csdn.net/qq_42668255/article/details/99449114 scala搭建官方下载地址：https://www.scala-lang.org/download/ s...

2019-08-20 11:31:38 423

原创解决vim/vi编辑文件出现Swap file "xxx" already exists!问题

一、问题描述E325: ATTENTIONFound a swap file by the name "/etc/.profile.swp" owned by: root dated: Mon Aug 19 21:46:01 2019 file name: /etc/profile modified: no u...

2019-08-20 11:05:12 3329

原创 hadoop全分布式集群搭建

参考文献:https://blog.csdn.net/superman404/article/details/83591324参考文献：https://www.cnblogs.com/pu20065226/p/8464156.html介绍：主要参考第一篇，配置完善，不足之处在与不易理解。第二篇：配置稍微不完善，但相对容易理解。故可以按照第二篇的风格配置，按第一篇的内容配置。...

2019-08-13 16:57:25 184

原创 Unbound classpath container: 'JRE System Library [jdk1.8.0_65]' in project ****

一、原因最近电脑重装之后，再打开eclipse工作空间的项目发现项目出现如下报错原来是因为我重装电脑后的JDK和之前项目里面使用的JDK不一样，故需要修改为当前JDK，修改步骤如下：右键project->Build Path->Configure Build Path->->点击Add Library添加JDK找到自己对应的J...

2019-07-29 15:38:43 1013

原创 hive下载安装与配置

一、准备工作安装hive的前提是已经在主机中安装好JDK、hadoop、mysql如果准备还没有安装这样三个，可以参考如下文章安装JDK:https://blog.csdn.net/qq_42668255/article/details/97368887hadoop:https://blog.csdn.net/qq_42668255/article/details/91385098...

2019-07-27 20:29:00 5399 5

原创 Zookeeper集群搭建

一、准备机器环境准备　　我们准备3台机器，并都装好JDK且设置好hostname。Zookeeper机器准备参考：https://blog.csdn.net/qq_42668255/article/details/97483170JDK安装参考：https://blog.csdn.net/qq_42668255/article/details/97368887（说明：在Zook...

2019-07-27 11:32:51 125

原创 Linux系统Zookeeper单节点的安装与配置

一、下载可以从https://zookeeper.apache.org/releases.html下载ZooKeeper，目前最新的稳定版本为 3.4.8 版本，安装zookeeper的前提时安装了JDK,如果你还没有安装JDK可以参考此文章：https://blog.csdn.net/qq_42668255/article/details/97368887云盘链接：https://p...

2019-07-27 09:39:20 604

原创 hadoop伪分布式搭建以及配置，JDK的安装配置，超详细，超级适合新手。

一、Hadoop 简介Hadoop 是一个由 Apache 基金会所开发的分布式系统基础架构，它可以使用户在不了解分布式底层细节的情況下开发分布式程序，充分利用集群的威力进行高速运算和存储。从其定义就可以发现，它解決了两大问题：大数据存储、大数据分析。也就是 Hadoop 的两大核心：HDFS 和 MapReduce。 HDFS(Hadoop Distributed File Sys...

2019-07-26 10:47:24 1884

原创 Linux系统ubuntu安装JDK以及环境变量的配置

一、JDK下载JDK官方下载地址：https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html 我JDK云盘链接：https://pan.baidu.com/s/1QDYb2smSdPt_hSpDBTdr0g 提取码：u64i 二、JDK的安装及配置创建一个目录作...

2019-07-26 09:45:05 816

原创 Linux系统ubuntu修改默认源为国内源

一、在安装ubuntu后使用国外源太慢了，修改为国内源会快很多二、安装步骤备份/etc/apt/sources.list cp /etc/apt/sources.list /etc/apt/sources.list.bak 修改/etc/apt/sources.list vim/etc/apt/sources.list 在/etc/apt/sources.list文件前面添加...

2019-07-26 09:16:28 838

原创虚拟机VMware Linux操作系统输入ifconfig获取不到ip地址

一、修改配置一、登录Linux操作系统后输入ifconfig得到只能通过本机访问127.0.0.1地址如下二、解决步骤 1 输入ip addr 记住mac地址照片中红线部分 2.修改网卡配置中的mac地址：输入命令：cd /etc/sysconfig/network-scripts/ 3 输入 ls 可以看到有一个if...

2019-07-22 09:45:39 3103 2

原创 sklearn.decomposition.PCA主要参数讲解、对鸢尾花数据集进行PCA降维处理

1.scikit-learn PCA类介绍classsklearn.decomposition.PCA(n_components=None,copy=True,whiten=False,svd_solver=’auto’,tol=0.0,iterated_power=’auto’,random_state=None)[source]¶官方文档：https://scikit-l...

2019-07-01 09:51:02 2486

原创 hadoop Caused by: java.lang.ClassCastException

使用hadoop进行排序时报如下错误：Caused by: java.lang.ClassCastException原因是因为在你在自己定义的 XXXWritable类中实现的是 Writable 接口，而如果要排序，则需要实现WritableComparable接口将key作为排序键再在类中重写如下方法即可：@Override public int compareT...

2019-06-29 15:18:37 1464 1

原创阿里云Ubuntu安装mysql、配置远程连接、以及出现的常见问题

一、安装mysql1.安装mysql只需要简单的命令：sudoapt-get installmysql-client mysql-server（安装客户端和服务端）安装之后会出现如下界面，输入密码（图一）重复密码（图二），此密码为登录密码。有些博客中还会输入命令：sudo apt-get install libmysqlclient-dev (至于这是什么自己网上查)2....

2019-06-28 11:21:59 991

原创 Navicat for Mysql建立本地连接出现 1044或1045的问题并如何解决。

一、解决1045错误问题在我安装mysql的过程中，mysql已经安装成功，可是在建立数据库链接是报错：Navicat for Mysql建立本地连接出现 1045 -Access denied for user'root'@'ipAddress'(using password :yes) 的问题实质上1045错误最主要的原因就是服务器上的mysql没有给本地授权。可以通过命令：grant...

2019-05-08 17:17:25 10945 5

原创 Python中append和extend函数操作数组或列表的区别、联系和用法

一、函数描述append() 方法用于在列表末尾添加新的对象。extend() 函数用于在列表末尾一次性追加另一个序列中的一个或多个值,可以是数组，元组，列表等可迭代对象.（用新列表扩展原来的列表）二、简单用法及其区别append(object) 是将一个对象作为一个整体添加到列表中，添加后的列表比原列表多一个元素，该函数的参数可以是任何类型的对象。extend(iterabl...

2019-04-20 21:07:14 1172

原创 Selenium.webdriver属性大全，常用属性以及获取元素属性值方法的介绍

首先用一段简短的代码查看Selenium.webdriver的所有属性from selenium import webdriver # 导入webdriver包browser=webdriver.Firefox() # 初始化一个火狐浏览器实例：driverprint( dir(browser) ) #获取所有属性名红色字体为常用的方法！['CONTEXT_CHROME',...

2019-04-19 21:40:43 6458

原创 selenium的安装以及firefox(火狐)、Phantomjs(无头浏览器)驱动下载和相应的配置

一、selenium简介以及软件下载：Selenium是一个用于Web应用程序自动化测试工具。Selenium测试直接运行在浏览器中，就像真正的用户在操作一样。支持的浏览器包括IE（7, 8, 9, 10, 11），Mozilla Firefox，Safari，Google Chrome，Opera等。简而言之：Selenium只是一个平台，它需要安装对应浏览器的驱动，或者可以亲切的称呼他...

2019-04-18 20:13:57 2480

qq_42668255的博客