英菲nidi50070-CSDN博客

原创 MyEclipse 10.7.1 - Windows版的安装图解

一、双击MyEclipse 运行安装，直接Next下一步二、接受按装协议先选中 I accept the terms of the license agreement这句的意思是：我接受许可协议中的条款，要是不选就继续不下去了，大家都懂的！继续Next下一步三、安装路径点击Change,选择你要按装的路径，安装路径文件夹最好不要用中文，用中文的话项目容易报莫名奇妙的错误，比较麻烦。默认...

2019-03-24 18:24:58 1658

原创 MySql中连接出现 1130-Host ‘LAPTOP-AKP8DH1F’ is not allowed to connect to this MySQL server 的解决方法

一、错误在用Navicat配置远程连接Mysql数据库时遇到如下报错信息，这是由于Mysql配置了不支持远程连接引起的。二、在安装Mysql数据库的主机上登录root用户。mysql -u root -p三、依次执行如下命令。 use mysql;select host from user where user='root';四、执行update user set ho...

2019-03-24 17:40:57 4450 3

原创在虚拟机中通过yum下载出现Another app is currently holding the yum lock; waiting for it to exit的解决方法

一错误二解决方法删除root用户下删除/var/run文件夹下的yum.pid命令：rm -rf /var/run/yum.pid三通过此命令后再执行yum就可以了yum install -y nc

2019-02-02 15:49:31 823

转载 Linux -- 简介使用Shell命令清空大文件内容的几种方法

一简介Windows中删除文件或清空文件内容很简单。但是在Linux中，有些时候，我们不想打开文本编辑器去删除文件的内容。想通过命令去实现这一功能，下面就为大家介绍几种方法！注意：Linux系统中一切皆文件。所以在清空或删除文件之前一定要确保该文件不是系统文件或者其他重要配置文件，否则可能引发系统错误。二几种方法简介1、通过重定向来清空文件内容该方法是最简单的，通过shel...

2019-01-23 20:43:07 795

原创 Window下启动Nginx报An attempt was made to access a socket in a way forbidden by its access permissions

一错误nginx: [emerg] bind() to 0.0.0.0:80 failed (10013: An attempt was made to access a socket in a way forbidden by its access permissions)二错误原因原因：Nginx启动需要占用80端口，但是此时你的Windows系统里面的80端口被占用，所以Ngin...

2019-01-23 20:13:24 4982

原创下载Apache的ab工具的步骤（httpd-2.2.21-win32-x-no_ssl.msi的下载）

一进入Apache的官网http://httpd.apache.org/二找到APache httpd，点击里面的Download三点击Downloading the Apache HTTP Server里面的important notes四往下寻找，找到Older Releases里面的archive site五进入页面后选择你想要的版本进行下载六之后进行安装...

2019-01-23 15:53:24 2178 2

原创解决You have new mail in /var/spool/mail/root提示

一原因终端远程登陆后经常提示You have new mail in /var/spool/mail/root这个提示是LINUX会定时查看LINUX各种状态做汇总，每经过一段时间会把汇总的信息发送的root的邮箱里，以供有需之时查看。一般这种情况mail的内容就只是一些正常的系统信息或者是比较重要的错误报告。如果你安装了mutt的话直接用这个命令就可以查看mail的内容（用root登...

2019-01-21 20:31:18 42090 3

原创 nginx 403 forbidden错误的解决

一错误今天在一个新的环境上安装nginx，结果访问的都是403二错误原因及解决方法1.访问禁止目录浏览的目录；这是最常见出现的原因，由于用户的配置权限问题所导致的结果；某个你需要访问的目录给的权限不够。比如网站访问wwwroot/html/index.html，html目录权限就不够。解决方法：给所有的父目录赋予权限：（可以通过命令来赋予权限）chmod 777 目录名2....

2019-01-20 00:17:02 1325

原创 IDEA中访问web界面的报HTTP Status 404

一错误HTTP Status 404 - /mi.htmltype Status reportmessage /mi.htmldescription The requested resource is not available.二错误原因１.　确保输入路径正确２.　看tomcat加载的项目是否正确三解决方法本人的错误原因是修改过项目名，但是tomcat加载的项...

2019-01-19 13:11:15 19785

原创 Web的500错误:nested exception is java.lang.IllegalArgumentException: node to traverse cannot be null!

一错误HTTP Status 500 - Request processing failed; nested exception is java.lang.IllegalArgumentException: node to traverse cannot be null!type Exception reportmessage Request processing failed; nes...

2019-01-19 10:40:12 1414

原创 HQL报错：Error: Java heap space Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

一错误Starting Job = job_1547323088343_0010, Tracking URL = http://hadoop01:8088/proxy/application_1547323088343_0010/Kill Command = /home/hadoop/install/hadoop-2.5.0-cdh5.3.6//bin/hadoop job -kill j...

2019-01-15 17:16:38 999 1

原创 Yarn中的nodemanager报错：local host is: "hadoop01/192.168.85.128"; destination host is: "hadoop01":8031

错误java.io.IOException: Failed on local exception: java.io.EOFException; Host Details : local host is: "hadoop01/192.168.85.128"; destination host is: "hadoop01":8031; Caused by: java.io.EOFExceptio...

2019-01-15 15:42:49 3922

转载 IDEA往MySQL导数据报错：org.apache.thrift.TApplicationException: Invalid method name:'alter_table_with_casca

在调用Thrift接口时，报出的错误（org.apache.thrift.TApplicationException: Invalid method name）。1 检查调用的ip和端口是否正确。2 检查客户端和服务端采用的协议（Protocol）是否一致。参考文章：https://blog.csdn.net/qq_29829081/article/details/80532916...

2019-01-15 00:36:05 1435

原创 Hive运行hql报错：org.apache.hadoop.yarn.exceptions.YarnException: Unauthorized request to start container

错误Diagnostic Messages for this Task:Container launch failed for container_1547232045235_0036_02_000009 : org.apache.hadoop.yarn.exceptions.YarnException: Unauthorized request to start container. Th...

2019-01-14 22:08:57 454

原创 Hive中运行任务报错：FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

一错误 FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask二错误原因第一种，yarn资源不足原因：该错误是YARN的虚拟内存计算方式导致，上例中用户程序申请的内存为1Gb，YARN根据此值乘以一个比例（默认为2.1）得出申请的虚拟内存的值，当YARN计算的用...

2019-01-14 21:47:40 66991 5

原创 Hive中运行任务报错：Error during job, obtaining debugging information...

错误Ended Job = job_1545829388777_0070 with errorsError during job, obtaining debugging information...FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTaskMapReduc...

2019-01-09 18:24:02 16826 16

原创使用azkaban运行脚本文件报错：azkaban.jobExecutor.utils.process.ProcessFailureExceptionazkaban.jobExecutor.utils

错误：27-12-2018 12:32:36 CST drZlbTodwdjtfq INFO - Starting job drZlbTodwdjtfq at 154588515615327-12-2018 12:32:36 CST drZlbTodwdjtfq INFO - Building command job executor. 27-12-2018 12:32:36 CST drZ...

2019-01-09 12:01:22 13425 2

原创 org.springframework.beans.factory.BeanCreationException:错误的解决方法

一错误org.springframework.beans.factory.BeanCreationException: Error creating bean with name 'userDao' defined in file [D:\企业版IDEA文件\bigdataEshop\eshop\target\classes\com\qianfeng\eshop\dao\impl\UserD...

2019-01-06 11:37:51 2522

原创 URI is not registered (Settings | Languages & Frameworks | Schemas and DTDs) 错误的解决方法（二）

错误如此：解决方法：是因为maven中缺少依赖

2019-01-06 10:15:48 230

原创 URI is not registered (Settings | Languages & Frameworks | Schemas and DTDs) 错误的解决方法

URI is not registered (Settings | Languages & Frameworks | Schemas and DTDs)解决方法：当时这一句报红，这是本人解决好的：如何解决不报红：将此添加进去，就可以了！！！是不是so easy！快去试试吧！！！...

2019-01-06 10:08:16 4131

原创 Eclipse如何集成其对应的Spring(安装了spring插件不显示)

一查看你的Eclipse版本查看步骤：Help -- About Eclipse IDE 注：本人用的是4.10.0的版本二登陆此网站，查看你的eclipse所对应的插件的版本，进行下载https://spring.io/tools3/sts/all本人对应的是此版本的三在Eclipse中进行安装Help -- Install New Software -- 之后安...

2019-01-04 16:37:03 2345

原创 Eclipse编写的Web项目所遇之坑

坑一：An error has occurred. See error log for more details. java.lang.NullPointerException弹出此框：解决方法：eclipse出现这个错误大多都是因为缓存造成的方法1：在"开始"–>“运行”---->打入"cmd"进入命令提示行后,再进入eclipse的安装目录然后输入ec...

2019-01-03 22:06:59 269

原创简介Hive常用的函数（二）

一 if()函数根据条件返回不同的值if(boolean testCondition, T valueTrue, T valueFalseOrNull)例子：（1）结果：（2）结果：二 nvl()函数如果一个值是null，返回默认值nvl(T value, T default_value) ：如果T is null ，返回默认值例子：结果：三 length...

2018-12-27 20:02:32 95

原创简介Hive常用的函数(一)

一解析URL字符串parse_url(url, partToExtract[,key])介绍：partToExtract的选项包含[HOST, PATH, QUERY, REF, PROTOCOL, FILE, AUTHORITY, USERINFO]例子：（1）结果：（2）结果：（3）结果：（4）结果：（5）结果：（5）其他参数的结果都是...

2018-12-26 21:49:44 136

原创 Hive的一些问题总结

问题一Could not create ServerSocket on address 0.0.0.0/0.0.0.0:9083解决方法：遇到这种情况大家都找不到头绪，是因为你开始的时候运行了hive的metastore，可以通过输入命令：jps查看有没有RunJar然后再输入命令来启动：hive --service metastore 问题二Hive在spark2.0.0启...

2018-12-26 20:23:48 362

原创简述Hive的三种启动方式及内置服务

一 Thrift服务通过hiveServer/hiveServer2启动Thrift服务，客户端连接Thrift服务访问Hive数据库（JDBC，JAVA等连接Thrift服务访问Hive）。<property> <name>hive.server2.thrift.port</name> <value></value>...

2018-12-26 20:16:59 3021

原创 Hive简介及元数据存储（Metastore的三种配置方式）

一 Hive介绍Hive是基于Hadoop的一个数据仓库，Hive能够将SQL语句转化为MapReduce任务进行运行。　　Hive架构图分为以下四部分：　　1、Hive有三个用户接口：a. 命令行接口（CLI）:以命令行的形式输入SQL语句进行数据数据操作b. Web界面：通过Web方式进行访问。　　　　　c. Hive的远程服务方式：通过JDBC等方式进行访问。　　　　　　　...

2018-12-26 20:02:29 7381

原创解决启动hive时报错问题

一、错误java.lang.OutOfMemoryError: Java heap space at java.net.ServerSocket.accept(ServerSocket.java:512) at org.apache.thrift.transport.TServerSocket.acceptImpl(TServerSocket.java:113) at org.apache...

2018-12-19 22:19:17 2820 1

原创小白带你快速在Windows上安装JDK

一、运行此应用程序jdk-8u181-windows-x64.exe二、双击打开此应用程序，按照提示点击“Next”进行安装，安装的路径地址可以自己选定。三、安装的时候需要制定jre的路径地址，将其地址放到和jdk一样的路径下。四、安装完成之后，配置环境变量1、配置环境变量的位置“控制面板”- - - - “系统和安全”- - - - “系统”- - - - “高级系统设置”- ...

2018-12-15 18:03:43 157

原创小白带你解决Windows上安装Hadoop所遇之坑

一、坑一Error: JAVA_HOME is incorrectly set. Please update D:\javatemps\hadoop-2.7.2\conf\hadoop-env.cmd提升我的java环境搭建错误，可是刚刚执行如此命令还可以：java -version解决方法1、如果你的JDK安装路径是默认的在C盘的“Program files”下，那...

2018-12-15 16:27:10 344

原创小白带你快速在Windows上安装Hadoop

注：在Windows下安装Hadoop之前先将jdk安装完成，可以参考本人博客，如何安装JDK！！！一、在Windows下将Hadoop压缩包解压如此"hadoop-2.7.2.zip"压缩包，将其使用解压工具进行解压。二、按照如此依次点击“控制面板”- - - - “系统和安全”- - - - “系统”- - - - “高级系统设置”- - - -“环境变量”三、打开如此界面四、进...

2018-12-15 15:50:16 152

原创带你认识安装Oozie所遇之坑

一、常见错误一上传 Oozie 目录下的 yarn.tar.gz 文件到 HDFS所遇之坑：在oozie的根目录下执行如此命令：bin/oozie-setup.sh sharelib create -fs hdfs://linux01:8020 -locallib oozie-sharelib-4.0.0-cdh5.3.6-yarn.tar.gz出现如下错误：解决方法：1、首先在你...

2018-12-14 21:05:07 604

原创 IDEA启动Tomcat报错：Address localhost:1099 is already in use的解决方法

一、问题Error running ‘lugia-web’: Address loaclhost:1099 is already in use如下图：二、解决方法1、显示出黑窗口cmd：快捷键是：Windows键盘图标+R2、运行cmd后，在cmd中执行如下命令：netstat -ano|findstr 1099taskkill -f -pid 14888如图：3、注意...

2018-12-14 20:02:05 5652

原创快速了解适配器模式

一、适配器模式的概念适配器模式（Adapter Pattern）是作为两个不兼容的接口之间的桥梁。这种类型的设计模式属于结构型模式，它结合了两个独立接口的功能。这种模式涉及到一个单一的类，该类负责加入独立的或不兼容的接口功能。举个真实的例子，读卡器是作为内存卡和笔记本之间的适配器。您将内存卡插入读卡器，再将读卡器插入笔记本，这样就可以通过笔记本来读取内存卡。我们通过下面的实例来演示适配器模式...

2018-12-07 22:30:38 108

原创快速认识抽象工厂模式

一、什么是抽象工厂模式抽象工厂模式（Abstract Factory Pattern）是围绕一个超级工厂创建其他工厂。该超级工厂又称为其他工厂的工厂。这种类型的设计模式属于创建型模式，它提供了一种创建对象的最佳方式。在抽象工厂模式中，接口是负责创建一个相关对象的工厂，不需要显式指定它们的类。每个生成的工厂都能按照工厂模式提供对象。二、抽象工厂模式简介意图：提供一个创建一系列相关或相互依赖对...

2018-12-04 22:24:42 83 2

原创 Java --- 设计模式（23种）

一、什么是设计模式设计模式（Design Pattern）是一套被反复使用、多数人知晓的、经过分类的、代码设计经验的总结。设计模式（Design pattern）代表了最佳的实践，通常被有经验的面向对象的软件开发人员所采用。设计模式是软件开发人员在软件开发过程中面临的一般问题的解决方案。这些解决方案是众多软件开发人员经过相当长的一段时间的试验和错误总结出来的。二、设计模式的提出者GoF（“四...

2018-12-04 22:01:08 247

原创快速入门Nginx的安装

注：因为是服务器，尽量在root用户下安装！！！一、如果之前安装过，应该先删除二、要求的安装环境1、需要安装的gcc的环境yum install gcc-c++2、第三方的开发包（1）PCRE（一个Perl库）yum install -y pcre pcre-devel（2）zlibyum install -y zlib zlib-devel（3）openssl（是一个安...

2018-12-04 16:10:31 88

原创探究Hive和数据库的差别

一、简介由于 Hive 采用了类似 SQL 的查询语言 HQL(Hive Query Language)，因此很容易将 Hive 理解为数据库。其实从结构上来看，Hive 和数据库除了拥有类似的查询语言，再无类似之处。本文将从多个方面来阐述 Hive 和数据库的差异。数据库可以用在Online 的应用中，但是Hive 是为数据仓库而设计的，清楚这一点，有助于从应用角度理解 Hive 的特性。二...

2018-12-01 22:11:44 961 2

原创快速入门Kafka集群的部署

一、解压安装包（a）进入到此目录下： cd /home/hadoop/tools/（b）解压kafka的压缩包： tar kafka_2.11-0.11.0.2.tgz -C /home/hadoop/install/二、如果觉得名字太长，可以修改名字mv kafka_2.11-0.11.0.2/ kafka三、修改配置文件（a）进入到此目录下： cd /h...

2018-11-30 21:11:52 146 1

原创快速入门Zookeeper分布式集群的部署

一、集群规划在hadoop01、hadoop02、hadoop03三个节点上部署Zookeeper。二、解压安装1、将"/home/hadoop/tools/“目录下的压缩包解压到”/home/hadoop/install/"目录下tar -zxf zookeeper-3.4.10.tar.gz -C /home/hadoop/install/2、在"/home/hadoop/inst...

2018-11-30 20:49:00 177 1