- 博客(41)
- 资源 (14)
- 收藏
- 关注
RSS订阅原创 java通过http方式代理请求api接口
最近在对接客户那边第三方合作的http api接口的时候，发现通过java代码的方式请求第三方http接口，发现在我本地可以正常访问，但是把程序部署到客户那边的服务器上就发生超时，找不到访问地址的错误。通过测试发现，在客户的服务器上用postman请求第三方接口是可以请求通的，通过浏览器访问也是可以访问通的，但是通过代码就是请求不通！仔细分析了一下会是哪里的问题了？通过浏览器访问查...
2018-11-29 11:28:13
4526
原创 Hadoop的数据分析引擎：Pig
一、什么是Pig？安装和配置 1、最早由Yahoo开发，后来给Apache 2、支持语句PigLatin语句，类似SQL 3、翻译器：PigLatin语句 ----> MapReduce Spark（从0.17开始支持） 4、安装和配置 tar -zxvf pig-0.17.0.tar.gz -C ~/training/ ...
2018-05-06 11:09:46
548
原创 Hadoop的数据分析引擎：Hive
数据分析的引擎：1、Hive ---> 属于Hadoop，支持SQL Pig ---> 属于Hadoop，支持PigLatin 2、Spark SQL ---> 类似Hive，支持SQL和DSL3、（了解）Impala一、什么是Hive？ 1、Hive是一个翻译器，SQL ---> Hive引擎 ---> MR程序 2、Hive是构建在HDFS上的一个...
2018-05-05 15:31:20
1501
原创 NoSQL数据库之：HBase
一、NoSQL的基础、常见的NoSQL数据库 1、not only sql 2、回顾：关系型数据库: Oracle、MySQL等等 -----> 面向行：适合insert update delete 3、常见的NoSQL数据库 （*）基于Key-Value模型：Redis（内存）-----> 前身：MemCached（不足：不支持持久化） （*）面向列的模型：HBase、Cassa...
2018-05-05 15:20:33
2494
原创 MapReduce实现WordCount程序
1.Mapper程序import java.io.IOException;import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.LongWritable;import org.apache.hadoop.io.Text;import org.apache.hadoop.mapreduce.Mapper;/...
2018-05-05 15:08:01
643
原创 Hadoop中的MapReduce
一、课程概述 依赖jar包 $HADOOP_HOME/share/hadoop/common $HADOOP_HOME/share/hadoop/common/lib $HADOOP_HOME/share/hadoop/mapreduce $HADOOP_HOME/share/hadoop/mapreducel/lib二、MapReduce编程基础 案例一 1、分析WordCoun...
2018-05-05 15:00:25
463
原创 Java通过Hadoop实现RPC通讯简单实例
一、定义server端代码1.定义一个接口，该接口继承org.apache.hadoop.ipc.VersionedProtocol接口import org.apache.hadoop.ipc.VersionedProtocol;public interface MyInterface extends VersionedProtocol { //定义一个版本号 public stati...
2018-05-05 14:13:20
428
原创 Java的代理对象实例
Java的代理对象，可以通过代理来操作一个正真的实例对象，通过代理模式来重写那些我们需要增强的原对象的方法，下面是一个关于代理的简单实例：1.定义一个接口类public interface MyBusiness { public void method1(); public void method2();}2.实现上面接口的实现类public class MyBusi...
2018-05-05 13:57:02
2877
原创 Hadoop的HDFS介绍和操作
一、HDFS概述 HDFS（Hadoop Distributed File System）：分布式文件系统二、操作HDFS 1、通过Web Console：50070、50090 2、命令行 （1）操作命令 hdfs dfs **** -mkdir 创建目录 ...
2018-04-24 22:49:53
9058
1
原创 Hadoop的体系结构
Hadoop的体系结构：都是主从结构一、HDFS的体系结构 1、NameNode：主节点 http://192.168.160.111:50070 （1）职责：管理维护HDFS 接收客户端的请求：上传、下载、创建目录等等 ...
2018-04-23 22:49:05
10262
原创 搭建Hadoop的环境
一、准备工作 1、安装Linux、JDK、关闭防火墙、配置主机名 这部分上面已经介绍过来，这里就不在赘述。 2、安装Hadoop 解压：tar -zxvf hadoop-2.7.3.tar.gz -C ~/training/ 设置Hadoop的环境变量：vi ~/.bash_profile ...
2018-04-22 23:23:39
197
原创 学习大数据Hadoop的环境准备
环境准备：1、Redhat 7.4 64位2、JDK 1.8 64位3、VMware124、Putty 远程登录命令工具（命令行）第一章一、Linux的实验环境 1、在虚拟机中安装Linux 重点： （1）选择网卡的类型 选择“仅主机模式”：注意一个问题：设置虚拟机的IP地址的时候 ...
2018-04-22 16:21:36
324
原创 大数据Hadoop学习目录
目的：1、学习内容 2、名词（很多） ==================================================一、各章概述（Hadoop部分、Storm部分） (一)、Hadoop的起源与背景知识 1、什么大数据？核心问题？ 举例：（1）商品推荐 问题1：大量的订单如何存储？ 问题2：大量的订单如何计算？ （2）天气预报 问题1...
2018-04-03 21:47:59
620
原创 共享文件夹VMware Tools设置安装
一、设置共享文件夹1. 点击【编辑虚拟机设置】-【选项】-【共享文件夹】，选择“总是启用”2. 添加要共享的文件夹，点击【添加】3. 点击【确定】，并重启系统 二、安装VMware Tools1. 单击工具栏中“虚拟机”，选择“安装VMware Tools”，VMware Tools提供外部操作系统和虚拟机中的操作系统之间的相互操作，粘贴复制...
2018-03-29 11:36:41
554
原创 CentOS开发环境搭建
CentOS开发环境搭建一、 安装系统1. 新建虚拟机 2. 选择“自定义(高级)”，并点击【下一步】3. 选择虚拟机硬件兼容性，并点击【下一步】4. 选择“稍后安装操作系统”，并点击【下一步】5. 选择操作系统版本，并点击【下一步】6. 命名虚拟机，可任意路径，并点击【下一步】7. 配置处理器，并点击【下一步】8. ...
2018-03-29 11:25:29
8283
原创 虚拟机的安装
最近开始了大数据的学习，好久都没写过博客了，为了记录一下学习的笔记，接下来把学习的笔记都记录到博客上，以备以后查看，首先要安装虚拟机，通过虚拟机安装Linux系统，在Linux 下部署Hadoop学习，接下来先介绍一下虚拟机的安装1.虚拟机的下载地址：https://pan.baidu.com/s/18Ia52JLv_9liLgLVWezBdA2.虚拟机的安装 2.1. 下载...
2018-03-29 09:37:56
252
原创 关于Tomcat下项目被启动两次为问题
最近遇见了一个很搞得事情，在tomcat下启动项目时自己写的定时程序被执行了两次，导致程序启动了两个线程，使定时任务在几秒间隔内执行了两次，后来通过日志查到，原来是tomcat将项目启动了两次，为什么呢？我的问题原因是由于tomcat下配置的问题；为了让程序可以通过域名直接访问，而不用输入项目名，所有要对tomcat配置项目的映射，由于客户那里配置的有问题所有导致程序启动两次。错误配置：a
2017-03-16 14:02:36
20884
9
原创 可编辑div中如何在光标位置添加内容
之前做了一个可编辑div需要在里面插入内容，搜了好多代码，就这个能实现我的功能，记录一下，以备以后用 UMEDITOR 简单功能 UMEDITOR 简单功能 $(function(){ $("#myEditor").focus(function(){ $("#myEditor").removeClass("fl
2016-08-09 10:43:51
6930
1
原创 springmvc复杂表单的编写处理
对于复杂表单的编写，因为我做的是一个调查问卷，这些问卷数据是从数据库中读出来的，所有题目数量不确定，即表单数量不确定，所以比较复杂，后来上网搜了一些资料把它弄出来了。首先，要建立两个对象，一个是问卷类型对象，另一个是问题对象：questionnaire问卷类型类import java.util.List;public class QuestionNaire { privat
2016-06-30 13:22:37
1777
原创 eclipse 创建maven项目时 报错 Unable to create project from archetype [org.apache.maven.archetypes:ma
Unable to create project from archetype [org.apache.maven.archetypes:maven-archetype-quickstart:RELEASE]The desired archetype does not exist (org.apache.maven.archetypes:maven-archetype-quickstart:1
2016-06-08 13:05:27
3202
2
原创 Failed to load JavaHL Library
以前使用的电脑是32位的，安装的svn可以正常使用，但是现在的电脑室64位的，安装好svn后，把项目提交到svn的过程中，总是弹出来一个错误的对话框： Failed to load JavaHL Library. These are the errors that were encountered: 从网上查看了一下解决办法， 1.选择window--->preferences
2016-06-08 13:00:26
544
原创 the Maven Integration requires that Eclipse be runing in a JDK,because a number of Maven core plugin
若在Eclipse启动时，出现上图中的情况解决方法：1：打开eclipse Click on ‘Window’ ->‘Preferences’ -> ‘Java’ -> ‘Installed JREs’. If you can’t find any JDK on the list -> click ‘Add’ ->‘Standard VM’ -> set all pa
2016-06-08 11:57:17
859
原创 maven的配置
maven配置步骤如下：1.下载maven3.1.1；2.解压缩maven；3.添加环境变量MAVEN_HOME变量值为E:\Java\environment\apache-maven-3.1.1； 4.将环境变量添加到path中%MAVEN_HOME%\bin;5.新建本地仓库文件夹repo； 6.修改conf文件夹下的settings.xml文件
2016-06-08 11:48:09
317
原创 ssh项目启动tomcat很慢问题
写的得ssh项目一开始不知道什么原因启动tomcat很慢出现一些信息2014-11-07 09:54:09 org.hibernate.cfg.SettingsFactory RDBMS: Oracle, version: Oracle Database 11g Release 11.1.0.0.0 - Production2014-11-07 09:54:09 org.hiberna
2016-04-16 23:47:35
2744
原创 java.lang.NoClassDefFoundError: org/apache/commons/lang3/StringUtils
java.lang.NoClassDefFoundError: org/apache/commons/lang3/StringUtils
2016-03-29 17:46:03
1309
原创 java如何用正则解析HTML中img标签里图片的路径
content为需要解析HTML的源码，注意是string类型的private String[] getImgs(String content) {String img = "";Pattern p_image;Matcher m_image;String str = "";String[] images = null;String regEx_img = "(]*?>
2016-03-15 17:56:29
5652
1
转载 Neither the JAVA_HOME nor the JRE_HOME environment variable is defined
对于使用IDE开发的程序员来讲，并不是所有人都对自己用来吃饭的工具了如指掌。常在阴沟跑，哪能不翻船。为此我把自己使用Tomcat/Eclipse的一些经验教训整理了一下，会陆续的贴出来，也许会帮到和我遇到同样问题的人。 先讲一个Tomcat的问题。很多人兴冲冲的下载了一个Tomcat，跑到bin看到一个startup.bat就去执行，结果提示Neither the JAVA_HOME no
2016-02-29 22:47:07
595
原创 175. Combine Two Tables
Table: Person+-------------+---------+| Column Name | Type |+-------------+---------+| PersonId | int || FirstName | varchar || LastName | varchar |+-------------+---------+Per
2016-01-08 21:27:43
635
原创 jxl问题，报错如下 Exception in thread "main" java.lang.NoClassDefFoundError: jxl/write/WritableCell
当 Java 虚拟机或 ClassLoader 实例试图在类的定义中加载（作为通常方法调用的一部分或者作为使用 new 表达式创建的新实例的一部分），但无法找到该类的定义时，抛出此异常。把jxl.jar放入\JAVA\jre\lib\ext，就解决了
2015-08-29 20:02:42
1547
原创 软件测试if else路径开源代码java中java.util.Date里面的pase方法
软件测试if else路径开源代码java中java.util.Date里面的pase方法
2015-04-18 21:45:24
633
原创 软件测试if else路径开源代码java中String.java中的toLowerCase方法
软件测试if else路径开源代码java中String.java中的toLowerCase方法，其中根据ifelse的多少来提取路径，如果有n个if else的话即有2^n条路径
2015-04-18 21:39:59
883
Wijmo-Open.2.2.0开源版破解版
2016-11-29
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人