自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(51)
  • 资源 (7)
  • 收藏
  • 关注

原创 Nacos 端口偏移量说明

可知:rpcPortOffset() 方法返回了一个偏移量,偏移量细分成了 SDK_GRPC_PORT_DEFAULT_OFFSET 与 CLUSTER_GRPC_PORT_DEFAULT_OFFSET 两个静态Integer类型,分别为1000 和 1001。解决方案:修改 server.port 为一个此服务器上少用的端口,实现 server.port + 1000 或者 server.port + 1001 后与此服务器其他进程端口不冲突。这样,问题得到解释:8425 + 1000 = 9425。

2023-11-28 14:00:52 948

原创 保姆级 ARM64 CPU架构下安装部署Docker + rancher + K8S 说明文档

ARM64 下部署docker + K8S + rancher,rancher导入K8S集群

2023-11-24 19:06:00 1476 1

转载 【Android】AS报错:Configuration on demand is not supported by the current version of the Android Gradle

错误】Configuration on demand is not supported by the current version of the Android Gradle plugin since you are using Gradle version 4.6 or above.Suggestion: disable configuration on demand by setting...

2019-04-30 22:34:25 490

转载 centos 7.3配置Nginx,简易的图片服务器

1.安装gcc gcc-c ++(如新环境,未安装请先安装)yum install -y gcc gcc-c ++2.安装PCRE库$ cd /usr/local$ wget http://jaist.dl.sourceforge.net/project/pcre/pcre/8.33/pcre-8.33.tar.gz$ tar -zxvf pcre-8.33.tar.gz$ cd pc...

2018-11-06 12:22:55 533

原创 linux centos 7.3编译jsoncpp

1. 准备环境系统:CentOS Linux release 7.3.1611 (Core)jsoncpp:jsoncpp-src-0.5.0.tar.gz2. 安装sconsyum install scons百度百科:scons是一个Python写的自动化构建工具,从构建这个角度说,它跟GNU make是同一类的工具,是一种改进,并跨平台的gnu make替代工具,其集成功能类似于a...

2018-10-18 16:05:33 1280 3

原创 Centos 7.3 编译opencv3.3.1

1, 配置IPPICV1,手动下载 ippicv_2017u3_lnx_intel64_general_20170822.tgz2,修改opencv里相关配置文件打开终端,输入gedit /home/lc/opencv_source/opencv/3rdparty/ippicv/ippicv.cmake #记得lc换成自己的用户名将47行的"https://raw.githubu...

2018-07-31 17:02:19 443

原创 flume 抽取图片文件数据写入到HDFS

flume 是一个日志处理的工具,其擅长处理文本数据。不过在有些使用场景,比如采集服务器上的很多小的图片数据时,也可以派上用场。 话不多说,直接上flume-conf配置信息:# ==== start ====agent.sources = spooldirsourceagent.channels = memoryChannelagent.sinks = hdfssink# For each

2017-11-30 11:43:54 3517 1

原创 Kafka Sink

flume 1.7.0 的kafka sink 能够将数据推送到Kafka消息队列,支持的kafka版本等于或者大于 V0.9.XX配置文件如下:# Licensed to the Apache Software Foundation (ASF) under one# or more contributor license agreements. See the NOTICE file# di

2017-08-01 16:06:25 3342

原创 Greenplum pg_hba.conf entry for host "192.168.2.111", user "gpadmin", database "template1", SSL off

Greenplum 客户端连接报错 SSL off报错详情:pg_hba.conf entry for host “192.168.2.111”, user “gpadmin”, database “template1”, SSL off解决方案:找到master安装目录下的 pg_hba.conf 文件,目录如下: /home/gpadmin/gpdata/gpmaster/gpseg-1 【

2017-05-20 19:16:15 7071

原创 使用sqoop时,Ensure that you have called .close() on any active streaming result sets before attempting

Warning: /opt/cloudera/parcels/CDH-5.5.1-1.cdh5.5.1.p0.11/bin/../lib/sqoop/../accumulo does not exist! Accumulo imports will fail.Please set $ACCUMULO_HOME to the root of your Accumulo installation.1

2016-08-17 13:52:45 2401

原创 CDH 5.5.1安装oozie的坑

我安装时,遇到的最大的坑,就是mysql数据库驱动包的问题,将驱动包拷贝到安装oozie服务的/var/lib/oozie 目录下,即可!

2016-08-17 09:38:12 2622

原创 hadoop源码学习 InputFormat抽象类

hadoop最cool的就是MapReduce了,那么当运行一个MapReduce作业的时候,你有没有想过内部是如何实现的?存储在HDFS上的数据到底是特么的怎样被读取的?HelloWord级别的worldcount程序,是对文本文件一行一行的读的,为此我们需要对我们的文本进行处理,让其老老实实的一行一行的排着队。但是在生产环境中,各种格式的数据文件,恐怕一行一行的排队就满足不了我们的要求了。比如需

2015-12-28 22:06:27 523

原创 递归打印出HDFS上的所有文件夹

package com.hadoop.hdfs;import java.io.FileNotFoundException;import java.io.IOException;import java.net.URI;import java.net.URISyntaxException;import org.apache.hadoop.conf.Configuration;impor

2015-12-23 22:33:06 1470

原创 Hadoop中的FileSystem学习

要获取hdfs上的文件信息,有两种方法:通过JDK的java.net.URL 通过java.net.URL对象来打开一个欲从中读取数据的流(stream),在使用中这种方法时,需要为URL对象指定URLStreamHandlerFactory(),这样URL才能识别出hdfs://开头的标识。 这个方法在每个JVM中只能调用一次,所以它通常会被放在一个static block中执行

2015-12-19 14:59:04 469

原创 MapReduce

最近跟风在学hadoop,原因很简单,只是想装个B而已。但是装B路途总是充满着坑,在这里记录一路的装B历程。之前一直在看买的视频,看来看去,总感觉很特么简单,hadoop里的HDFS与MapReduce很好理解,但是动手实践起来,就是各种坑。一个入门级的MapReduce包括一个Map,一个Reduce Map主要用来清洗数据,根据具体的业务,指定key,每个key对应着相应的value,然后用P

2015-10-13 23:48:41 371

原创 文章标题

一阶矩: 一阶矩就是随机变量的期望二阶矩: 二阶矩就是随机变量的平方的期望三阶矩指的是随机变量的偏度, 四阶矩指的是随机变量的峰度, 因此通过计算矩,则可以得出随机变量的分布形状

2015-09-19 00:31:51 324

转载 使用 FileSystem JAVA API 对 HDFS 进行读、写、删除等操作

Hadoop文件系统 基本的文件系统命令操作, 通过hadoop fs -help可以获取所有的命令的详细帮助文件。 Java抽象类org.apache.hadoop.fs.FileSystem定义了hadoop的一个文件系统接口。该类是一个抽象类,通过以下两种静态工厂方法可以过去FileSystem实例: public static FileSystem.get(Configur

2015-08-13 21:49:44 393

转载 android背景选择器selector用法汇总

一.创建xml文件,位置:drawable/xxx.xml,同目录下记得要放相关图片

2015-03-14 22:06:51 330

原创 Handler机制

first,this is a framework,we can use the handler like fellow ways: Handler myHandler =new Handler ( ) { public void handlerMessage (Message msg){ super.handleMessage(msg);

2015-03-14 21:46:02 375

原创 点击事件的几种写法

一般在开发中,都是让Activity实现OnClickListener()接口,覆写起onClick()方法public class MainActivity extends Activity implements OnClickListener{private Button buttonOne;@Overridepublic void onCreate(Bundle savedInstanc

2015-03-05 12:25:25 998

转载 Android 百度地图 SDK v3.0.0 (二) 定位与结合方向传感器

在上一篇博客中,我们成功把地图导入了我们的项目。本篇我们准备为地图添加:第一,定位功能;第二,与方向传感器结合,通过旋转手机进行道路的方向确认。有了这两个功能,地图已经可以为我服务了~~~~效果图:好了,可以代码,为了方便,我把所有的按钮都放到了menu菜单中。 1、初次启动定位[java] view plaincopy在CODE上查看代码片派生到我的代码片/** * 定位的客户端

2015-03-04 20:54:08 691

原创 百度地图开发之实现运动轨迹 <二>

上篇日志有介绍到开发百度地图的几个重要的类还有方法,现在就来实现在百度地图上描绘出运动轨迹,具体步骤如下:一,在布局文件里声明百度地图的视图 二,在用百度地图时,先要将地图初始化: // 地图初始化 mMapView = (MapView) v.findViewById(R.id.bmapView); mBaiduMap = mMapV

2015-03-04 20:39:41 5182 3

原创 百度地图开发之实现运动轨迹 <一>

近日想在android平台下进行一个基于地理位置的APP开发,于是想到了利用百度地图的API进行开发。于是参考了网上的一些代码以及相关知识的分享,现在记录一下在百度地图上描绘出运动轨迹的开发过程! 首先,百度地图定位功能的一个重要的类就是 LocationClient。 此处需要注意:LocationClient类必须在主线程中声明。需要Context类型的参数。 Context需要时全进程

2015-03-04 20:13:05 7492

原创 android的异步任务解析

异步操作一般解决线程被阻塞的问题,一般比较耗时的操作不放在主线程里,而是另外开启一个新的线程来操作。 android提供了一个异步任务类:AsyncTask,该类的用法是一般由程序员自己声明一个AsyncTask子类,该子类要覆写其doInBackground()方法,该方法里实现较耗时的操作。然后在主线程里声明该子类的对象,然后调用其execute()方法(而不是doInBackground()

2015-03-04 13:30:53 527

转载 SQLite数据库增删改查操作

一、使用嵌入式关系型SQLite数据库存储数据在Android平台上,集成了一个嵌入式关系型数据库——SQLite,SQLite3支持NULL、INTEGER、REAL(浮点数字)、TEXT(字符串文本)和BLOB(二进制对象)数据类型,虽然它支持的类型只有五种,但实际上sqlite3也接受varchar(n)、char(n)、decimal(p,s) 等数据类型,只不过在运算或保存时会转成对应的五

2015-03-03 23:22:21 495

转载 Android中Context详解 ---- 你所不知道的Context

大家好,  今天给大家介绍下我们在应用开发中最熟悉而陌生的朋友-----Context类 ,说它熟悉,是应为我们在开发中   时刻的在与它打交道,例如:Service、BroadcastReceiver、Activity等都会利用到Context的相关方法 ; 说它陌生,完全是   因为我们真正的不懂Context的原理、类结构关系。一个简单的问题是,一个应用程序App中存在多少个Cont

2015-03-03 20:26:26 343

原创 开发android的SQLite数据库技术

android开发中进行数据库记录插入时,要声明一个ContentValues对象,ContentValues values=new ContentValues();该对象中存储的是键值对,这里需要注意的是,键是数据库表里的列名,值是希望插入的具体数值,如 values.put(“id”,1); values.put(“name”,”tom”);接下来有:DataBaseHelper dbHel

2015-03-03 17:33:15 423

原创 android应用程序里使用SQLite

一,创建一个数据库操作助手类DataBaseHelper,该类继承自SQLiteOpenHelper。 重点还是重写其 onCreate(SQLiteDatabase db)和onUpgrade(SQLiteDatabase db, int oldVersion, int newVersion)两个方法。 代码如下:public class DataBaseHelper extends SQLi

2015-03-03 16:19:40 392

转载 @Repository、@Service、@Controller 和 @Component

@Repository、@Service、@Controller 和 @Component 将类标识为BeanSpring 自 2.0 版本开始,陆续引入了一些注解用于简化 Spring 的开发。@Repository注解便属于最先引入的一批,它用于将数据访问层 (DAO 层 ) 的类标识为 Spring Bean。具体只需将该注解标注在 DAO类上即可。同时,为了让 Spring 能够扫描类路径中

2015-02-10 13:58:18 357

转载 Hibernate自动生成实体类注解

常用的hibernate annotation标签如下:@Entity –注释声明该类为持久类。将一个Javabean类声明为一 个实体的数据库表映射类,最好实现序列化.此时,默认情况下,所有的类属性都为映射到数据表的持久性字段.若在类中,添加另外属性,而非映射来数据库的, 要用下面的Transient来注解.@Table (name=”promotion_info”) –持久性映射的表(表名=”p

2015-02-09 20:53:27 524

原创 MySQL 1215 Cannot add foreign key constraint 错误解决办法

产生这个错误的多数原因有一下两点: 1,两张表里要设主键和外键的字段的数据类型或者数据长度不一样 2,某个表里已经有记录了

2015-02-09 20:12:27 26195 4

转载 Hibernate @Temporal的使用

最近在研究hibernate标注,但是用到@Temporal标注时,我一开始认为使用该标注后,该属性的值会被自动赋值。不需要在插入数据时,给该属性赋值,通过反复研究最后发现不是这样。 @Temporal标签的作用很简单: (1) 如果在某类中有Date类型的属性,数据库中存储可能是'yyyy-MM-dd hh:MM:ss'要在查询时获得年月日,在该属性上标注@Temporal(Temporal

2015-02-09 12:45:44 554

转载 spring中context:property-placeholder/元素

1.有些参数在某些阶段中是常量比如 :a、在开发阶段我们连接数据库时的连接url,username,password,driverClass等 b、分布式应用中client端访问server端所用的server地址,port,service等 c、配置文件的位置2.而这些参数在不同阶段之间又往往需要改变比如:在项目开发阶段和交付阶段数据库的连

2015-02-08 20:27:26 326

转载 Spring中配置和读取多个Properties文件

一个系统中通常会存在如下一些以Properties形式存在的配置文件 1.数据库配置文件demo-db.properties: Properties代码 database.url=jdbc:mysql://localhost/smaple database.driver=com.mysql.jdbc.Driver database.user=root database.password=

2015-02-08 20:24:23 342

转载 Spring多数据源配置

在大型的应用中,为了提高数据库的水平伸缩性,对多个数据库实例进行管理,需要配置多数据源。在Spring框架被广泛运用的今天,可以很简单的运用Spring中的特性配置动态多数据。 首先配置一个基于c3p0.ComboPooledDataSource的数据源A,数据源B.daoContext.xml : <bean id="dataSourceA" class="com.mchange.v2.

2015-02-08 20:13:53 327

转载 Spring 2.5.6新特性之packagesToScan

如果你使用早前版本的Spring,又恰好采用了Annotation注解方式(而非传统XML方式)配置Hibernate对象关系映射,那么在通过org.springframework.orm.hibernate3.annotation.AnnotationSessionFactoryBean配置sessionFactory时,你一定对annotatedClasses、annotatedPackages

2015-02-08 19:57:43 323

转载 EL表达式学习

EL表达式

2015-02-08 12:54:16 420

转载 NavicatforMySQL插入数据出现乱码最近Navicat遇到个很蛋疼的问题,就是建立好数据

Navicat for MySQL插入数据出现乱码最近Navicat遇到个很蛋疼的问题,就是建立好数据库插入带有中文数据时出现中文乱码。搞了我一个多星期,查阅资料就是UTF-8乱码问题设置下就OK了,但是主要的问题是设置了还是出现中文乱码。我连Mysql的配置文件都改成了UTF-8但还是不了了事。最后连mysql数据库也给卸掉重装,但至今没有安装成功,这也是数据库最让人蛋疼的事!!! 

2015-02-07 21:40:12 3297

转载 Spring+Hibernate+Struts2整合文档

一、 Spring+Hibernate整合:Spring整合Hibernate,是做了一个很大的调整的,因为spring可以把管理Hibernate的工作都做了,以前的hibernate.cfg.xml文件都去掉了,而将这些内容都交给了spring来管理了。1、 applicationContext.xml文件中应该配置如下内容:Xml代码://配置数据连接类<bean id="

2015-02-07 17:00:10 403

转载 struts2中页面跳转问题个人小结(一)

在做SSH2整合时遇到很多页面跳转方面的问题,现将已解决的稍作整理如下: 1. struts2中从WEB-INF下的页面直接超链接到WebRoot目录下的页面,jsp页面中可以设置如下:              HomePage          在当前路径为http://127.0.0.1:8088/LYDF/department/departmentList.action

2015-02-07 15:28:46 442

Spark快速大数据分析

Spark快速大数据分析,高清带书签。

2017-08-19

apache oozie

Apache Oozie The Workflow Scheduler for Hadoop oozie唯一的权威指导书 2015年5月首版

2016-08-21

HBase企业应用开发实战

文件有100多M,因此保存在了网盘里,txt里有网盘的下载链接以及提取码。这里设置下载资源分,是为了得到更多同行的评论,一起学习吗!

2015-12-05

Hadoop海量数据处理

Hadoop海量数据处理 技术详解与项目实战 完整版pdf,清晰,带目录!

2015-10-14

mysql-connector-odbc-5.3.4-winx64.msi

mysql-connector-odbc-5.3.4-winx64.msi

2015-09-10

batik-all-1.7.jar

将SVG转化为JPG格式的java工具包

2015-08-31

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除