自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(10)
  • 问答 (2)
  • 收藏
  • 关注

原创 运行Tomcat时报java.lang.UnsupportedClassVersionError: oracle/demo/oow/bd/ui/IsUserLogued

错误详情:java.lang.UnsupportedClassVersionError:

2017-09-04 23:20:54 447

原创 基于HBase的云盘项目复制功能总结

表结构: (parentId为父文件的ID)设计思想:**从前台获取的参数:**ids(所选中的文件或文件夹的id数组),dst(目的地文件的id)。 **步骤:**1.把ids的文件在HDFS中移动到dst 2.将复制文件添加到file与user_file表中。 难点解析: 复制的难点在于需要将文件信息添加入file表,并且需要将父子文件的关系传到user_file

2017-08-21 17:12:18 944

原创 云盘小程序(Hbase数据库):注册,登录部分

需求分析:实现已给界面的云盘的注册,登录功能,要求功能所需要的表全都放在Hbase中。登录注册界面: 设计表 1.表gid:为计数器,每注册一个用户其gid列中的值就会加1,作用是生成其他行所需id。 2.表user_id:是id和用户名的映射,作用是当判断是否正确登录时,我们通过用户所输入的用户名,去匹配其对应id,然后通过id去id_。3.表id_user:存储用户所有信息。

2017-08-12 18:03:42 1136

原创 hbase中分页过滤器详细解析

分页过滤器定义hbase中分页过滤器的机制设计思想

2017-08-10 00:41:16 2581 1

原创 深入解析mapreduce中shuffle的工作原理

详细讲解mapreduce中shuffle的工作原理:一,map端shuffle的工作流程二,reduce端shuffle的工作流程以及一些容易理解出错地方的总结

2017-08-08 19:59:54 9339

原创 Hbase API

JUnit 4 开始使用 Java 5 中的注解,常用的几个 注解为: @BeforeClass:针对所有测试,只执行一次,且必须为static void @Before:初始化方法 @Test:测试方法,在这里可以测试期望异常和超时时间 @After:释放资源 @AfterClass:针对所有测试,只执行一次,且必须为static void @Ignore:忽略的测试方法我们的Hbas

2017-08-07 00:21:34 468

原创 注解,泛型,反射的小应用:生成增删改查SQL的语句

通过一个生成SQL语句的小程序,通俗易懂的阐述了注解,泛型,反射。如果你对这三点还有疑惑,可以将这个例子敲一下,是个相当不错的例子

2017-08-05 00:28:41 1213

原创 hadoop的序列化分析及一个自定义Writable的简单例子

序列化分析:序列化和反序列化就是结构化对象和字节流之间的转换,主要用在内部进程的通讯和持久化存储方面。 Writable的简单例子,用一个扑克牌的例子,清晰的阐述了如何去创建一个自定义的Writable。

2017-08-03 23:46:49 857

原创 你还在用错误的方法编写倒排索引吗?

看了好多博客大家都在用Map-Combine-Reduce模式编写倒排索引,其实这样编写并不完善,之所以这么说,是因为当输入文件大小大于一个block(数据块)大小时,就出现问题了,而解决问题的方法就在该文章中

2017-08-02 20:27:55 783 1

原创 大数据行业的”hello word” – word count

大数据行业的”hello word” – word count问题描述:单词统计,统计一个文件,每个单词出现了多少次? 使用技术:mapreduce(map阶段:把输入文件进行切块,切成单词; reduce阶段:进行单词统计)

2017-08-01 23:16:25 769

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除