- 博客(4)
- 收藏
- 关注
RSS订阅原创 用位图索引技术实现超大规模数据量的分组算法
最近在做一个商业智能软件，也就是我们大家通常说的BI。找了许多资料，关于数据挖掘里面数据立方体的算法到时介绍的很多，但是个人却始终觉得没有什么实际的意义。而我所说的位图索引，也是书中概念的一部分。我把它拿来用来了，但是不是书中所说的一般的方式。个人也觉得挺幸运的，侥幸的知道了位图索引的概念，然后又侥幸的通过位图索引解决了大数据量处理的问题。可能前人已经想到了类似的方法，但是以下说诉，都是个人的思想
2012-09-26 23:28:47
1557
4
原创 基于“请求分页”的大数量处理
学过操作系统的人都知道请求分页存储管理方法，这也是为啥1G内存的计算机能够处理超过1G的数据量的原因。最近做项目遇到大数据量处理的问题，结合请求分页算法的原来，成功的处理了一亿条数据。到这儿来分享一下给大家：首先是一亿条数据的存储问题，这么多数据放在内存里，肯定会溢出的，更不用提数据的处理了。所以肯定要借助于磁盘存储了。结合操作系统的文件系统里的层次索引结构，我们可以设计出高效的存储方法。具体
2012-08-08 13:49:18
571
原创 如何提高一款界面客户端软件操作的流畅度
个人也做过好长时间的界面开发，能实现各种漂亮的Or繁琐的界面，自认为水平还不错、、、这里就说个人的几点经验吧。如果对于一款大型的客户端软件，好吧，就拿eclipse说吧。eclipse的启动速度大家都知道，非常慢，一个进度条读了半天。如果没有那个进度条，用户多半快等的崩溃了。eclipse它加载了那么多东西，实际我们程序员用到的功能点只有几个，许多功能模块用不到也给加载了，这就不应该了。这就涉
2012-06-21 15:44:30
593
原创 Java实现连接池
//连接池原理，非常透彻public class ConnectionPool { private static String testTable = ""; // 测试连接是否可用的测试表名，默认没有测试表 private static int initialConnections = 2; // 连接池的初始大小 public static int incrementalConnec
2012-05-21 17:06:27
389
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人