msy_xingfu1314-CSDN博客

import java.io.File;import java.io.FileInputStream;import java.io.IOException;import java.io.InputStream;import java.sql.Connection;import java.sql.DatabaseMetaData;import java.sql.Driver;

2015-11-16 17:23:15 422

转载 hadoop “util.NativeCodeLoader: Unable to load native-hadoop library for your platform”

hadoop WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable 搜了好多文章，都说是跟系统位数有关系，我使用的是Centos 6.5 64位操作系统。前两天在做Doc

2015-09-10 15:48:58 361

转载 Mongodb Replica Sets 副本集架构实战 --个人记录

mongodb单机可靠性比较低，我们投入生产环境往往需要多台服务器的容灾和负载均衡，mongodb推荐使用Replica Sets来进行小的容灾和负载解决方案。我相信很多中小型互联网公司3-4台mongodb服务器的配置无论从抗压和稳定角度来说都已经足够了，至少数据量在千万级以下都不需要考虑sharding分片和cluster集群。我们公司最近将mongodb投入生产，本文将对架设，模拟灾难（

2015-07-24 14:14:47 562

转载搭建高可用MongoDB集群（四）：分片-----个人记录

解决：从节点每个上面的数据都是对数据库全量拷贝，从节点压力会不会过大？数据压力大到机器支撑不了的时候能否做到自动扩展？在系统早期，数据量还小的时候不会引起太大的问题，但是随着数据量持续增多，后续迟早会出现一台机器硬件瓶颈问题的。而mongodb主打的就是海量数据架构，他不能解决海量数据怎么行！不行！“分片”就用这个来解决这个问题。传统数据库怎么做海量数据读写？其实一句话概括：

2015-07-24 11:21:20 440

转载深入副本集内部机制----个人记录

这篇文章深入研究一下副本集的内部机制。还是带着副本集的问题来看吧！副本集故障转移，主节点是如何选举的？能否手动干涉下架某一台主节点。官方说副本集数量最好是奇数，为什么？mongodb副本集是如何同步的？如果同步不及时会出现什么情况？会不会出现不一致性？mongodb的故障转移会不会无故自动发生？什么条件会触发？频繁触发可能会带来系统负载加重？Bully算法 mongodb副本集故障转移

2015-07-24 10:15:52 399

转载搭建高可用的MongoDB集群（上）：MongoDB的配置与副本集----- 个人记录

这篇文章看完这些问题就可以搞定了。NoSQL的产生就是为了解决大数据量、高扩展性、高性能、灵活数据模型、高可用性。但是光通过主从模式的架构远远达不到上面几点，由此MongoDB设计了副本集和分片的功能。这篇文章主要介绍副本集：mongoDB官方已经不建议使用主从模式了，替代方案是采用副本集的模式，点击查看，如图：那什么是副本集呢？打

2015-07-24 09:28:09 516

转载个人记录。

以下为原文在大数据的时代，传统的关系型数据库要能更高的服务必须要解决高并发读写、海量数据高效存储、高可扩展性和高可用性这些难题。不过就是因为这些问题Nosql诞生了。NOSQL有这些优势：大数据量，可以通过廉价服务器存储大量的数据，轻松摆脱传统mysql单表存储量级限制。高扩展性，Nosql去掉了关系数据库的关系型特性，很容易横向扩展，摆脱了以往老是纵向扩展的诟病。高性能，No

2015-07-23 18:00:54 304

转载 mongodb 索引

好，今天分享下mongodb中关于索引的基本操作，我们日常做开发都避免不了要对程序进行性能优化，而程序的操作无非就是CURD，通常我们又会花费50%的时间在R上面，因为Read操作对用户来说是非常敏感的，处理不好就会被人唾弃，呵呵。从算法上来说有5种经典的查找，具体的可以参见我的算法速成系列，这其中就包括我们今天所说的“索引查找”，如果大家对sqlserver比较了解的话，相信

2014-09-10 17:47:52 446

原创 java对mongodb的and, in, or 常用操作

DBCollection dbcon = null; DBObject query = new BasicDBObject(); BasicDBList values = new BasicDBList(); // or用法 --->> 查询薪水salary10000 values.add(new B

2014-04-30 10:52:19 1137

转载 quartz spring配置

Spring中Quartz的配置Quartz是一个强大的企业级任务调度框架，Spring中继承并简化了Quartz，下面就看看在Spring中怎样配置Quartz：首先我们来写一个被调度的类：package com.kay.quartz;public class QuartzJob{ public void work() { S

2014-04-28 09:34:23 374

原创 js和html转义

js中用 "/" 进行转义；html中的转义：&

2014-04-16 19:23:25 395

转载 Mongodb 聚合分组

aggregate() 方法MongoDB中聚合的方法使用aggregate()。语法aggregate() 方法的基本语法格式如下所示：>db.COLLECTION_NAME.aggregate(AGGREGATE_OPERATION)实例集合中的数据如下：{ _id: ObjectId(7df78ad8902c) title: 'MongoDB

2014-04-10 16:03:02 870