try-catch-finally-CSDN博客

原创 spark streaming 自定义kafka读取topic的offset（python）

使用createDirectStream 来自定义设置读取的offset。

2017-05-07 20:03:49 4840 1

原创 spark处理mongodb数据（python版）

mongodb是一种文档型数据库，作为一个适用于敏捷开发的数据库，mongodb的数据模式可以随着应用程序的发展而灵活地更新。但是mongodb适合一次查询的需求，对于统计、分析（尤其是在需要跨表、跨库的情况下）并不是太方便，我们可以用spark来处理mongodb数据。

2016-12-03 21:48:43 11103 9

原创 tungsten replicator 代码的修改

Tungsten Replicator是一种MySQL复制引擎，支持跨数据库系统的复制，可以把mysql的数据同步到mongodb、oracle、hdfs等。我主要用tungsten replicator同步数据到mongodb，在使用的过程中遇到一些问题，根据这些问题对代码进行了修改。

2016-11-26 12:24:13 1400

原创 tungsten-replicator问题与解决方法

最近使用tungsten-replicator同步mysql的数据到mongodb，期间遇到不少错误，记录一下解决方法。tungsten-replicator在执行tpm install时默认会打日志在/tmp/tungsten-configure.log，如果安装时出问题可以查看这个日志。

2016-07-14 21:46:19 2284

原创百度实习面试

前段时间找实习，投了百度几个部门，最终终于收到录用的通知，总结一下面试题目。一、语言1、C++STL里map与hash_map的区别hash_map的用法和map是一样的，提供了 insert，size，count等操作，并且里面的元素也是以pair类型来存贮的。虽然对外部提供的函数和数据类型是一致的，但是其底层实现是完全不同的，map底层的数据结构是rb_tree而，hans

2014-11-16 13:21:44 1571

原创 Tesseract识别指定字符范围的字符

可以通过配置Tesseract来使用Tesseract进行OCR，opencv和opencv的C#版本Emgu都集成了Tesseract这个工具。但是在使用时经常会出现误判，比如把“s”识别成“5”，把“1”识别成“l”或“i”。可以设置相应的参数来识别指定范围的字符。

2014-09-22 16:26:23 18070 5

原创 LeetCode——Candy

题目：There are N children standing in a line. Each child is assigned a rating value.You are giving candies to these children subjected to the following requirements:Each child must have at lea

2014-09-17 20:30:38 1217

原创基于BP神经网络的数字识别

使用BP神经网络识别数字。

2014-09-08 18:39:26 6395 1

原创刷机中遇到的问题解决方法及一些感悟

刷机中遇到的问题解决方法及一些感悟之前我基本上没用过安卓手机，更没刷过机，又加上我比较粗心的性格，刷了N天才刷好，耽误了几天的工作。就在刚才终于刷成功了，兴奋之情难以言表。期间遇到了各种问题，走了很多弯路，现在想想，有时候的做法和想法真是可笑，不过期间也感悟到一些道理。这里总结一下，也许你能用到。

2014-08-17 02:20:50 9015

原创 “无法启动程序，因为计算机中丢失MSVCP100D.dll”的解决方案

用VS2012安装OpenCV时出现这个错误，在网上搜索了很多解决方案，最终解决了问题。现在把这些解决方案汇总一下。方案一：下载MSVCP100D.dll1、复制文件“msvcr100d.dll”到系统目录下。2、系统目录一般为：C:\WINNT\System32 64位系统为C:\Windows\SysWOW64。3、最后点击开始菜单-->运行-->输入regsvr32

2014-07-22 23:25:28 31235 3

原创图像处理——灰度化、二值化、膨胀算法、腐蚀算法以及开运算和闭运算

图像处理——灰度化、二值化、膨胀算法、腐蚀算法以及开运算和闭运算的的C#代码实现

2014-07-19 00:40:57 40068 2

原创 VS中生成、清理项目、调试、开始执行（不调试）、Debug 和 Release等之间的区别

VS中生成、清理项目、调试、开始执行（不调试）、Debug 和 Release等之间的区别

2014-06-29 18:57:42 5877 2

原创 LeetCode——Reverse Words in a String

#include #include #include using namespace std; void reverseWords(string &s) { vector vec; string rs; int start=0; int end=0; string temp; for(int i=0;i<s.siz

2014-06-19 10:00:12 836

原创算法谜题——三个水壶问题

问题：有一个充满水的8品脱的水壶和两个空水壶（容积分别是5品脱和3品脱）

2014-06-18 10:57:52 12882 2

原创 LeetCode——Max Points on a Line

#include //#include #include #include using namespace std;/** * Definition for a point. * struct Point { * int x; * int y; * Point() : x(0), y(0) {} * Poi

2014-06-16 16:00:41 917

转载字符串中有汉字的处理方法集合

1、str="aaa是"; re=/[\u4e00-\u9fa5]/g if(re.test(str)) { alert("有汉字") }2、简单汉字判断 private static int isCharacter(String word){

2014-06-14 19:04:03 1091

原创算法谜题——夜过吊桥代码实现

问题描述：四个人打算过一座吊桥，开始时他们都

2014-06-12 22:32:16 3927 6

原创网易游戏面试题——打怪按概率掉装备

你在游戏里面打怪的时候，怪死了会掉装备，然后一个怪有很多装备，掉哪个是随机的，但是每个装备都一个掉下的概率，现在让你设计算法，在一个怪死的时候随机掉一个装备，这个掉装备的过程满足装备的各自概率，比如，装备A掉下的可能为0.3，B为0.4，那么你的算法的结果中，比如掉下100000次，A和B掉下的比例必须接近3:4,一个数组a[NUM]存储题目中给定的概率，申请一个新的和他等

2014-06-11 22:43:50 9802

转载 Java:对象的强、软、弱和虚引用（转载）

本文介绍对象的强、软、弱和虚引用的概念、应用及其在UML中的表示。author: ZJ 07-12-1Blog: [url]http://zhangjunhd.blog.51cto.com/[/url]1．对象的强、软、弱和虚引用在JDK 1.2以前的版本中，若一个对象不被任何变量引用，那么程序就无法再使用这个对象。也就是说，只有对象处于可触及（reachable）状态，程序才能使

2014-05-07 21:32:32 671

原创 RPG游戏战斗场景的设计

用状态模式设计RPG战斗场景

2014-05-06 23:09:20 2699 1

原创英特尔实习面试小结

前几天去上海英特尔面试，昨天收到了录用的通知。

2014-04-15 10:27:44 3382 1

原创内存分析

前几天收到英特尔公司的电话面试，程序执行过程exe执行的时候直接放到操作系统执行class执行要放到虚拟机里面比如，硬盘中有一个小程序，运行时load到装载到内存区域。操作系统找到程序的起点执行一般在执行过程中的内存分成四部分。不同的操作系统不同，但基础的是这四部分：code segment代码区，data segment数据区，stack栈，heap堆

2014-04-03 19:09:41 839 1

转载 C#实现透明WinForm控件

public partial class tspControl : UserControl { public tspControl() { InitializeComponent(); SetStyle(ControlStyles.SupportsTransparentBackColor

2014-04-01 18:40:45 859

转载 fatal error LNK1123: 转换到 COFF 期间失败: 文件无效或损坏的解决方法

2014-04-01 18:30:04 651

mysql-linux-general-64

64位linux上通用的mysql binary，因为有时候不需要启动mysql服务，只需要连接一下其他服务器的mysql服务，下载官网的包耗时太长。

2017-10-16

mysqldump(用于备份数据)

mysqldump

2017-06-27

go-mysql-mongodb

用于实时同步mysql数据到mongodb，具体使用方法https://github.com/WangXiangUSTC/go-mysql-mongodb

2017-06-27

org.mongodb.spark:mongo-spark-connector_2.11:1.1.0

mongodb-spark官方连接器，运行spark-submit --packages org.mongodb.spark:mongo-spark-connector_2.11:1.1.0可以自动下载，国内网络不容易下载成功，解压后保存到~/.ivy2目录下即可。

2016-11-30

com.stratio.datasource:spark-mongodb_2.10:0.11.2

第三方mongo spark连接器，运行spark-submit --packages com.stratio.datasource:spark-mongodb_2.10:0.11.2可以自动下载，国内网容易下载失败，把这个文件解压后拷贝到~/.ivy2目录下即可。 com.stratio.datasource:spark-mongodb_2.10:0.11.2

2016-11-30