- 博客(90)
- 资源 (63)
- 收藏
- 关注
RSS订阅原创 Flink CEP相关资料收集
https://www.jianshu.com/p/04fd02c4db3chttps://blog.csdn.net/rongyongfeikai2/article/details/83656505
2020-11-28 20:00:31
180
原创 Flink SQL client相关资料收集
执行外部的sqlhttps://blog.csdn.net/qq_26502245/article/details/107520111https://blog.csdn.net/qq_31866793/article/details/108975103TableEnvironment 使用相关https://blog.csdn.net/weixin_43970890/article/details/102502887
2020-11-28 19:46:34
196
原创 Mysql5.7千万数据快速插入解决方案
https://blog.csdn.net/zhanglong_4444/article/details/86743371
2020-05-30 23:46:06
378
原创 使用JdbcTemplate/JDBC流式读取数据库
JDBC原生实现注意MySql中conn.prepareStatement("select * from table", ResultSet.TYPE_FORWARD_ONLY, ResultSet.CONCUR_READ_ONLY); // 这里因为MySQL驱动实现使用Integer.MIN_VALUE来判断是否使用流的方式preparedStatement.setFetchSize(Integer.MIN_VALUE);@Testpub
2020-05-30 09:28:27
4234
1
原创 DataOps
https://www.jianshu.com/p/36652c90e2d6手工运维到自动化运维再到平台化运维运维发展历程：手工运维->自动化运维->平台化运维->dataops->aiops
2020-03-07 21:22:51
345
原创 大数据ETL工具收集
1、Flink job + sql2、Spark streaming + sql3、Kafka stream + ksql4、apache NIFI/StreamSets/product-sp5、airflow etchttps://cloud.tencent.com/developer/article/1078852StreamSets由Informatica前首席...
2020-03-07 21:21:03
989
原创 Flink/Spark 如何实现动态更新作业配置
原文链接https://cloud.tencent.com/developer/article/1483745
2020-02-22 14:33:47
407
原创 neo4j常用操作笔记
关系查询match (n:Data{name:"一些数据"}) -[:包含]-> (m:Data{name:"aaaa"}) return m,n存在对象后进行 关系match (n:Data{name:'数据'}),(m:BigData{name:'大数据'}) create (n)-[:rel]->(m)或者match (n:Data{name:'一些数据'}),...
2020-02-15 09:04:08
310
原创 ES 常用聚合操作java api示例（转）
1https://www.cnblogs.com/xionggeclub/p/7975982.html
2020-02-11 15:34:10
436
原创 neo4j入门
资料：1https://www.jianshu.com/p/9e3c4892ab3e2https://www.w3cschool.cn/neo4j/3https://www.cnblogs.com/zz27zz/p/11811168.html4https://www.cnblogs.com/jpfss/p/10874001.html5https://www.jians...
2020-02-06 16:16:15
141
原创 使用docker搭建spark环境最简单方法
https://www.jianshu.com/p/314129ceb883获取docker镜像sudo docker pull sequenceiq/spark:1.6.0运行docker容器sudo docker run -it --name spark --rm sequenceiq/spark:1.6.0 /bin/bash运行作业$ cd /usr/lo...
2019-09-27 22:33:36
944
原创 pom的settings.xml文件配置为国内镜像
在C:\Users\Administrator\.m2\文件夹中的settings.xml文件中添加如下内容，如果没有settings.xml文件新建一个<settings xmlns="http://maven.apache.org/SETTINGS/1.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance...
2019-08-10 15:40:13
533
原创 angular组件库
NGX Bootstrap https://github.com/valor-software/ngx-bootstrap 2. PrimeNG https://github.com/primefaces/primeng 3. NG Bootstrap https://github.com/ng-bootstrap/ng...
2018-09-02 12:54:21
587
1
原创 Spring Boot工程demo
目标：1 建立一个spring boot demo2 包含swagger导出功能3 通过mybatis访问数据库步骤：1 通过idea建立一个spring boot工程，注意pom要添加依赖如下：否则无法启动<dependency> <groupId>org.springframework.boot</groupId> &l...
2018-08-19 11:06:39
199
转载 Spring RestTemplate SSL请求
转载地址：http://blog.csdn.net/ychau/article/details/53905886Spring RestTemplate简单说明现在REST服务已经很普及了，在我们的程序中，经常会需要调用REST API，这时候会有很多选择，原始一点的JDK自带的，再进一步点使用HttpClient，或者说如果我们使用Jersey这种框架的话，也会自带rest
2017-07-22 20:42:52
953
原创 nginx中关于创建work进程数目问题的心得
nginx创建work进程是在一个循环中进行的；static voidngx_start_worker_processes(ngx_cycle_t *cycle, ngx_int_t n, ngx_int_t type){ for (i = 0; i //省略 ngx_spawn_process(cycle, ngx_worker_p
2017-03-14 17:07:43
2445
1
原创 openl FBO使用经验
openl FBO可实现离屏渲染，然后可以把渲染后的图象读取出来保存到磁盘上；这个特性在图像处理上很有用；FBO和window上GDI的双缓存机制是一样的；Demo连接如下：http://download.csdn.net/detail/sohu_2011/9715717
2016-12-19 20:03:39
566
原创 实时鱼眼校正
鱼眼校正在opencv里面有，比较复杂，主要思想是用棋盘图片首先对鱼眼校正，保存相关参数到xml中后续校正的时候，直接用xml中保存的参数，不需要计算，过程较复杂，在速度上如果用opencl或cuda实现也满足需要；本文介绍另外的一个方法，主要参考文献有：http://paulbourke.net/dome/fish2/http://paulbourke.net/dom
2016-12-19 19:45:12
11716
25
原创 编译vlc android 经验总结
# 环境- ubuntu 16- jdk-8u102-linux-x64.tar- android-ndk-r13-linux-x86_64- android-sdk_r24.4.1-linux# 注意事项下载上述安装包可用迅雷下，速度很快；ubuntu要用14以上；我之前用12没有编译成功；网上搜索说要用14；编译成功与否，网速起决定性作用
2016-10-17 20:25:38
2200
2
转载 OpenSS与服务端进行双向认证的客户端代码
转载于http://blog.sina.com.cn/s/blog_4c451e0e010143v3.html一、概念：1.什么是 SSL？ SSL 是一个缩写，全称是 Secure Sockets Layer。 它是支持在 Internet 上进行安全通信的标准，并且将数据密码术集成到了协议之中。 数据在离开您的计算机之前就已经被加密，然后只有到达它预定的目标后才被解密
2016-06-17 19:46:28
3535
原创 c++ winhttp通过https双向认证
不喜欢看下面内容的tx可以直接下载源代码；但是上传到csdn下载哪里，要等很长时间，无法把上传连接放到这里代码中的ca.p12放到与exe相同目录下，并且应该是自己生产的；总结：两个关键点：1 win下如何加载fpx格式的客户端认证证书，并用于https认证2 如何通过winhttp进行SSL certificate主要内容：一 加载fpx格式证
2016-06-16 15:49:09
7654
原创 window apache+openssl双向认证配置
window apache+openssl双向认证配置参考资料：http://www.iteye.com/topic/1131378一 环境在window上和在linux上配置步骤差不多，但是在windows上有一点小改动，按照下面步骤在window上安装后无法重启httpd,并在error.log中发现这么一句话：SSLPassPhraseDialog b
2016-06-15 18:42:42
1799
1
转载 Android as Bluetooth Low Energy Peripheral (GATT server).
http://blog.csdn.net/u013606170/article/details/46038283#commentsI demonstrate how to write a simple BLE peripheral application in Android here. I am bad in Android development, The UI w
2016-05-19 10:33:03
791
原创 cmake中使用c++11
CMakeLists.txt文件如下："add_compile_options(-std=c++11)"是关键cmake_minimum_required (VERSION 2.6)project (hello)SET(CMAKE_C_COMPILER g++)add_compile_options(-std=c++11)set(SRC_LIST test.c)
2016-04-28 19:03:51
23813
2
原创 对exe工程的单元测试如何测？
最近想了关于单元测试的问题，突然看见有人问title的问题，我的理解是：这个问题是伪命题！原因是：exe已经是最后的产品，应该属于集成测试的范围，不应该在说单元测试了，换句话说，对exe的测试是集成测试，不是单元测试了；所以，不必纠结于对exe进行单元测试；
2016-01-30 21:06:52
633
原创 android中用freetype提取字模
1 从github下载可以通过NDK编译的freetype，地址 https://github.com/CyanogenMod/android_external_freetype2 建立一个testjni工程，添加add native support (工程右键->android tools->add native support,可以产出jni目录), 把上面的lib copy到te
2015-09-24 15:37:11
4385
原创 android NDK编译中遇到atof错误
今天使用ndk编译一个第三方库，编译ok后，运行的时候报错dlopen failed:cannot locate symol "atof" referenced by ...网上查找了资料，原因是atof不是库中的函数，而是inline函数：http://stackoverflow.com/questions/14571399/android-ndk-cant-find-atof-f
2015-05-18 17:33:39
3497
1
原创 ubantu配置飞信机器人
飞信机器人下载地址http://download.csdn.net/detail/sohu_2011/8284989说明：1 cenos54X64_20101113.rar里面有个lib目录，包含的是fetion运行库；2 fetion就是飞信机器人运行程序；使用方法：1 把cenos54X64_20101113.rar解压，在windows上解压延后在copy到l
2014-12-22 10:20:34
965
2
转载 LINUX下通过外部SMTP发邮件
安装mailx，如下：grefen@ubuntu:~$ sudo apt-get install mailxReading package lists... DoneBuilding dependency tree Reading state information... DonePackage mailx is a virtual package provided
2014-12-21 22:38:16
14892
1
原创 Windows下安装OpenSSL
解压OpenSSL， 在其目录下可以有个INSTALL.W32文件，这个文件就是在windows下的安装说明。用UltraEdit等工具打开它查看安装编译方法;
2014-04-26 20:28:15
804
转载 看到一位专注编程几乎40年的美国计算机科学家关于职业精神的回复后我几乎无语狼狈不堪
我认为国内从事软件开发的公司和个人都普遍认为“程序员是吃青春饭的”，一般程序员积累一些经验，过几年或十几年后，就转型团队管理、产品管理之类不用写代码的职位，有些程序员即使转型架构师这样的技术职位，也慢慢地代码越写越少，会议越开越多。《Hulob on Patterns》（2004年出版）一书的作者，美国计算机科学家Allen Hulob（1955年出生）先生在给我回复中发问：“我很好奇
2013-03-21 09:20:59
1532
原创 windows上vim+tags+taglist+cscope配置
一 背景：linux环境下有两大编译环境，一个是本文说的vim,一个是emacs；在windows下vs很好用，但也有一个问题，当代码量很多的时候，vs很占资源，机器拖的很慢，并且操作起来反应也很慢；有时候，vs会莫名其妙的卡住，不得不等或重新启动； vim这种就不会有vs的问题，但是学习起来比较费劲；vim编辑环境是有很多工具组合在一起的，你想要什么功能，就安装什么样的工具，最终继承
2013-02-07 16:09:28
3986
转载 在UBUNTU上安装EMACS
本文章是汇总文章，内容都是来自http://jasonal.blogspot.com/2006/05/getting-cvs-emacs-23.html与http://www.dirk.sh/diary/install_emacs_23_in_ubuntu_610，因为这两个BLOG中各有自己的问题，所以再写一汇总的，一次解决掉1、 如果你没有CVS的话，sudo ap
2013-02-05 20:27:12
6055
转载 再说TCMalloc
http://code.google.com/p/gperftools/downloads/list http://blog.163.com/cp7618@yeah/blog/static/70234777201251345350339/Tcmalloc通过preload或者直接动态链接的方式对malloc等内存分配和释放函数进行截获并提供服务。Tcmalloc提供接口主要涵盖
2013-02-01 09:44:28
3404
原创 编译OSG及OsgOcean
一步步编译OsgOcean电脑：操作系统：win7编译器：vs2010显卡：NVIDIA GeForce GTX 550Ti准备工作一 安装cmake网络下载cmake，并安装；我安装的是cmake-2.8.9-win32-x86.exe二 下载OSG并编译osgOcean 1.0.1是用osg开发的，所以要安装OSG,官网上说可以用OSG2.8.2编译，所
2012-08-26 20:23:44
13329
7
原创 nedmalloc内存分配器配置介绍
主页见http://www.nedprod.com/programs/portable/nedmalloc/使用： 最新版本: v1.10，该版本没有vc工程，需要通过脚本构建vc的工程；方法：首先，安装python2.7；然后安装sconshttp://www.scons.org/将Python27的安装目录加到path当中；由于scons依赖Python
2012-08-25 14:24:54
10013
3
转载 如何替换vc静态库里的全局内存分配器(libcmt.lib)
http://blog.vckbase.com/bastet/archive/2011/11/18/54707.html根据网上的引用，1、先从libcmt.lib里把对应的库删掉（得保存原来的）注：我这里是vc2010的。SET OUTCMT=newlib\libcmt.libLIB /IGNORE:4006,4221 /REMOVE:f:\dd\vctools\
2012-08-25 13:44:28
1697
转载 推荐一个跨平台内存分配器
http://www.cppblog.com/feixuwu/archive/2010/07/10/119980.aspx昨天一个同事一大早在群里推荐了一个google project上的开源内存分配器（http://code.google.com/p/google-perftools/），据说google的很多产品都用到了这个内存分配库，而且经他测试，我们的游戏客户端集成了这个最
2012-08-25 13:41:45
1005
原创 一句话读书之STL源码剖析
侯捷的这本STL源码剖析写的很不错，详略得当，通俗易懂；是理解STL内部原理一本难得的好书；第一章介绍了STL中用到的可能使一些人困惑的c++语法第二章介绍了STL中空间适配器的设计；对设计内存池有借鉴意义；第三章介绍了traits编程技法，stl关键技术，本书核心；第四章介绍了各种序列式容易的内部实现第五章介绍了关联容器的内部原理与实现，包括二叉平衡树
2012-08-05 11:09:07
788
Making-reliable-distributed-systems-in-the-presence-of-software-errors
2016-02-26
linux+飞信机器+配置
2014-12-22
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人