- 博客(17)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 通过hanlp分词写入kafka在flink计算词频统计实时热词topN写入mysql数据库
通过hanlp分词写入kafka在flink计算词频统计热词topN写入mysql数据库hanlp处理数据流入kafkahanlp使用可以参考下面官网本文样例读文本文件，通过hanlp分词进行了文版表情剔除，url剔除 正则处理，带语性分析需要下载hanlp的data放到resource下，使用标准的不用写 入kafkakafka中数据参考：flink处理kafka数据本地webui 需要引入依赖，加上本地启动的配置即可访问页面效果图pom文件hanlp处理数据流入kafkahanlp使用可以参考下面官
2022-05-13 17:32:26
721
原创 ElasticSearch7.10 生命周期配置 冷热分离 windows10版本测试
ElasticSearch7.10 生命周期配置 冷热分离 windows10版本测试下载官方ElasticSearch7.10 与对应版本的kibana 便于操作前提 安装jdk 并配置环境变量第一步解压文件，配置集群信息启动日志：集群验证：启动kibana：直接启动就可以启动kibana日志：kibana 访问页面：生命周期管理过程热区 配置暖区配置 需要配置warm节点冷区配置 需要配置cold节点删除区配置 并保存改策略注意： 索引必须按照该格式处理： # does not match patt
2021-11-03 19:31:41
1769
原创 Haddop+Hive 单机hadoop 单机hive
hadoop单机版hive使用首先确保linux环境已有java环境使用jps命令 看下面四个进程 是hdsf（hadoop）必须要启动的进程hadoop目录文件预览 注意使用目录etc 配置sbin 启动文件share 例子jar配置文件在etc/hadoop下面需要修改的文件如下：内容可以自行百度 很简单 配个端口 主机名 内存等start-all.sh 正常启动这个就可以了 如jps进程里看不到datanode 或者namenode 需要自行启动./hadoop-daemo
2020-08-17 18:21:33
252
原创 kettle 循环 oracle数据批量入Elasticsearch oracle循环导出数据文件 job循环
**基本思路：网上查了半天没有一个能实现的根据部分网友文章得到的思路先构造一个分页列表页，在按行执行这个分页计算数据全图预览**开始 测试执行一次设置变量（提取到的变量，表名和pagesize 有修改 直接启动是改一下就可以了）第一个转换：计算分页数量（其他项默认 只添加这2个变量）新建一个转换 命名自定义 前面已经定义了pagesize 这步主要获取pagenum通过oracle 表输入 获取总数 total ÷ pagesize 向上取整 = pagenum这里第一次用需要
2020-08-10 18:14:28
982
3
原创 逻辑表达式& | ! 转sql逻辑查询 and or not 逻辑表达式转sql逻辑查询 使用mybatis @SelectProvider
查询需求输入格式处理过程//keywords 为输入 逻辑查询关键词 public List<TestModel> countList(String keywords) { //逻辑语句转换 String title = ExpToSqlUtils.expToSql(keywords, "title", " like ", ...
2020-04-30 10:03:09
1081
原创 3行代码完成word转pdf或其他转换雷同
3行代码完成word转pdf或其他转换雷同aspectj、aspose-words引入依赖代码注意引入依赖 <dependency> <groupId>org.aspectj</groupId> <artifactId>aspectjweaver</artifactId>...
2020-01-09 16:44:33
150
原创 短信验证码新版demo实用版本java
需要引入阿里云的maven<dependency> <groupId>com.aliyun</groupId> <artifactId>aliyun-java-sdk-core</artifactId> <version>4.0.3</versio...
2019-11-28 17:15:12
174
原创 远程文件服务器多资源压缩下载多url资源压缩下载
@ApiOperation("导出资料多个zip下载") @RequestMapping(value = "/infoexportfiles", method = {RequestMethod.GET, RequestMethod.POST}) public void infoexportfiles(HttpServletResponse res,@ApiParam(value =...
2019-11-28 15:50:02
231
原创 当前服务器多文件压缩下载实现
当前服务器多文件压缩下载实现 @ApiOperation("导出资料多个") @RequestMapping(value = "/infoexportfiles", method = {RequestMethod.GET, RequestMethod.POST}) public void infoexportfiles(HttpServletResponse res,@ApiPa...
2019-11-28 15:26:29
317
2
原创 获取微信access_token 通过线程休眠定时获取微信access_token保证可用性及效率
微信服务号的access_token获取及使用方法access_token有2个小时的时效性，要有一个机制保证最长2个小时重新获取一次 因为接口调用上限每天2000次，所以不能调用太频繁基于以上2点这里要处理的就是：系统启动时，初始化一个线程进行token的获取，在token过期之前就行再次获取。保证可用性。首先：appid和appsercret要在测试号或者公众号中获取到...
2018-07-09 17:53:59
802
原创 微信处理用户授权 openid的持久化 openid存储注意事项 openid缓存等
微信每次的访问 请求 首先经过授权 拿到code换取openid 将openid存入cookie 这以后的所有访问url 全部都从cookie中获取openid 如果没有在获取code换取可以解决的问题：1，如何存储获取用户信息及调用第三方接口所需要的token. 2， 第三方页面授权,如何减少从微信服务器获取用户openid的次数以及减少获取用户信息的次数，加速第三方页面的加载速速...
2018-07-06 17:39:55
12258
1
原创 java、 http模拟post上传文件到服务端 模拟form上传文件
需求是这样的： **1，前后端分离，前端对接pc软件进行文件同步的接口，后的springboot微服务进行文件接收和处理。 2，软件不能直接调用微服务的接口进行上传，只能先走一下前端controller进行转发过来（）。 3，这样就只能用httpclient进行http的转发请求，先把文件上传来放到本地临时处理下，在转到微服务端进行处理。 4，post方式传输，单纯的字符参数好处理，单纯的...
2018-03-08 10:46:52
10566
7
原创 百度Echart地图简单使用Echart-map多图
官网demo地址：http://echarts.baidu.com/echarts2/doc/example.html 地图demo地址：http://echarts.baidu.com/echarts2/doc/example/map1.html 这里用到的是echart2页面代码：普通的jsp或html就可以div > div i
2018-01-16 17:48:36
12181
1
原创 用Nginx配置二级域名多个微信服务应用等
用Nginx配置二级域名多个微信服务应用等可以解决的问题：一台服务器可以起多个tomcat通过不同的端口，共同监听80端口映射到不通的域名上。微信服务器多个应用，需要多个域名的，可以通过nginx进行转发，对不通的服务器进行微信授权。nginx，tomcat，java，微信，微信域名问题，多个服务器进行转发，
2017-12-25 10:53:44
3262
2
原创 echart折线图 柱形图 数据格式化 动态绑定数据 frame处理
echart 折线图 柱状图 echart数据格式化 echart动态绑定数据 frame框架使用 异步刷新
2016-03-05 10:39:32
4909
原创 echart 饼图处理 数据格式化 option动态赋值 点击事件处理
echart 饼图数据格式化 echart 饼图点击事件ecahrt 饼图动态绑定数据
2016-03-05 10:09:35
18607
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人