慕之城-CSDN博客

原创 Elasticsearch7.6 之地址解析案例

Elasticsearch7.6 之地址解析案例一、背景问题分析：方案：二、区划数据获取三、数据准备和写入3.1 创建索引库3.2 数据写入3.2.1 数据库连接脚本3.2.2 ES连接3.2.3 ORM映射3.2.4 导入数据四，这还没完4.1 ik分词库扩展4.2 接口算法优化5 遗留一、背景公司内部网络，内部物流系统提出需求，通过用户任意输入的地址，自动解析出"省份"-“地市”-“区县”，以及对应的区划代码。问题分析： 1. 用户输入地址信息并不标准，无法直接通过数据库

2021-04-17 13:33:34 625

原创 Python 爬虫中国行政区划信息爬取（初学者）

Python 爬虫—行政区划获取（初学者）背景环境准备代码片段1、定义地址信息对象2、地址解析对象2.1 获取web信息2.2 web信息解析2.3 区划信息提取2.4 省份数据封装2.5 线程封装2.6 万能的MAIN跑起来完整代码背景业务部门需要更新最新的全国区划信息数据，建立基础数据库，权威数据当然是国家统计局的官方数据， http://www.stats.gov.cn/tjsj/tjbz/tjyqhdmhcxhfdm/2020/这里要做的，就是将其爬取下来。环境准备我们使用py

2021-04-10 10:50:29 3989 7

原创 GenericJackson2JsonRedisSerializer序列化遇到的坑

GenericJackson2JsonRedisSerializer序列化遇到的坑问题现象Redis序列化设置jackson反序列化时Error提示改用fastJson作为序列化工具结论问题现象工程使用redis作为缓存，起初使用GenericJackson2JsonRedisSerializer作为序列化反序列化工具。一般正常的对象（set,get齐全），序列化以及解序列化都没有问题。但是一...

2019-09-12 11:54:34 12279 2