- 博客(3)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 distribute-webmagic组件selenium详解
selenium该组件是重写webmagic中的selenium，增加了针对电商的规格的爬取、分布式爬虫、优雅退出、数据定时持久化、升级了核心类爬取数据方式us.codecraft.webmagic.selenium.core 包中升级的核心类us.codecraft.webmagic.selenium.data 包中数据持久化us.codecraft.webmagic.sel...
2018-10-26 18:28:45
351
原创 distribute-webmagic组件queue详解
queue可作为distribute-webmagic的任务队列，也可作为独立的消息去重中间件在distribute-webmagic中的架构图： 该组件通讯基于netty，缓存基于ehcache，介绍以下核心类EhCache 封装后的缓存QueueClient 客户端启动和发送数据ConnectionListener 客户端断线自动重连NettyUtils 基于...
2018-10-26 16:39:49
474
原创 ArrayList 源码思路
具体的方法实现只会过一下，主要聊聊为啥这样设计，不足处欢迎小伙伴批评指出。大家都知道ArrayList是个动态数组具体用到会实现扩容，下面我会围绕这个来简单讲一下1.继承、接口AbstractList // 对list的行为一些具体的实现，不过arraylist 基本重写了List //标准list的约定方法RandomAccess //这个纯粹就是底层算法的一种判断能力，别听网上瞎说，其实表示...
2018-07-09 10:09:50
156
空空如也
java arcgis engine 释放资源失败
2015-11-18
TA创建的收藏夹 TA关注的收藏夹
TA关注的人