- 博客(4)
- 收藏
- 关注
RSS订阅
原创 Oracle数据库批量插入CSV数据
Oracle数据库批量插入CSV数据最近遇到一个比较蛋疼的事，需要把70G的csv数据导入到Oracle数据库中。一开始觉得没啥，可是当开始导入的时候我发现一个问题，好TM慢…最后问了好多朋友，找了个批量导入的方法下面是我的数据格式：第一列是时间格式的数据，Oracle数据库插入数据对时间格式的数据要求和其他数据库不同，需要进行格式转换，所以插入语句的建立要写对，具体可以自己去了解一下...
2019-09-16 10:59:13
1041
原创 Oracle数据库扩展表空间及信息查询
Oracle数据库扩展表空间及信息查询很高兴与大家分享！！！一、表空间信息查看1、--查看名称及大小select t.tablespace_name,round(sum(bytes/(1024*1024)),0)ts_size from dba_tablespaces t, dba_data_files d where t.tablespace_name=d.tablespac...
2019-09-04 11:02:24
246
原创 Python3爬取网页数据，导入数据库并去重 设置间隔时间爬取。
-- coding: utf-8 --#用来操作数据库的类import pymysqlclass MySQLCommand(object):def __init__(self): self.host = 'localhost' self.port = 3306 # 端口号 self.user = 'root' # 用户名 self.password =...
2019-01-17 10:24:10
1440
原创 Scrapy框架解析
Scrapy框架解析1、引擎（Scrapy Engine）引擎负责控制数据流在系统中所有组件中流动，并在相应动作发生时触发事件。 详细内容查看下面的数据流(Data Flow)部分。2、调度器(Scheduler)调度器从引擎接受request并将它们入队，以便之后引擎请求它们时提供给引擎3、下载器（Downloader）下载器负责获取页面数据兵器同给引擎，而后提供给spider4...
2019-09-09 15:14:34
171
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人