- 博客(50)
- 资源 (3)
- 收藏
- 关注
RSS订阅
原创 mysql 常用总结[增删改查]
建库create database;建表create table tablename(字段 类型...)CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;# 实例create table if not exists first_url_Season(type varchar(15) not null,first_url varch...
2019-03-19 11:56:40
317
原创 python3 [XPATH]常用笔记
import requestsfrom lxml import etreereq=requsets.get(url)req.encoding='utf-8'html=req.text# html 是获取到网页文档html_x=etree.HTML(html)res=html_x.xpath(xpath解析式")# 具体 res 的数据类型 踩坑...
2019-01-16 10:49:01
717
转载 【转】设置清华源 的pip源为默认源
pypi | 镜像站 清华源链接pypi 镜像使用帮助pypi 镜像每 5 分钟同步一次。临时使用pip install -i https://pypi.tuna.tsinghua.edu.cn/simple some-package注意，simple不能少, 是https而不是http设为默认升级 pip 到最新的版本 (>=10.0.0) 后进行配置：pip install pip -Upip config set global.index-url ...
2021-01-21 00:20:52
736
原创 python3 实现定时任务模块apscheduler
定时任务说明from apscheduler.schedulers.blocking import BlockingScheduler# 定时任务 cron@gl_error_register # 装饰器，用于捕捉程序异常的操作def time_job(func): ''' 定时执行 func 函数 :param func:函数名 :return: ''' scheduler = BlockingScheduler() schedule
2021-01-12 09:55:37
343
原创 layui 笔记
layui form select 取值异常如果设置中的option选项的ID值出现一致的情况，则会导致取值混乱HTML:基础知识，ID唯一// 根据ID值进行 selected 的option 的文本值$("#QC-data-device-id option:selected").text()layui table 的even事件 table.render({ ... elem:'#table_id' , even:true ..
2020-09-28 20:17:15
201
原创 layui table 实现layer.tips在指定单元格
// table中的指定列，监听...,{field:'RAM', title: '内存', sort: true,edit:'text',event: 'RAM_alert'}...// table监听事件 tableclone_commit_before是table的lay-filter属性值table.on('tool(tableclone_commit_before)', function(obj){ var data = obj.data; if
2020-07-25 15:32:10
1482
原创 myqlclient在window10的安装方法，很简单
一开始我也查了网上满天飞的解决办法，python3的django2.2版本之后就不支持旧驱动了报错提示，mysql的驱动太旧了，所以需要更新mysqlclient什么提示cl.exe的报错啊，mysql.h的报错的，查解决办法都没用，浪费了我几天时间不要到处查浪费时间了，直接右键cmd，以管理者身份运行pip install mysqlclient即安装成功...
2020-04-26 15:20:19
1382
原创 nginx+uwsgi部署django[1.11.8] 到 ubuntu记录
ubuntu18使用 nginx+uwsgi部署django项目,已部署成功！请注意对应的版本号系统ubuntunginxuwsgidjango 1.11.8
2019-12-23 21:01:53
232
原创 python3 requests.post接口抓取实例
主要涉及到知识点requests.post的应用lxml的etree模块的xpath应用post抓取实例
2019-11-26 15:05:34
725
原创 基于[pypyeteer] 的脚本开发记录
pyppeteer新利器？没有官方的中文文档，网上很多分享文档有点硬生生翻译别人的英文文档，看起来相当别扭，那么我们就自己踩坑理解吧,加油!笔记基于lazada后台登录发送消息脚本的笔记，各路大神，如有错误，多多指教!
2019-11-09 11:49:44
327
4
原创 django-项目开发笔记. 开发版本号1.11.8[pip3 install django==1.11.8] +layer使用
登录验证问题1.1 使用django自带的登录验证功能我这里对比的是是django库中的，auth_user的表；post发送过来的账号密码对比;#导入验证的模块from django.contrib.auth import authenticate,logout,logindef login(request): username=request.POST['username']...
2019-10-18 18:13:06
581
原创 淘宝,速卖通,天猫同理,商品视频下载过程分享,2019/10/21更新
正常来说，小网站的图片和视频非常容易下载，匹配到视频展示的那个节点找到视频链接就可以开始进行下 载了。可是对于淘宝之类的大一点的手段，增加难度，在video节点那里并非是直接调用音频视频链接啥的，打开video上面。回归正题，打开淘宝的商品详情页F12打开，再播放视频，会看到以下情况这个taobaolive,在不断地加载，应该是和视频有关。至于这种技术，希望有天能了解接触。每个...
2019-09-27 16:03:18
2071
原创 电脑运行VirtuaBox虚拟机总是提示0x00000000错误的解决方法
最近有用户发现在电脑中运行VirtualBox虚拟机，总是提示0x00000000错误“0x00000000指令引用的0x00000000内存该内存不能为written，”，这是由于系统主题被破解，而VirtualBox会调用uxtheme.dll，才出现以上问题。对此不妨使用以下方法来解决。推荐下载 专业版的系统，virtuabox支持专业版的系统若是Win7 64位系统，则运行Unive...
2019-08-23 18:01:40
885
1
原创 Python3.x selenium 笔记
网上很多的滚动条办法,可能是系统间的差异,或者浏览器的差役,导致结果可能不尽人意我的经常使用的环境是,ubuntu + chrome + chromedirver + selenium + python3.5.2以下笔记,是给基于上环境的滚动到指定位置 tagelement = driver..find_elements_by_xpath("//div[@class='_3-kx...
2019-07-29 10:04:07
133
原创 Ubuntu18安装scrapy,出现command 'gcc' failed with exit status 1 解决方案
安装scrapy,获取其他出现这个问题解决方案如下:1. 参考自己的python 的版本当遇到这个错误，请在错误之前注意它可能说你是缺少一个包或头文件，你会发现那些并安装它们，并验证其是否工作正常。（例如ssl - > libssl）#对于Python 2.x使用：sudo apt-get install python-dev#对于Python 2.7使用：sudo apt-...
2019-07-09 14:34:39
586
原创 python3使用pyppeteer绕过navigator.webdriver的脚本特征值检测
如今,网上说的检测脚本特征值的办法是# F12 console 输入navigator.webdriver# 脚本被识别则返回>> true # 正常浏览器会返回>> undefined# 或者>>False以上是目前网上比较流行的脚本检测一种说法,如果有其他pyppeteer 是什么?pyppeteer是基于node.js操作chro...
2019-07-09 11:09:45
1309
原创 selenium 被服务器检测,解决办法
方法1:加参数# 直接selenium启动，在浏览器 F12界面 console，输入 window.navigator.webdriver, 返回true# 手动打开浏览器，在浏览器 F12界面 console，输入 window.navigator.webdriver, 返回 undefined# 以上检测方法的参考性，待参考from selenium import webdriv...
2019-07-01 18:10:26
8474
5
原创 [杂] python3.x 那些新奇好玩的模块,待续
将中文转成拼音pip3 install xpinyinfrom xpinyin import Pinyinp = Pinyin()p.get_pinyin("中文字符串")python3 操作excel表
2019-06-22 15:40:47
527
原创 win7 安装mysql server记录 || ubuntu 安装 mysql 密码设置情况
下载下载,并且推荐5.7版本,官网解压,添加环境变量解压文件，添加环境变量,文件夹中bin的环境变量cmd启动,cd 到 bin文件夹下输入 mysqld --install 回车输入 mysqld --initialize --user=root --console 回车注意5的返回结果，记住最后面的 root@localhost后的文字为初始化后的root 密码输入 n...
2019-06-12 15:51:07
159
原创 [UBUNTU] 18.lts 使用命令行修改setting 中的 network ＆查看
# 设置参数$ sudo gsettings set org.gnome.system.proxy.http host 'my.proxy.com' #代理设置$ sudo gsettings set org.gnome.system.proxy.http port 8000 #端口设置# manual参数为自动了;none参数则为关闭$ sudo gsettings set org.gn...
2019-05-31 09:43:41
821
原创 centos7安装 python3以及pip3
yum install epel-releaseyum install python34yum install python34-setuptoolseasy_install-3.4 pipyum install -y unzip zip如何使用# 启动test.py文件python3.4 testpy
2019-05-30 15:31:28
93
原创 python3 selenium 禁止浏览器【通知】弹窗
selenium 操作 浏览器时，有可能会出现 【通知弹窗】，selenium 无法操作，从而阻塞解决办法如下:from selenium import webdriverfrom selenium.webdriver.chrome.options import Optionschrome_options = Options()# 禁止弹窗prefs = { 'p...
2019-05-21 18:30:39
7022
1
原创 python3 安装一些无法直接安装的第三方库 笔记[ubuntu]
virtkey 模拟键盘操作 方法1: 更新包索引： # sudo apt-get update 安装python3-virtkey deb包： # sudo apt-get install python3-virtkey 方法2: https://ubuntu.pkgs.org/18.04/ubuntu-universe-i386/python3-virtkey_0.63.0...
2019-05-20 11:34:58
1882
转载 python3 查看本地库第三方库的文档
Linux下终端输入python3 -m pydoc -p 0# 会返回Server ready at http://localhost:45659/Server commands: [b]rowser, [q]uitserver> # 此时 在浏览器输入网址http://localhost:45659/# 即可访问查看# 在浏览器界面 ctrl + F 输入关键...
2019-05-20 09:26:03
1355
原创 python3 字符串与列表的转换
由于字符类型的关系，有时候无法直接保存列表类型的数据，于是经过预处理再保存a_list=[1,2,3,4] # type --> lista_str-str(a_list)那么问题取用数据的实数，如何将此字符数据转回我们需要的列表# 错误!不要直接list(a_list),不会返回我们预想中的结果要先经过 eval() 处理b_list= list(eval(a_list)) ...
2019-05-14 09:13:13
1783
原创 python3 写csv文件，xlsx导图片到表格
import csvwith open("XXX.csv","a",newline="",encoding='utf-8') as datacsv: # a 是后续可以加入内容，w 参数则是覆盖 #dialect为打开csv文件的方式，默认是excel，delimiter="\t"参数指写入的时候的分隔符 csvwriter = csv.writer(datacsv,dial...
2019-05-09 16:14:17
1680
原创 [cookies]pc多开独立的chrome[谷歌浏览器]
多开独立浏览器的方法复制快捷方式,生成多个快捷方式文件新建多个文件夹，用于存放独立浏览器的缓存之类的文件右键打开快捷方式的属性在图中蓝色标注那列， 新增命令 # 注意=等号后面跟的是新建文件存放缓存的路径[E:\chrome_1]，回归到第三点 # 注意路径不需要加双引号 --user-data-dir=E:\chrome_1多个快捷方式，重复操作即可...
2019-05-04 16:26:31
4526
原创 html [笔记]
1.解决两个 div 元素 同行 <div style='float:left'></div> <div style='float:left'></div> # 都加上float即可，增加左间距30px <div style='float:left'></div> <div style='float:left;...
2019-04-27 14:40:42
89
转载 python3 脚本发邮件笔记[亲测]
# 安装相关的模块# 设置好 # 发送地址(from_addr) # 接收地址(t0_addr)/ # 信息内容(msg_text) # 邮件标题(title)def my_send_email(msg_text,title): from email.mime.text import MIMEText msg = MIMEText(msg_text,'plain', ...
2019-04-23 11:44:45
504
原创 PYQT5 TKINTER笔记
pyqt5 打包后的问题总结1.1 No module pyqt5.sip 解决办法：在打包的代码中导入该包,import PyQt5.sip1.2 打包后，图片无法引入 解决办法: 将图片放到打包好的exe文件的相对路径下，参考源代码的图片引用路径1.3 阻塞问题 目前我的解决办法:中间利用 tkinter 模块进行 阻塞,例如点击后再继续进行，待完善tkinter...
2019-04-19 16:45:05
858
原创 python3.x 常用下载器总结
from selenium.webdriver.chrome.options import Optionsfrom selenium.webdriver.common.desired_capabilities import DesiredCapabilitiesfrom selenium.webdriver.support import expected_conditions as ECfr...
2019-04-09 15:22:17
303
原创 js 笔记
#根据jq修改属性：$(".btn").setAttribute("class",'btn_test')# 修改文本$(".btn").innerTEXT='修改的文本'# 在$(".test").each(function(){ var this_1=this $.get('url',data,function(data){ var this_2=this },'json...
2019-04-01 16:20:12
104
原创 amazon listing分析
# 以下 链接是 在all下 搜索词为:citizen watches for men的搜索结果链接# 第一页https://www.amazon.com/s?k=citizen+watches+for+men&ref=nb_sb_noss# 第二页https://www.amazon.com/s?k=citizen+watches+for+men&page=2&q...
2019-03-26 17:55:03
545
转载 python3 get the detail error
import tracebackimport systry: raise ValueError('this is a exp')except Exception as ex: ex_type, ex_val, ex_stack = sys.exc_info() print(ex_type) print(ex_val) for stack in tr...
2019-03-19 14:31:24
180
原创 python3 selenium 超时停止加载,并且捕捉异常, 进行下一步【亲测有效】
# 两个同时设置才行# 实现效果:加载状态停止，进行代码下一步操作driver.set_page_load_timeout(10)driver.set_script_timeout(10) # 这两种设置都进行才有效try: driver.get("https://shopee.co.id/search?keyword=jam%20tangan&page=" + str(...
2019-03-19 11:07:27
6387
4
原创 python3 selenium 加载特定元素 停止加载 执行[亲测有效]
from selenium.webdriver.common.desired_capabilities import DesiredCapabilitiesfrom selenium.webdriver.support import expected_conditions as ECfrom selenium.webdriver.support.ui import WebDriverWait ...
2019-03-06 16:28:31
4479
原创 windows python3 使用多进程 IDE/Pycharm无法运行多进程
如题:在windows环境下的IDE/Pycharm，无法运行多进程的问题解决:在CMD下运行既可.原因:待解决cookies:两个方法一起进行的办法:def test(): pritn("1")def test2(): print("2")if __name__ == '__main__': # 要添加这个判断条件.否则会报错 p = Process(targe...
2019-02-20 18:14:56
4852
10
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人