- 博客(269)
- 资源 (1)
- 收藏
- 关注
RSS订阅
原创 情人节，教你用Python定时给小姐姐微信发送专属问候！
大家好，我是早起。今天是大年初二，本来是可以好好在家休息，但是考虑到明天就是情人节了，加上最近后台求往期情人节/520/七夕表白文章的代码人数又多了起来，我就再给大家分享一招????每天早上用Python给TA的微信发送问候大致效果如下，只要程序写好了每天早上就会自动给小姐姐发送一条问候消息。 思路分析看上去有点复杂，又要爬天气又要爬路况，但只要将思路分析清楚就能轻松搞定，本项目大致分为三块“ 爬取相关信息（日期、时间、路况） 构建内容并推送消息至微信 每天定
2021-02-13 10:25:32
2592
1
原创 Matplotlib官方神图，被我画出来了！
大家好，在之前的文章人人都能看懂的Matplotlib绘图原理中，我们对Matplotlib的绘图机制进行了讲解，在弄清楚plt.xxxx和ax.xxxx中plt和ax区别之后，本文继续讲解xxxx究竟是什么。现在我们应该知道Matplotlib绘图其实很简单，不就是弄一块画布，然后往这块画布上添加我们要的图形，最后就是进行修饰。如何添加画布/绘图区域已经讲过，如何添加图形，看我发的各种可视化图鉴就行了，而最需要花时间的就是对初步成型的图案进行修饰，先来看一张来自官方文档的图 我们可以看到，其实
2021-01-18 09:27:44
650
1
原创 天秀！一张图就能彻底搞定Pandas！
大家好，在三月初，我曾给大家分享过一份Matplotlib绘图小抄，详见收下这份来自GitHub的神器，一图搞定Matplotlib！昨天在面向GitHub编程时，无意发现了Pandas官方竟提供了同款小抄，项目地址如下https://github.com/pandas-dev/pandas/blob/master/doc/cheatsheet/Pandas_Cheat_Sheet.pdf可以看到这份小抄提供了PPT和PDF两个版本，虽然最新一条更新记录为两年前，但是并不影响我们拿来学习，下
2020-12-07 10:06:11
650
2
原创 【Python数据可视化】用Pandas做出精美图表
如果你经常使用Python进行数据分析，那么对于Pandas一定不会陌生，但是Pandas除了在数据处理上大放异彩，随着版本的不断更新，Pandas的绘图功能在某些情况下甚至要比Matplotlib更加适用，本文就将介绍如何用Pandas更快的进行数据可视化！基本使用，学会制作套路首先我们使用pandas随机生成示例数据import pandas as pddf= pd.DataFrame(np.random.rand(8, 4), columns=['A','B','C','D'])现在只要
2020-11-22 10:27:44
2114
5
原创 爬虫遇到头疼的验证码？Python实战讲解弹窗处理和验证码识别
前言在我们写爬虫的过程中，目标网站常见的干扰手段就是设置验证码等，本就将基于Selenium实战讲解如何处理弹窗和验证码，爬取的目标网站为某仪器预约平台可以看到登录所需的验证码构成比较简单，是彩色的标准数字配合简单的背景干扰****因此这里的验证码识别不需要借助人工智能的手段，可直接利用二值法对图片处理后交给谷歌的识别引擎tesseract-OCR即可获得图中的数字。注：selenium 和 tesseract 的配置读者可自行搜索，本文不做介绍)Python实战首先导入所需模块import
2020-07-28 09:54:07
1530
5
原创 可视化工具不知道怎么选？深度评测5大Python数据可视化工具
相信很多读者学习Python就是希望作出各种酷炫的可视化图表，当然你一定会听说过Matplotlib、Pyecharts、Seaborn、Plotly、Bokeh这五大工具，本文就将通过真实绘图来深度评测这五个Python数据可视化的库，看看到底这几种工具各有什么优缺点，在制作图表时该如何选择。指标说明为了更清晰的了解这几款用于可视化的Python在作图时的异同，本文将使用同一组数据分别制作多系列条形图来对比，主要将通过以下几个指标来进行评测：数据说明本文使用的数据为Pyecharts中的fak
2020-07-14 10:45:42
1083
1
原创 我用Python展示Excel中常用的20个操作
前言Excel与Python都是数据分析中常用的工具，本文将使用动态图(Excel)+代码(Python)的方式来演示这两种工具是如何实现数据的读取、生成、计算、修改、统计、抽样、查找、可视化、存储等数据处理中的常用操作！数据读取说明：读取本地Excel数据ExcelExcel读取本地数据需要打开目标文件夹选中该文件并打开PandasPandas支持读取本地Excel、txt文件，也支持从网页直接读取表格数据，只用一行代码即可，例如读取上述本地Excel数据可以使用pd.
2020-06-28 13:04:14
17842
21
原创 想做疫情分析却没有数据？看这篇就够了
大家好，之前我们已经将疫情可视化的各种操作基本都讲了一遍，从爬取数据到数据分析、建模、可视化甚至有关如何开发疫情实时追踪网站我们都讲了一遍，因此很久没有更新过疫情相关的文章。但最近几乎每天都有小伙伴在后台问我如何获取最新的疫情数据，尤其是历史数据很难找到。在三月份我曾经在疫情数据哪里找，看这篇就够了这篇文章中详细介绍了5种获取疫情数据的方法，不过部分API已经失效，了解到很多读者是为了科研、论文需要使用相关数据，所以今天我们再来聊聊现在如何取得疫情相关数据。全球疫情历史数据难倒大家的大多数是在.
2020-05-22 11:39:57
2756
1
原创 再见 Notebook？数据科学家专属 IDE？DataSpell初体验！
不论是代码检查、异常调试、版本控制、项目管理、远程开发等标准化开发功能，都是一个程序员需要具备的技能，而在这之前我见到的一些数据分析、机器学习相关人员，大多只是会数据、算法本身的工作，对于工具却比较薄弱。另外，由于功能复杂，真正能用于写代码的区域很小（虽然可以折叠），如果你是笔记本电脑，那么可能一个页面只能容纳下2-3个单元格，用起来比较鸡肋。这种让你少写几行代码的快捷操作，在代码开发阶段还是比较舒服的，毕竟有时候一些简单的操作需要写很长的代码。文件，若要是项目关联的文件比较多，可能急需要打开一排窗口。
2022-10-05 11:46:47
5527
6
原创 一劳永逸的markdown主题～
大家好，我是早起。作为程序员，你一定对 markdown 不陌生，对于我来说，从技术文档到知乎、CSDN、公众号等文章，都会选择用markdown写，因为他可以让我专注于写作。但用 markdown 写公众号体验很丝滑是真，排版起来痛苦也不假，因为公众号后台不支持原生markdown 渲染，你必须要通过一个第三方的平台来进行排版。目前方案之前我写公众号的流程都是使用typora或者其他markdown编辑器写文章，然后将文章复制到第三方平台例如md2all或者mdnice等网站选择合适的主题进行排版
2022-04-08 13:18:27
4057
原创 一个小破网站，比Pandas官网还好用？
大家好，我是早起。在去年九月，我将Pandas120题升级到Pandas300题，意外的收获了很多好评，到目前总下载量有数千次。伴随着刷题人数越来越多，很多粉丝问我能否提供一份查询版，让答案附在习题下面，就像这样????但整理出来之后发现使用反馈并不是很好，偶尔想查询一些小的操作都需要先启动Jupyter Notebook，再点开多层文件夹才能找到，十分繁琐。此外，相信大家在搜索部分pandas操作时，并不难找到相关的帖子或者教程，但是在阅读这些文章时会有一个体验即看上去很过瘾，自己一.
2022-01-08 14:29:54
6544
2
原创 Python + Steamlit 快速开发可视化 web 页面！
用Python做web图形用户界面，最先想到的是Flask、Djong等框架。然而研究这些对于初学者来讲，尤其是没有web开发基础的数据分析人员是痛苦的。幸运的是，Python中也有很多第三方库来快速进行简单的web可视化，例如之前介绍的 PyWebIO今天再介绍一个 Steamlit，可以快速利用简单的代码快速布局自己想要的web界面！一、安装与运行安装之前，我们需要将 Python 的版本升级到3.7或以上，同时设置好环境变量，这里默认读者都已经设置好不细讲。在 Windows.
2021-10-25 11:19:47
5606
原创 人人都能学会的 Python 多线程指南
大家好，我是早起。在 Python 中，多线程最常见的一个场景就是爬虫，例如这样一个需求，有多个结构一样的页面需要爬取，例如下方的URL（豆瓣阿凡达影评，以10个为例）url_list=['https://movie.douban.com/subject/1652587/reviews?sort=time&start=0','https://movie.douban.com/subject/1652587/reviews?sort=time&st...
2021-09-09 19:49:44
347
原创 人人都能看懂的「迭代器、生成器」入门指南！
大家好。这是「人人都能看懂的 Python 进阶」系列。今天我们将讨论能在很多教程中看到，但又常常搞的头晕转向的迭代器、生成器，以及让新手经常困惑的yield。事实上，和装饰器一样，这三个概念也是绑在一起的，例如你想知道 「什么是yield」，那在这之前你必须了解什么是生成器。不过在了解生成器之前，又必须了解什么是迭代器，但在搞明白迭代器之前，你总要知道什么是可迭代对象吧。下面就让我们按照这个思路，来一点一点前进吧。一、迭代器1. 迭代在介绍一切之前，先说一下最简单的迭代&
2021-08-30 09:31:45
248
1
原创 写了篇爬虫文章，收到份律师函？
大家好，我是早起。从写公众号开始，不论是私信还是交流群，常常都会有粉丝会问出类似下面的问题 xx网站能不能爬？ 爬xx数据有没有风险？ 其实我并不是爬虫从业人员，充其量算爬虫爱好者，去年也转载过一篇相对理性的文章????请不要污名化爬虫！，年初还因为在公众号分享某网站的反爬破解收到了律师函，算是在作死的边缘徘徊了一波 今天就简单聊一下爬虫那些事儿。当我们谈论爬虫在这里，其实我想吐槽一下，对于大多数非爬虫从业者或者说大部分 Python 爱好者来说，我们写的“爬虫”和大家谈
2021-08-03 10:01:52
482
1
原创 知己知彼，案例对比 Requests、Selenium、Scrapy 爬虫库！
大家好，我是早起。经常有读者会爬虫学哪个库？其实常用的 Python 爬虫库无非是requests，selenium和scrapy，其实每个库都有他们的特点，对于我来说没有最推荐的库只有最合适库，本文就将基于一个简单的爬虫案例（Python爬取起点中文网）来对比分析三个库 目标需求为批量采集排行榜书籍信息，如下图所示： 页面结构很容易分析出来，排行榜100条书籍信息，一个静态页面包含20条数据。使用不同的第三方库进行数据解析并提取数据，分别是： requests selenium
2021-07-27 10:34:09
660
2
原创 神器Jinja2，用 Python 快速生成分析报告！
大家好，我是早起。在之前的文章中，我们使用 Python 开发了一个简单的基金购买策略的回测系统。在代码执行完毕后，会生成一系列的结果，包含大量图片、表格如下 此时如果一个一个查看的话便十分低效，如果能使用一个文件把全部输出结果都保存将会大大提高体验。首先想到的当然是 PDF 格式，利用 Python 操作 PDF 也是之前文章分享过很多，想必利用表格+图片生成一个新的PDF并不困难。研究了一番后，发现确实不难，但是太繁琐了，并且 PDF 涉及格式、分页等，如果没有调整好可能会将一张图片放在两页
2021-06-26 17:29:04
421
原创 实用脚本！Python 提取 PDF 指定内容生成新文件！
相关导读????01｜Python批量合并PDF????02｜PDF合并、拆分、水印、加密????03｜Python提取PDF表格????04｜Python提取PDF指定内容大家好，我是早...
2021-06-06 10:29:26
1028
2
原创 解放双手｜Python 自动搜索、翻译、存储文献标题摘要！
一、需求描述大家好，我是早起。在之前的文章 批量翻译文档 中，我们介绍了如何调用百度翻译API完成实际的文档翻译需求。如果是科研、深度学习等需要经常阅读大量论文的工作，批量翻译就能大大提高...
2021-06-02 10:24:00
432
原创 解放双手｜利用 PyAutoGUI 快速构建自动化操作脚本
一、背景我们经常遇到需要进行大量重复操作的时候，比如网页上填表，对 web 版本 OA 进行操作，自动化测试或者给新系统首次添加数据等。这些操作的特点往往是：数据同构，大多是已经有了的结构...
2021-05-23 10:45:31
943
原创 实用脚本！利用 Python 对 PDF 进行加密、解密操作，代码拿走就用！
相关导读????01｜Python批量合并PDF????02｜PDF合并、拆分、水印、加密????03｜Python提取PDF表格????04｜Python提取PDF指定内容大家好，我是早...
2021-05-15 10:31:30
470
原创 用 Python 写的文档批量翻译工具，效果竟然超越付费软件？
大家好，我是早起。本文将给大家分享一个实用的Python办公自动化脚本 「利用Python批量翻译英文Word文档并保留格式」，最终效果甚至比部分收费的软件还要好！先来看看具体的工作内容。...
2021-05-14 10:24:00
371
2
原创 在命令行使用Jupyter notebook？可以但完全没有必要！
大家好，我是早起。最近一个叫nbterm的项目在国外的一些技术论坛火了，号称可以在命令行中使用Notebook早在4月底我也收到了相关的推送邮件对Jupyter相关内容感兴趣的我肯定是毫不...
2021-05-08 17:49:13
938
原创 原理+代码｜Python实现 kmeans 聚类分析
本文是萝卜的Python数据挖掘实战的第7篇1 - 基于不平衡数据的反欺诈模型实战2 - Apriori算法实现智能推荐3- 随机森林预测宽带客户离网4 - 多元线性回归模型实战5 -...
2021-04-23 10:24:00
2626
5
原创 中科院一博士论文致谢走红，同年的我也有一封未发表的致谢......
大家好，我是早起。近日，中国科学院自动化所一博士论文的致谢部分在网上引发热议。作者黄国平回顾自己如何一路走出小山坳、和命运抗争的故事，打动了大批网友，并在致谢中说「把书念下去，然后走出去，...
2021-04-22 10:24:00
460
1
原创 实用小脚本，教你 Python 自动化备份邮箱
大家好，我是早起。在之前的文章中我们已经了解如何对自己的邮箱做一些代码操作前的基础配置，以及通过 Python 代码收发、读取邮件。本文将进一步讲解如何利用Python备份邮件，主要将涉及...
2021-04-18 10:24:00
483
原创 阿凡达时隔十年重映，王者归来还是炒冷饭？Python爬取上千条评论并分析
大家好，我是早起。上个月电影《阿凡达》重新登陆中国院线，重映第二天，票房即破5090万人民币，全球票房突破27.98亿美元，重登全球影史票房冠军，一场十多年前的电影再次引发观影热潮。阿凡达...
2021-04-07 18:00:00
543
原创 总结了10个matplotlib绘图技巧，短小精悍，威力无穷！
大家好，我是早起。在使用 Python 进行数据可视化时，相信不论是什么工具，你都会发现有些操作/代码段会频繁的用到，这一点在matplotlib上尤为突出，本文就向大家分享十个我常用的一些小技巧，大多一行代码，短小精悍，威力无穷。一、快速且正确的显示中文在matplotlib中，默认是没法显示中文的，原因很简单，默认使用的字体文件中不含中文。当你搜索如何设置中文时，会有很多教程，我曾经也详细的介绍过3种方法，但是在有的电脑上折腾很久也搞不定，所以当你浪费了太多时间也没法解决，或者在一台陌生
2021-03-29 15:31:21
648
原创 还不会用 Python 提取 PDF 表格？三种类型数据，轻松转换成 Excel
大家好，从PDF中提取信息是办公场景中经常需要用到的操作，也是经常又读者在后台问的一个操作。内容少的话我们可以手动复制粘贴，但如果需要批量提取就可以考虑使用Python，之前我也转载过相关...
2021-03-20 13:14:35
894
原创 写了四十篇办公自动化文章后，我整理了这十个常用操作，代码拿走就用！
大家好，我是早起。在过去的半年内，我总共发布了超过了40篇 「Python办公自动化」文章，不知道大家有没有发现，有一些模块、一些代码会频繁出现。而os、shutil、glob基本是每篇都...
2021-03-16 10:30:42
1257
原创 Python办公自动化｜批量生成请假条
大家好，我是早起。在之前的办公自动化系列文章中，曾经介绍过很多将Excel指定字段提取到Word模版中指定位置的案例????从Excel到Word批量制作合同在上述案例中，都要求有一个现成...
2021-03-05 10:24:00
670
1
原创 Python 操作 MongoDB 基础讲解
MongoDB是一种面向文档型的非关系型数据库（NoSQL），非关系数据库中是以键值对存储，结构不固定，易存储，减少时间和空间的开销。文档型数据库通常是以JSON或XML格式存储数据，而M...
2021-03-04 10:24:00
436
1
原创 Python办公自动化｜可能是全网最完整的 Python 操作 Excel库总结！
大家好，我是早起。在之前的办公自动化系列文章中，我已经对Python操作Excel的几个常用库openpyxl、xlrd/xlwt、xlwings、xlsxwriter等进行了详细的讲解。为了进一步带大家了解各个库的异同，从而在不同场景下可以灵活使用，本文将横向比较7个可以操作 Excel 文件的常用模块，在比较各模块常用操作的同时进行巩固学习！ xlrd、xlwt、xlutils 各自的功能都有局限性，但三者互为补充，覆盖了Excel文件尤其是 .xls 文件的操作。xlwt 可以生成 .x
2021-03-01 10:38:58
2905
原创 可能是全网最完整的 Python 操作 Excel库总结！
大家好，我是早起。在之前的办公自动化系列文章中，我已经对Python操作Excel的几个常用库openpyxl、xlrd/xlwt、xlwings、xlsxwriter等进行了详细的讲解。...
2021-03-01 10:24:00
2416
1
原创 精心整理了40个Python办公自动化真实案例，一口一个，高效办公！
01导读大家好，我是早起。自从去年4月发布第一篇Python办公自动化系列文章以来，目前已经马不停蹄的更新了近四十个真实办公场景案例，全网累计阅读超20W+，内容涵盖Python操作Wor...
2021-02-26 10:24:00
40598
70
原创 实战｜用Python制作邮箱自动回复机器人
相关导读????01｜Python发送邮件讲解????02｜Python读取邮件讲解????03｜Python管理邮件案例????04｜Python邮箱自动化实战大家好，又来到Python...
2021-02-23 11:00:59
9794
原创 四种Python爬虫常用的定位元素方法对比，你偏爱哪一款？
大家好，我是早起。在使用Python本爬虫采集数据时，一个很重要的操作就是如何从请求到的网页中提取数据，而正确定位想要的数据又是第一步操作，本文将对比几种 Python 爬虫中比较常用的定位网页元素的方式供大家学习 传统 BeautifulSoup 操作 基于 BeautifulSoup 的 CSS 选择器（与 PyQuery 类似） XPath 正则表达式 参考网页是当当网图书畅销总榜：http://bang.dangdang.com/books/best
2021-02-18 18:58:19
746
原创 最全整理！Python 操作 Excel 库 xlrd与xlwt 常用操作详解！
大家好，我是早起。在之前的Python办公自动化系列文章中，我们已经相信介绍了openyxl、xlsxwriter等Python操作Excel库。openpyxl操作Excel详解xlwi...
2021-02-18 10:31:50
1296
原创 超详细，手把手教你用20行Python代码制作飞花令小程序！
飞花令是古时候人们经常玩一种“行酒令”的游戏，是中国古代酒令之一，属雅令。“飞花”一词则出自唐代诗人韩翃《寒食》中 春城无处不飞花 一句。行飞花令时选用诗和词，也可用曲，但选择的句子一般不...
2021-02-12 10:24:00
489
原创 Python批量读取邮箱并下载Excel附件，再将表格写入Word中，高效办公！
大家好，我是早起。在之前的Python办公自动化专题系列文章中，我们已经讲解了如何使用Python读取、收发邮件等多个邮件管理操作，有关Python处理Excel和Word相关的理论与实战...
2021-02-10 10:24:00
1619
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人