Dream丶Killer-CSDN博客

原创【Python基础】2万字-详解Python基础函数，包教包会

文章目录运行环境输入输出函数print()input()获取数据类型type()isintance()字符串操作str()eval()str.lower()str.upper()str.capitalize()str.title()str.center()str.ljust()str.rjust()str.lstrip()str.rstrip()str.strip()str.count()str.find()str.rfind()str.index()运行环境python：3.8.3jupyter-n

2021-10-15 16:29:21 15411 78

原创 selenium用法详解【从入门到实战】【Python爬虫】【4万字】

文章目录selenium 简介selenium安装安装浏览器驱动确定浏览器版本下载驱动定位页面元素打开指定页面id 定位name 定位class 定位tag 定位xpath 定位css 定位link 定位partial_link 定位浏览器控制修改浏览器窗口大小浏览器前进&后退浏览器刷新浏览器窗口切换常见操作鼠标控制单击左键单击右键双击拖动鼠标悬停键盘控制设置元素等待显式等待隐式等待强制等待定位一组元素切换操作窗口切换表单切换弹窗处理上传 & 下载文件上传文件下载文件Chrome浏览器Fir

2021-10-09 14:17:33 219195 257

原创 50个pandas高频操作汇总

重点，敲黑板了首先，本文遵循，传统教学，点到为止！只介绍个人使用比较频繁的一些函数或处理方式。本文的示例只是演示所用，示例一般是不修改原数据的，如果代码会修改原数据会标明（在原数据上进行修改），自己使用时一定要注意是否修改了原数据。一旦报错，首先检查自己的代码是否改变了原数据。# 未修改原数据df.drop('name', axis = 1) # 修改原数据df.drop('name', axis = 1, inplace=True) # 修改原数据df = df.drop('na.

2021-09-19 16:46:11 6957 38

原创 Python实用工具之制作证件照（有界面、附源码、赞关藏）

removebg配置安装对应的 Python 库pip install -i https://pypi.douban.com/simple removebg获取API Key进入 Removebg 官网，完成账号注册。填写完注册信息后，会发送验证邮件到你的邮箱，点击进入后会进入如下界面。点击 Remove image background再点击红圈中的 Tool & API...

2021-09-09 16:31:44 16804 107

原创吐血总结《Mysql从入门到入魔》，图文并茂

文章目录1. 查询1.1 查询多列1.2 检索唯一值1.3 限制输出1.4 注释2. ORDER BY 排序2.1 单列排序3.2 多列排序3.3 指定排序方向4. WHERE 过滤数据4.1 WHERE 子句操作符4.2 范围值检查4.3 空值检查5. 高级数据过滤5.1 WHERE 组合过滤5.2 IN 操作符5.3 NOT 操作符6. 通配符过滤6.1 % 通配符6.2 _ 通配符7. 创建计算字段7.1 计算字段7.2 拼接字段7.3 执行算数计算8. 函数8.1 常用文本处理函数8.2 日期和时间

2021-09-04 12:03:19 28685 184

原创【计算机设计大赛近年获奖信息】数据分析及可视化

【计算机设计大赛近年获奖信息】数据分析及可视化写在前面数据读取及描述数据预处理各年数据集格式化数据合并数据清洗数据分析及可视化各年奖项数量分布各年得奖最多的学校Top10各学校参加次数统计各年参赛学校层次划分参赛人数与奖项分布获奖作品名称热词总结写在前面本文通过最近三年 “中国大学生计算机设计大赛” 的获奖数据（2021结果尚未揭晓），分析挖掘一下该比赛深层的一些内容，主要有以下几点：各年各奖项的比例分布各年得奖最多的学校 Top10哪些学校多次进入得奖最多 Top10各学校三年中参赛次

2021-08-31 13:08:21 9510 106

原创 ❤️女朋友桌面文件杂乱无章？气得我用Python给她做了一个文件整理工具❤️

事情是这样子的，昨天回去无意看了一下女朋友桌面，密密麻麻的全是文件，各式各样的占满屏幕，简直要把我这个强迫症给难受死，让她整理一下，还懒的整理。

2021-08-26 13:01:14 16278 221

原创【2020东京奥运会】数据分析及可视化

⭐️【2020东京奥运会】数据分析及可视化 ⭐️写在前面数据获取数据预处理数据可视化各地区奖牌数量分布奖牌榜前十中国夺金项目分类中国奖牌实时数量合成看板总结写在前面8月8日，小日…子过得挺好的日本选手的国家举办的东京奥运会已经结束了。在奥运期间，主办方种种奇葩操作直接把我看傻，最终它们也通过独特的“手段” 挤入了前三名，在这里首先谢谢他们刷新了我对奥运的认知。同时，借此机会看看我国今年奥运会的获奖情况，话不多说进入正文。数据获取奥运会相关数据来自以下两个接口。https://app-

2021-08-13 17:53:35 11091 160

原创 PyAutoGUI——图形用户界面自动化（超级详细）

文章目录开始之前查看屏幕大小获取当前鼠标的位置检查指定坐标是否在屏幕上设置暂停时间移动鼠标鼠标点击鼠标拖动鼠标滚动开始之前在开始之前，要先安装所需要的模块 pyautogui， pyautogui 模块可以向 Windows 发送虚拟按键和鼠标点击。pip install -i https://pypi.douban.com/simple pyautogui查看屏幕大小pyautogui.size() 可以获得屏幕的宽和高的像素数（整数）。>>> pyautogui.siz

2021-08-01 17:14:36 13702 70

原创办公利器：用Python向钉钉发送消息

钉钉作为目前最热门的办公软件，在工作中大多数时间都在与他打交道。今天和大家分享一下如何用Python向钉钉发送消息，最终达到每日自动向指定群中发送销售日报。首先打开群设置，点击智能群助手。选择添加自定义机器人然后根据提示添加一下信息，建议选择安全设置的前两项，这里加签的密钥需要保存一下，后面会用到。点击完成后就会生成一个地址，这个地址和密钥不要随便公布出来，放在外部网站上会存在安全隐患。我们此时已经获取了密钥和，先将密钥解析得到时间戳(timestamp)以及签名值(sign)，代码如下。timesta

2022-06-16 09:51:34 8185 2

原创一行Python代码，畅玩童年经典游戏~

大家好，我是丁小杰！今天在Github上看到一个有趣的Python项目free-python-games，它包含了22个简单的小游戏，所有游戏都是使用Python和它的Turtle模块实现的，Windows、Mac OS或Linux皆可运行，我们先来看看有哪些游戏！Snake贪吃蛇——经典街机游戏。Pacmax吃豆人——经典街机游戏。Cannon加农炮——抛射运动。类似愤怒的小鸡~Maze迷宫小游戏Pong碰球——经典街机游戏。满满的童年回忆，其他的游戏就等待大家自己去尝试

2022-04-07 17:27:05 9318 2

原创（成功解决）Python连接clickhouse

第一次尝试用Python连接clickhouse数据库，踩了不少坑，特此记录，帮助后人少犯错！运行环境：python 3.8.3clickhouse_driver==0.2.3clickhouse_sqlalchemy==0.2.0sqlalchemy==1.4.32clickhouse_driver连接的两种方式1.Client借鉴网上的方法from clickhouse_driver import Clientclient = Client(host=host, port=8

2022-03-22 13:19:07 17359 6

原创 Pandas玩转数据透视表，用它就够了~

大家好，我是丁小杰。对于数据透视表，相信对于 Excel 比较熟悉的小伙伴都知道如何使用它，并了解它的强大之处，而在pandas中要实现数据透视就要用到pivot_table了。导入示例数据首先导入演示的数据集。import pandas as pddf = pd.read_csv('销售目标.csv')df.head()参数说明主要参数：data：待操作的 DataFramevalues：被聚合操作的列，可选项index：行分组键，作为结果 DataFrame 的行索引c

2022-03-08 09:53:13 2570

原创 Pyinstaller+Pipenv打包Python文件，简直不要太香~

大家好，我是丁小杰相信大家都试过将Python文件进行打包，来发给其他没有安装Python环境的用户使用，但通常情况下，打包生成的exe文件都很大，而产生这种情况的原因就是，打包并不会只打包我们所使用的一些库，在我们日常使用的环境中，可能会有很多没有用的关联库被一起打包。这时，创建一个虚拟环境就是最好的选择，然后在虚拟环境中进行打包。安装pipnevpipenv 用来管理虚拟环境，先安装一下 pipenv。pip install pipenv使用 pip show pipenv 检查是否安装成功

2022-03-01 18:32:17 3840

原创 tableau每日一技：将标签显示在条形图的柱子上

大家好，我是丁小杰！相信大家在 Tableau 中制作条形图时，标签的位置位于条形图的外部，这样就会压缩条形图的长度，不太美观。今天就和大家分享一下如何将标签显示在条形图的柱子上，类似于下面两种情形。第一种情况我们打开 Tableau 自带的示例-超市工作簿，将子类别（维度）和数量（度量）两个字段分别拖入行，列中。此时，我们再将数量（度量）拖入列中，或者 Ctrl+左键拖动列栏中的数量（度量）。...

2022-02-22 11:01:10 5941

原创 Python字典：还有我不知道高阶玩法？

大家好，我是丁小杰！我经常遇到各种五花八门的关于Python字典的操作，今天就在这个文章中展示一些常见操作的优化实现方式，如果你都已经掌握，那么恭喜你，你已经超越了90%以上的Python coder。通过序列生成字典我们将下面的序列转换为dict类型。lst = [('a', 1), ('b', 2), ('c', 3)]普通的写法for k, v in lst: dic[k] = v更pythonic的写法利用字典推导式快速生成字典。{k: v for k, v in ls

2022-02-17 20:39:18 1905 3

原创爬虫福音：Github星标14K+，一个开源的IP代理池

大家好，我是丁小杰！时间过得真快，一眨眼就到了元宵节，大家记得吃元宵哦~为什么要使用代理？不知道大家在写爬虫时是否遇到过这样的情况，测试时爬虫可以正常工作，但运行一段时间，就会发现报错或是没有数据返回，网页可能会提示“IP访问频繁”。这就说明网站对IP方面是有反爬措施的（IP一定时间内的请求次数及速度）。如果超过了某个阈值，就会直接拒绝服务，也就是经常说的“封IP”。这种情况下，就到了代理IP出场了。代理实际就是代理服务器，它的工作原理其实很简单，在我们正常请求一个网站时，是直接发送请求给Web服务

2022-02-15 20:13:29 2514

原创 pathlib一个优雅的路径操作模块，碾压os

对于 Python 中的路径操作，大多数人第一反应肯定是 os，可以说 os 已经在老一辈 Python coder 心中扎深蒂固，现存的很多教程中操作路径仍然使用 os，殊不知从 python3.4 开始，pathlib 正式成为标准库，已经能够完全取代 os。无论从功能还是易用性都已经超越 os。看个经典的例子，我们分别使用 os 与 pathlib 来获取上层目录和上上层目录。os 方法import os.path# 获取上层目录os.path.dirname(os.getcwd())#

2022-01-17 13:10:30 4435

原创数据分析实战 | A/B测试探寻哪种广告点击率更高？

大家好，我是丁小杰。本篇是《数据分析实战》系列第三篇，案例来源为《数据分析实战》一书，书中使用的是 R 语言，接下来一段时间，我会用 Python + Tableau/Pyecharts 尽可能的将案例复现出来，以供大家学习。场景描述某个促销活动每个月都会开展一次，但和公司其他类似的促销活动相比，该促销活动的用户购买率比较低。通过调查用户购买率低的原因，发现问题可能出在促销广告上。于是我们准备了两个不同的广告，来验证哪种广告能够带来更高的用户购买率。A/B测试A/B 测试能够在多个选项中找出那个

2022-01-13 13:56:17 3232

原创 4K壁纸批量采集，张张精品，全程自动化

今天给大家分享一个实用的爬虫项目，批量采集4K壁纸，从此壁纸不愁，张张精品。记得点赞收藏哦，话不多说，盘它！(偷笑)先上地址：https://pic.netbian.com/该网站下载图片是需要登录的，因此 cookie 的获取是我们面临的第一个问题。获取cookie我们使用 selenium 自动获取 cookie 。先导入所需要的模块。from selenium import webdriverfrom time import sleepfrom selenium.webdriver.c

2021-12-31 15:17:50 2998 13

原创数据分析实战 | Pandas交叉列表探寻用户数下降的原因

大家好，我是丁小杰。本篇是《数据分析实战》系列第二篇，案例来源为《数据分析实战》一书，书中使用的是 R 语言，接下来一段时间，我会用 Python + Tableau 尽可能的将案例复现出来，以供大家学习。场景描述某公司经营的一款 APP 小游戏，游戏的用户数一直维持在一定的水平。然而，从 9 月开始，用户数开始大量减少。根据以往经验尝试做出如下假设。商业推广上存在问题，流失的用户数超过了新增的用户数每月不同主题的游戏活动开始变得很无聊，用户都不爱玩了按用户的性别或者年龄段等属性来划分用户群，

2021-12-28 09:56:19 1466 6

原创分享10个Python绘制圣诞树的源码，拿来即用

大家好，我是丁小杰。圣诞节就要到了，作为一个的“程序猿”，怎么能够少得了绘制圣诞树呢，今天就和大家分享 10 个圣诞树的绘制源码，拿来即用！搞笑版height = 5stars = 1for i in range(height): print((' ' * (height - i)) + ('*' * stars)) stars += 2print((' ' * height) + '|') * *** ***** ******* *******

2021-12-23 20:21:36 18983 16

原创数据分析实战 | 探寻销售额下降的原因

大家好，我是丁小杰。本文案例的来源为《数据分析实战》一书，书中使用的是 R 语言，接下来一段时间，我会用 Python + Tableau 尽可能的将案例复现出来，以供大家学习。场景描述某公司经营的一款 APP 小游戏，每月销售额稳定上涨，但是在 7 月却突然下降，无论从市场环境或是游戏本身的环境来看，这个游戏的销售额都还有继续增长的空间，影响该游戏销售额的主要影响因素可能有两点：游戏活动上新商业宣传力度更改经了解发现游戏活动与上月活动并无较大改变由于预算紧缺，宣传力度有所下降接

2021-12-20 09:45:07 4556 3

原创 Python 中让你相见恨晚的 20 个骚操作

大家好，我是丁小杰。今天和大家分享二十个 Python 编程中新手必会的“骚操作”，使用的频率超高！记得点赞，收藏哦！话不多说，进入正题！1.列表推导式使用列表推导式创建一个列表。>>> [n*10 for n in range(5)][0, 10, 20, 30, 40]2.交换变量一行代码交换两个变量的值。>>> m, n = 1, 2>>> m, n = n, m>>> m2>>> n

2021-12-17 11:27:54 5223

原创 2021中国胡润百富榜揭晓：中国首富竟是他......

2021中国胡润百富榜前几天看到一个有意思的榜单“中国胡润百富榜单”，今年是胡润研究院自1999年以来连续第23次发布“胡润百富榜”，上榜门槛连续第九年保持20亿元。今天带大家分析看看中国都有哪些大牛！数据采集数据来源：https://www.hurun.net/zh-CN/Rank/HsRankDetails?pagetype=rich打开页面如下我们需要采集前 2000 名榜单人员的基本信息，分析过程十分简单：F12 打开开发者工具。CTRL + R 刷新页面，就可以看到抓到的数据包。h

2021-12-09 14:00:55 2346 2

原创 10分钟学会用Python轻松玩转Excel

前言当你需要每天对 Excel 做大量重复的操作，如果只靠人工来做既浪费时间，又十分枯燥，好在 Python 为我们提供了许多操作 Excel 的模块，能够让我们从繁琐的工作中腾出双手。今天就和大家分享一个快速处理 Excel 的模块 openpyxl，它的功能相对与其他模块更为齐全，足够应对日常出现的问题。openpyxl 安装直接在命令提示符中输入。pip install openpyxl或使用豆瓣镜像安装。pip install -i https://pypi.douban.com/s

2021-12-06 12:47:47 3287 1

原创用Pyhton给代码安个进度条，太香了吧

前言今天和大家分享一个进度条可视化库，它的名字叫做 tqdm ，可以帮助我们监测程序运行的进度，用户只需要封装可迭代对象即可。安装通过命令行直接安装。pip install tqdm也可以使用豆瓣镜像安装。pip install -i https://pypi.douban.com/simple tqdm执行上述命令后，可以检查一下是否安装成功。pip show tqdm使用方式以下演示运行环境：jupyter notebook不同运行环境使用方式稍有不同，可根据警告自行调整。

2021-11-30 16:37:13 4071 7

原创搞懂Pandas数据合并，这一片就够了

数据合并是数据处理过程中的必经环节，pandas作为数据分析的利器，提供了四种常用的数据合并方式，让我们看看如何使用这些方法吧！1.concat()concat() 可用于两个及多个 DataFrame 间行/列方向进行内联或外联拼接操作，默认对行(沿 y 轴)取并集。使用方式pd.concat( objs: Union[Iterable[~FrameOrSeries], Mapping[Union[Hashable, NoneType], ~FrameOrSeries]], axi

2021-11-23 23:00:26 2246 1

原创快来给你的 jupyter notebook 设计一款独特的主题

前言jupyter notebook 作为 Python 中一款热门的交互式编程工具，深受广大数据计算工作者喜爱，今天我们来看看如何更换 jupyter notebook 主题，打造一款属于自己风格的 jupyter notebook。安装主题包打开命令提示符，执行下面代码。pip install jupyterthemes使用 jt -h 可以查看帮助。使用 jt -l 可以查看已安装的主题。Available Themes: chesterish grade3 gru

2021-11-17 19:52:27 4802 4

原创 Python数据分析：缺失值检测与处理

在实际的数据处理中，缺失值是普遍存在的，如何使用 Python 检测和处理缺失值，就是本文要讲的主要内容。检测缺失值我们先创建一个带有缺失值的数据框(DataFrame)。import pandas as pddf = pd.DataFrame( {'A': [None, 2, None, 4], 'B': [10, None, None, 40], 'C': [100, 200, None, 400], 'D': [None, 2000, 3000, No

2021-11-12 22:34:31 17710 1

原创 EDG夺冠，Python分析一波B站评论，总结：EDG，nb

前言2012，一个卡牌，一个雷恩加尔，一群红衣少年的欢声笑语。2013，一个杰斯，一个扎克，一场支离破碎的梦境。2014，一个螳螂，一个兰博，一座摇摇欲坠的基地。2015，一个寡妇，一个妖姬，一本永远叠不上去的梅贾窃魂卷。2016，一个盲僧，一个奥拉夫，一串耻辱的数字。2017，一个克格莫，一个青钢影，一个赛区绝境中最后的救赎。2018，一个刀妹，一个剑魔，一个至高无上的尊严。2019，一个泰坦，一个盲僧，一个浴火重生的凤凰。2020，一个船长，一个剑姬，一个杀戮无法弥补的遗憾。2021

2021-11-09 19:49:12 7140 13

原创一文搞懂Python中正则表达式

写在前面Python 的 re 模块（Regular Expression 正则表达式）提供了各种正则表达式的匹配操作，在文本解析、复杂字符串提取时起到很重要的作用，本篇详细讲解 re 模块的使用。re.match()re.match() 从字符串的起始位置按模式匹配，如果匹配不成功，或者不是在起始位置匹配成功，返回 None 。匹配成功时返回一个结果对象。re.match(pattern, string, flags=0)pattern：匹配的正则表达式string：源字符串flag

2021-11-05 17:31:56 1539 3

原创【Python多线程】守护线程 & 阻塞线程

文章目录守护线程守护线程的继承性join()阻塞系列精选Python爬虫速度很慢？并发编程了解一下吧守护线程在 Python 多线程中，主线程的代码运行完后，如果还有其他子线程还未执行完毕，那么主线程会等待子线程执行完毕后再结束；这就会有产生一个问题，如果有一个线程被设置成无限循环，那么意味着整个主线程( Python 程序)就不能结束。举个例子看一下。import threadingimport time# 非守护线程def normal_thread(): for i i

2021-11-03 10:21:48 3994 5

原创 Python爬虫速度很慢？并发编程了解一下吧

文章目录前言基础知识GIL多线程创建Thread 对象自定义类继承 Thread前言网络爬虫程序是一种 IO 密集型（页面请求，文件读取）程序，会阻塞程序的运行消耗大量时间，而 Python 提供多种并发编程方式，能够在一定程度上提升 IO 密集型程序的执行效率。再开始之前你要先了解以下概念！基础知识并发：一段时间内发生某些事情。在单核 CPU 中，执行多个任务是以并发的方式运行的，由于只有一个核心处理器，CPU 把一个时间段划分成几个时间区间，各个任务只会在自己的时间区间执行，如果在自己的时间阶

2021-10-31 19:35:50 3057 6

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

Python制作酷炫二维码（有界面，exe打包）

文件一键整理（带撤销按钮）.zip

最新全国大学基本信息.csv

图片批量添加水印.zip

Mysql知识点总结.pdf

Python面试精选45题.pdf

途牛旅游网游记.csv

英文姓名性别预测.csv

中文姓名性别预测.csv

空空如也