自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(62)
  • 资源 (4)
  • 问答 (1)
  • 收藏
  • 关注

原创 Python 原生调试器 debug快捷命令简介

源代码:模块定义了一个交互式源代码调试器,用于 Python 程序。它支持在源码行间设置(有条件的)断点和单步执行,检视堆栈帧,列出源码列表,以及在任何堆栈帧的上下文中运行任意 Python 代码。它还支持事后调试,可以在程序控制下调用。调试器是可扩展的——调试器实际被定义为类。该类目前没有文档,但通过阅读源码很容易理解它。扩展接口使用了和模块。

2023-02-02 13:41:20 631 1

原创 Chrome DevTools 中键盘快捷键的参考。

此文章是 Chrome DevTools 中键盘快捷键的参考。将鼠标悬停在 DevTools 的 UI 元素上以显示其工具提示。如果元素有快捷方式,工具提示会包含它。用于打开 DevTools 的键盘快捷键要打开 DevTools,请在光标聚焦在浏览器视口上时按以下键盘快捷键:行动 苹果电脑 视窗/Linux 打开您上次使用的任何面板 Command+Option+I F12或Control+Shift+I 打开控制台面板 Command+Opt...

2021-07-08 13:57:48 759

原创 程序中遇到乱码怎么办?这里有篇乱码恢复指北

tl;dr:需要恢复乱码的访客可使用此类服务,或参考下面的例子与您需要恢复的乱码进行对照。本文尝试对各种乱码的特征进行描述,并给出在各种编码中转换的一些方案。记得原来看到过一张很简明的关于乱码的解释图,不过找不到了。有那张图的同学希望能告诉我一下。2020/02 更新:Misaka00251 有找到那张图发在群组里,这里把它转译为文本放在末尾了。什么编码?这里我们讨论最常见的几个:Windows-1252(CP-1252)、GBK(以及 GB2312。GBK 范围稍大且兼容 GB2312

2021-04-21 17:00:20 6297

原创 常见正则表达式全集

表达式全集字符 描述 \ 将下一个字符标记为一个特殊字符、或一个原义字符、或一个向后引用、或一个八进制转义符。例如,“n”匹配字符“n”。“\n”匹配一个换行符。串行“\\”匹配“\”而“\(”则匹配“(”。 ^ 匹配输入字符串的开始位置。如果设置了RegExp对象的Multiline属性,^也匹配“\n”或“\r”之后的位置。 $ 匹配输入字符串的结束位置。如果设置了RegExp对象的Multiline属性,$也匹配“\n”或“\r”之前的位置。 * 匹配

2021-02-07 10:45:19 255

原创 正则表达式中 常见构造与用法

大写表示“非”,d表示digit数字。非数字就是\D, w表示word,非单词就是\W 元字符 描述 \ 将下一个字符标记符、或一个向后引用、或一个八进制转义符。例如,“\\n”匹配\n。“\n”匹配换行符。序列“\\”匹配“\”而“\(”则匹配“(”。即相当于多种编程语言中都有的“转义字符”的概念。 ^ 匹配输入字符串的开始位置。如果设置了RegExp对象的Multiline属性,^也匹配.

2021-02-05 10:07:18 246

原创 python-docx处理word文档功能详细说明

前言全网找了一番,用python创建和更新word(.docx)文档,还是python-docx包比较好用。依赖Python 2.6, 2.7, 3.3, or 3.4 lxml >= 2.3.2安装模块由于python-docx已经提交给PyPI仓库,所以可以使用pip安装,如下: pip install python-docx 如果同时安装了python2和python3那么pip可能不能用,可以使用pip3来安装,如下: pi...

2020-12-25 13:55:41 4279 1

原创 linux 命令行中对光标常用操作 移动快捷键

有几个常用的快捷键。ctrl+左右键:在单词之间跳转ctrl+a:跳到本行的行首ctrl+e:跳到页尾Ctrl+u:删除当前光标前面的文字 (还有剪切功能)ctrl+k:删除当前光标后面的文字(还有剪切功能)Ctrl+L:进行清屏操作Ctrl+y:粘贴Ctrl+u或ctrl+k剪切的内容Ctrl+w:删除光标前面的单词的字符Alt – d :由光标位置开始,往右删除单词。往行尾删Linux命令行快捷键涉及在linux命令行下进行快速移动光标、命令编辑、编辑后执行历史命令、Bang

2020-10-30 11:14:35 1521

原创 ChromeDriver与Chrome版本对应参照表及ChromeDriver下载链接

ChromeDriver Version Chrome Version 83.0.4103.39 83 83.0.4103.14 83 81.0.4044.138 81 81.0.4044.69 81 81.0.4044.20 81 80.0.3987.106 80 80.0.3987.16 80 79.0.3945.36 79 79.0.3945.16 79 78.0.3904.105 78 78

2020-09-28 17:56:39 690 1

原创 如何用Python快速开发一个企业微信群机器人?

背景企业微信是微信官方推出的用于工作沟通的工具,相较于阿里系的钉钉,拥有可以直接对接微信好友的良好生态闭环,在沟通使用上更具优势,但仍存在一定的不足,在使用体验上来说还是逊色于钉钉。但好在长板足够长,可以接受一些不足。同时,因为企业微信开放了机器人这个接口,在需求定制这个环节上带来了较好的体验,今天就开放api这个环节提供一个快速的参与群内回复机器人的实现。微信官方api介绍1,创建群机器人2,获取机器人token在机器人的属性上,有一个webhook地址链接,格式为.

2020-07-07 11:09:21 4804 1

原创 739. 每日温度

请根据每日气温列表,重新生成一个列表。对应位置的输出为:要想观测到更高的气温,至少需要等待的天数。如果气温在这之后都不会升高,请在该位置用0来代替。例如,给定一个列表temperatures = [73, 74, 75, 71, 69, 72, 76, 73],你的输出应该是[1, 1, 4, 2, 1, 1, 0, 0]。提示:气温列表长度的范围是[1, 30000]。每个气温的值的均为华氏度,都是在[30, 100]范围内的整数。对于题目的理解:1,对于每一个元...

2020-06-23 13:49:55 211

原创 3. 无重复字符的最长子串

给定一个字符串,请你找出其中不含有重复字符的最长子串的长度。示例1:输入: "abcabcbb"输出: 3 解释: 因为无重复字符的最长子串是 "abc",所以其长度为 3。示例 2:输入: "bbbbb"输出: 1解释: 因为无重复字符的最长子串是 "b",所以其长度为 1。示例 3:输入: "pwwkew"输出: 3解释: 因为无重复字符的最长子串是"wke",所以其长度为 3。 请注意,你的答案必须是 子串 的长度,"pwke"是一个子...

2020-06-23 13:42:35 158

原创 Python下对信号的捕获以及优雅的处理

使用任务队列有助于松耦合的设计。有时我们不得不重启服务(比如发新版),但不能打断队列中正在进行的任务。正确的做法是handle sigterm信号,具体代码如下:import signalimport asyncioclass GracefulKiller: is_kill_now = False def __init__(self): signal.signal(signal.SIGINT, self.exit_gracefully) si

2020-06-16 11:37:48 4479 1

原创 LINUX下各个信号以及对应解释说明

信号名优先级解释ACTIONSSIGHUP1/* Hangup (POSIX). */终止进程 终端线路挂断SIGINT2/* Interrupt (ANSI). */终止进程 中断进程 Ctrl+CSIGQUIT3/* Quit (POSIX). */建立CORE文件终止进程,并且生成core文件 Ctrl+\SIGILL4/* Illegal instruction (ANSI). */建立CORE文件,非法指令...

2020-06-16 11:32:47 1306

原创 python库itchat介绍(自动登录微信,自动回复消息)

itchatitchat是一个开源的微信个人号接口,使用python调用微信从未如此简单。使用不到三十行的代码,你就可以完成一个能够处理所有信息的微信机器人。当然,该api的使用远不止一个机器人,更多的功能等着你来发现,比如这些。该接口与公众号接口itchatmp共享类似的操作方式,学习一次掌握两个工具。如今微信已经成为了个人社交的很大一部分,希望这个项目能够帮助你扩展你的个人...

2020-01-16 10:58:27 14995 11

原创 从零开始快速入门google开源BERT模型

什么是BERT?BERT是Google为预训练语言表示而开发的NLP模型。它利用了在网络上公开提供的大量纯文本数据,并且以无人监督的方式进行了培训。对于每种语言,预训练BERT模型是一个相当昂贵但一次性的过程。幸运的是,Google发布了一些经过预先训练的模型,您可以从此处下载。Sentence Encoding/Embedding是许多NLP应用程序所需的上游任务,例如,情绪分析,文...

2020-01-15 10:46:45 1260

原创 mitmproxy 使用教程 从安装到基本操作实现零距离

简介mitmproxy是一个交互式的、支持SSL/TLS的拦截代理,是一款用于HTTP /1,HTTP /2和WebSockets的抓包工具mitmdump是mitmproxy的命令行版本。与tcpdump类似mitmweb是mitmproxy的基于Web的界面的版本。...

2020-01-03 13:26:28 6613

原创 Spark SQL常用函数 函数分类及其简介

Spark SQL函数一、概述1、来源:本文总结自spark 2.3.1 API文档 org.apache.spark.sql:object functions;2、使用:org.apache.spark.sql.functions中提供了约两百多个函数,大部分函数与Hive中类似,除UDF函数,均可在SparkSQL中直接使用;如果想要用于Dataframe 和 Data...

2019-11-27 15:11:06 7905

原创 如何用gradle配置国内阿里云镜像源

使用阿里云国内镜像对单个项目生效,在项目中的build.gradle修改内容buildscript { repositories { maven { url 'http://maven.aliyun.com/nexus/content/groups/public/' } maven{ url 'http://maven.aliyun...

2019-07-23 10:18:07 5209

原创 快速了解Spark语法中 join、leftOuterJoin、rightOuterJoin及fullOuterJoin 的用法以及各自的区别

Spark的join与mysql的join类似,mysql的join是将表与表之间连接查询,spark中join是将RDD数据集进行连接,Spark主要有join、leftOuterJoin、rightOuterJoin及fullOuterJoin这4种连接join:相当于mysql的INNER JOIN,当join左右两边的数据集都存在时才返回leftOuterJoin:相当于mysql...

2019-07-18 15:58:50 10245

原创 Spark学习笔记--超全,所有知识点全覆盖总结

Spark架构,运行原理,任务调度和资源调度分析,内存管理分析,SparkSQL,SparkSreaming与kafaka,数据倾斜的解决,调优。Spark简介Spark是美国加州大学伯克利分校的AMP实验室(主要创始人lester和Matei)开发的通用的大数据处理框架。Apache Spark™ is a fast and general engine for large-s...

2019-06-14 14:08:49 1679

原创 将本地代码上传github完整流程

建立本地仓库1.首先进入目标文件夹cd 目标文件夹/2.执行指令:git init执行git init初始化成功后你会发现项目里多了一个隐藏文件夹.git隐藏的文件夹3.执行指令:git add .将所有文件添加到仓库执行git add .4.执行指令:git commit -m "提交文件"双引号内是提交注释。提交文件2.5...

2019-06-13 15:25:42 351

原创 python下的Pandas中DataFrame基本操作,基本函数整理

简介pandas作者Wes McKinney 在【PYTHON FOR DATA ANALYSIS】中对pandas的方方面面都有了一个权威简明的入门级的介绍,但在实际使用过程中,我发现书中的内容还只是冰山一角。谈到pandas数据的行更新、表合并等操作,一般用到的方法有concat、join、merge。但这三种方法对于很多新手来说,都不太好分清使用的场合与用途。构造函数方法 ...

2019-06-13 14:29:59 12126

原创 Linux下使用wc命令快速统计所有文件的行数

语法:wc [选项] 文件…说明:该命令统计给定文件中的字节数、字数、行数。如果没有给出文件名,则从标准输入读取。wc同时也给出所有指定文件的总统计数。字是由空格字符区分开的最大字符串。该命令各选项含义如下:  - c 统计字节数。  - l 统计行数。  - w 统计字数。这些选项可以组合使用。输出列的顺序和数目不受选项的顺序和数目的影响。总是按下述顺序显示并且每...

2019-06-13 09:47:53 5711

原创 Python生成器最简单解释

# 本文利用一个标准的生产消费模型,解释了一个最基本的生成器模型.# coding=utf-8import timedef consumer(): abc = None while True: if abc is not None: print('consumer: {}'.format(abc)) abc = yi...

2019-06-05 15:36:26 149

原创 unix中fg、bg、jobs 命令让你的进程在前后台之间切换

Linux下的fg和bg命令是进程的前后台调度命令,即将指定号码(非进程号)的命令进程放到前台或后台运行。比如一个需要长时间运行的命令,我们就希望把它放入后台,这样就不会阻塞当前的操作;而一些服务型的命令进程我们则希望能把它们长期运行于后台。进程前后台操作用到以下命令或按键:Ctrl+C终止并退出前台命令的执行,回到SHELLCtrl+Z暂停前台命令的执行,将该进程放入后台,回...

2019-06-05 14:36:11 667

原创 关于 Python 装饰器,你应该知道的知识

Python 装饰器是一个强大的概念,允许我们使用一个函数 「 包装 」 另一个函数除了正常的职责之外,装饰器的另类使用想法是抽象出你想要一个功能或类做的东西,这可能有很多原因,例如代码重用和坚持科里原则通过学习如何编写自己的装饰器,我们可以显着提高自己代码的可读性,因为它们可以更改函数的行为方式,而无需实际更改代码 ( 例如添加日志记录行 )它们是Python中相当常...

2019-04-26 10:45:13 140

原创 Python格式化字符串f-string f"{}{}{}"详细介绍

简介f-string,亦称为格式化字符串常量(formatted string literals),是Python3.6新引入的一种字符串格式化方法,该方法源于PEP 498 – Literal String Interpolation,主要目的是使格式化字符串的操作更加简便。f-string在形式上是以f或F修饰符引领的字符串(f'xxx'或F'xxx'),以大括号{}标明被替...

2019-04-26 09:12:00 37910 8

原创 linux下的find文件查找命令与grep文件内容查找命令 二者详细区别

在使用linux时,经常需要进行文件查找。其中查找的命令主要有find和grep。两个命令是有区别的。  区别:(1)find命令是根据文件的属性进行查找,如文件名,文件大小,所有者,所属组,是否为空,访问时间,修改时间等。 (2)grep是根据文件的内容进行查找,会对文件的每一行按照给定的模式(patter)进行匹配查找。  一.find命令    ...

2019-04-25 09:53:59 2827

原创 ubuntu系统中修改hosts配置

最近在使用ubuntu开发,难免需要配置hosts,下面介绍以下使用命令进行配置的操作流程。ubuntu下配置host的方法:打开终端输入命令: sudo vim /etc/hosts,在vim中进入插入模式(需要点击insert按键),插入要配置的host地址,模仿已有的配置,比如0.0.0.0 account.jetbrains.com空格前为IP地址,...

2019-04-23 16:41:23 7270

原创 git 常用命令 使用流程 git commit,git status

上传代码步骤:git status git add . git commit -m “ti jiao dai ma”,如果是多行log,则为如下命令: git commit -m 'ti jiao dai ma 注意多行时对应的是单引号 git push origin HEAD:refs/for/master ,git push origin master切换分支查看远程分支...

2019-04-18 17:11:51 790

原创 ubuntu下解压rar文件

安装ubuntu 下rar解压工具安装方法:压缩功能sudo apt-get install rar解压功能sudo apt-get install unrar使用可以直接在UI界面使用了 rar x test.rar

2019-04-16 09:20:26 3904

原创 pandas to_dict 的用法 读取excel时转置每一行为一个dict对象

简介:pandas 中的to_dict 可以对DataFrame类型的数据进行转换可以选择六种的转换类型,分别对应于参数 ‘dict’, ‘list’, ‘series’, ‘split’, ‘records’, ‘index’,下面逐一介绍每种的用法Help on method to_dict in module pandas.core.frame:to_dict(orient='...

2019-04-15 11:13:40 5068

原创 Python将excel文件从xls转换为xlsx

本文使用场景:将一个xls格式Excel文件转换为xlsx文件格式。接下来将一步一步演示该操作。你也可以对代码进行修改使其适用于你所需的场景。安装Python3首先需要安装Python,我这里安装的是Python3.6.4(注意:Python3和2版本语法有改动)到官网进行下载安装。选择对应版本的安装包即可,因为我这台电脑是Win10 64位,所以选择Windows x86-6...

2019-04-12 10:53:19 13055 7

原创 Python之xlsx文件与csv文件相互转换 使用xlrd pands xlwt等库

Python之xlsx文件与csv文件相互转换在Python中,可以使用xlrd和csv模块来处理Excel文件和csv文件。xlsx文件转csv文件import xlrdimport csvdef xlsx_to_csv(): workbook = xlrd.open_workbook('1.xlsx') table = workbook.sheet_by_i...

2019-04-11 11:03:15 1245

原创 Elasticsearch 集群调优建议 yml配置、jvm设定、写入性能优化

生产环境集群搭建建议1.ES设置尽量简洁elasticsearch.yml中尽量只写必备的参数,其他可以通过api动态设置的参数都通过api来设定动态设定的参数有transient和persistent两种设置,前者在集群重启后会丢失,后者不会,但两种设定都会覆盖elasticsearch.yml中的配置。PUT /_cluster/settings{ "persistent"...

2019-04-03 09:19:24 1668

原创 Airflow安装详细介绍以及入门Demo

Airflow 是什么Airflow 是 Airbnb 开发的用于工作流管理的开源项目,自带 web UI 和调度。现在 Apache 下做孵化,地址是https://github.com/apache/airflowairflowAirflow 解决什么问题Airflow 主要解决的问题可以参考 Airbnb 官方的博客:airflow-a-workflow-...

2019-04-01 11:07:37 3780 1

原创 scrapy常用settings.py内设置详情

scrapy常用设置参考手册内置设置参考以下是所有可用Scrapy设置的列表,按字母顺序排列,以及它们的默认值和适用范围。范围(如果可用)显示设置的使用位置,如果它与任何特定组件相关联。在那种情况下,将显示该组件的模块,通常是扩展,中间件或管道。它还意味着必须启用该组件才能使设置产生任何效果。AWS_ACCESS_KEY_ID默认:None需要访问Amazo...

2019-03-29 09:19:26 1062

原创 阿里Canal安装和代码示例 监测mysql数据变化

Canal的简单使用canal可以用来监控数据库数据的变化,从而获得新增数据,或者修改的数据,用于实际工作中,比较实用,特此记录一下Canal简介canal是应阿里巴巴存在杭州和美国的双机房部署,存在跨机房同步的业务需求而提出的。阿里系公司开始逐步的尝试基于数据库的日志解析,获取增量变更进行同步,由此衍生出了增量订阅&消费的业务基于日志增量订阅&消费支持...

2019-03-20 18:50:06 904

原创 scrapy代理proxy的配置方式

根据最新的scrapy官方文档,scrapy爬虫框架的代理配置有以下两种方法:一.使用中间件DownloaderMiddleware进行配置使用Scrapy默认方法scrapy startproject创建项目后项目目录结构如下,spider中的crawler是已经写好的爬虫程序:settings.py文件其中的DOWNLOADER_MIDDLEWARES用于配置scrapy的中间件...

2019-03-15 14:30:34 9516

原创 elasticsearch painless 脚本使用说明(附demo及painless API)

Kibana 提供了一些强大的方法,用于搜索和可视化 Elasticsearch 中存储的数据。为了实现可视化,Kibana 会搜索 Elasticsearch mapping 中定义的 field,并以图表的形式将它们作为选项呈现给用户。但是,如果你忘记在 schema 中将一个重要的值定义为单独的 field 会怎么样呢?或者,如果你想把两个 field 合并到一起该怎么办呢?这时就可以使用 ...

2019-03-06 17:05:36 3722

2023-04-23最新手机号段归属地数据库 496699条

2023年最新更新,数据包含496699条. 我也是买的 所以分享给大家 能够采用号码七位查询所在地区名称、地区号码、邮政编号

2023-04-23

最新 2023年更新 全国行政区划结构及其行政编码

最新 2023年更新 全国行政区划结构及其行政编码!!! 最新 2023年更新 全国行政区划结构及其行政编码!!! 最新 2023年更新 全国行政区划结构及其行政编码!!! 来源于高德地图,数据权威性有保证. 来源于高德地图,数据权威性有保证. 来源于高德地图,数据权威性有保证.

2023-03-24

yanagishima-22.0-编译后.zip

presto是一个开源的分布式sql查询引擎,数据量支持GB到PB字节,主要用于处理秒级查询的场合。yanagishima是presto的可视化客户端。从官网下载的源码需要编译。 yangshima的安装,启动配置见官网:https://github.com/yanagishima/yanagishima

2020-05-19

decompilation.zip

用于编译和反编译 四款反编译工具:JAD,JadClipse,JD-GUI,CRF 大大提升反编译效率

2019-12-31

全中国180w+邮政编码

最新全国区域,省市县,全国省市信息, 全国邮编,全国区号 全国省市,邮编,区号 全国区域,省市县,全国省市信息, 全国邮编,全国区号, 绝对绝对全国最齐全!!!!!!!!!!!! 没有比这更全,更新的收集不易,且下且给分吧~~

2018-08-20

2017年最新手机号段数据库,2017手机号码归属地数据库

电信:133、153 、173(新) 、 177 (新) 、 180、181、189 移动:134、135、136、137、 138、139、150、 151、152、157、158、159、 178(新)、 182、183、 184、187、 188 联通:130、131、132、155、156、175 ( 新) 、176( 新) 、185、186 数据卡:1 45、147、 149 其他:170(新)、171 (新) 数据来源 http://www.sms.cn

2017-11-24

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除