自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

宿夏星

记录我的学习之旅,学到哪儿就写到哪儿

  • 博客(31)
  • 资源 (4)
  • 收藏
  • 关注

原创 flask接口中request.json 接受到的值为 (Ellipsis, Ellipsis)

【代码】flask接口中request.json 接受到的值为 (Ellipsis, Ellipsis)

2024-03-20 17:45:08 102

原创 使用tqdm监控队列进度

【代码】使用tqdm监控队列进度。

2024-01-31 10:40:57 107 1

原创 基于Centos7镜像安装ffmpeg

注意:由于NuxDextop可能会与以他第三方库相冲突,因此,如果你启用了除了EPEL的其他第三方库,强烈建议你将NuxDextop仓库设置成”defaultoff”(默认关闭)状态。将文件中的enabled=1改成enabled=0,然后保存。添加其他第三方仓库遵循同样的操作原则!安装ffmpeg则应该。

2023-12-04 17:23:55 432

原创 Python多线程实例之图片数据处理

中的实质区别在于构建队列的方式,且本实例将使用图片处理的案例进行举例。

2023-11-20 13:53:37 134

原创 jupyterLab配置文件翻译

【代码】jupyterLab配置文件翻译。

2023-09-11 15:32:42 413

原创 python Flask中加入异步定时加载本地停用词

【代码】python Flask中加入异步定时加载本地停用词。

2023-08-21 10:43:39 67

原创 Transformers中不同数据收集器的使用场景

DataCollator:使用场景:当你的训练数据没有特定的格式或需要自定义数据收集逻辑时,可以使用DataCollator来自定义数据收集过程。示例:适用于自定义数据收集逻辑的场景,需要根据具体任务进行数据处理和整合。DataCollatorForLanguageModeling:使用场景:适用于训练语言模型的场景,其中目标是预测下一个词或遮蔽词。示例:适用于GPT、BERT等语言模型的预训练任务,通过遮蔽部分输入文本来预测被遮蔽的词。DataCollatorForPermutatio

2023-07-06 16:46:15 367

原创 wandb.errors.UsageError: api_key not configured (no-tty). call wandb.login(key=[your_api_key])

【代码】wandb.errors.UsageError: api_key not configured (no-tty). call wandb.login(key=[your_api_key])

2023-07-06 14:51:40 335

原创 问题记录:transformers训练GPT2模型时报错ValueError: The model did not return a loss from the inputs,

【代码】问题记录:transformers训练GPT2模型时报错ValueError: The model did not return a loss from the inputs,

2023-07-06 14:29:18 1084

原创 Ubuntu系统备份

【代码】Ubuntu系统备份。

2023-02-02 11:08:39 328

原创 箱线图异常值检测

判断标准: 大于箱线图上须或者小于箱线图的下须的值,就是异常点。上须:Q3 + 1.5 * (Q3 - Q1)下须:Q3 ±1.5 * (Q3 - Q1)下四分位数:25%分位点所对应的值(Q1)上四分位数:75%分位点所对应的值(Q3)中位数:50%分位点所对应的值(Q2)其中 Q3 - Q1 表示四分位差。

2023-01-13 08:57:24 1126

原创 docker不用sudo

【代码】docker不用sudo。

2022-12-28 11:09:13 101

转载 tensorflow损失函数选择

ann.compile(optimizer=‘adam’,loss=‘sparse_categorical_crossentropy’, # 稀疏分类交叉熵损失函数。ann.compile(optimizer=‘adam’, loss=‘categorical_crossentropy’, # 分类交叉熵损失函数。三、对于多分类问题,如果标签是整数数值,如1,2,3,4,5,则使用稀疏分类交叉熵损失函数。一、对于连续值向量的回归问题。

2022-09-26 09:30:55 405

原创 docker部署Mysql并创建远程连接账号并赋权

【代码】docker部署Mysql并创建远程连接账号并赋权。

2022-09-06 10:51:32 1219

原创 TensorFlow-GPU版本支持

上图取自TensorFlow官网,可直接跳转此链接查看最新版本支持!

2022-09-02 14:16:06 208

原创 TensorFlow知识点记录

tensorflow学习过程中的基础知识

2022-09-01 15:24:42 343

原创 完美验证码识别系统问题统一回复帖

专门处理问题的帖子

2022-06-28 11:15:04 236

原创 docker 部署 elasticsearch后 修改 ES_JAVA_OPTS 参数

docker 部署elasticsearch 修改运行占用内存大小

2022-06-13 17:11:05 2772 1

原创 sklearn 分类器及回归器

个人备忘用测试集、训练集拆分x_train,x_test,y_train,y_test=train_test_split(csr_matrix(X_train_tfidf,dtype=np.float),train_target,test_size=0.2)朴素贝叶斯from sklearn.naive_bayes import MultinomialNB# 朴素贝叶斯clf = MultinomialNB()clf.fit(x_train, y_train)from sklearn .

2022-05-18 17:25:04 622

原创 python数据处理常用方法记录

本文仅为记录在日常工作中学到的一些常用数据处理方法,后期会持续进行更新。

2022-05-17 10:27:31 581

原创 常用git命令

git常命令git init # 将目录转化为版本库git add # 将文件添加到版本库中 git add . 是指将当前目录全部添加git status # 查看当前文件状态git -rm --cached file # 取消暂存git commit -m “消息日志” [–author=“变更作者” ] # 添加到本地的git仓库中git push origin 分支名 # 将本地git仓库代码推送到码云远端仓库中git remote add origin g

2022-03-17 16:16:55 1670

原创 gitlab的安装

系统版本:CentOS-7-x86_64-DVD-2009gitlab版本:gitlab-ce-14.8.4关闭防火墙并取消开机自启动systemctl stop firewalld & systemctl disable firewalld关闭SELinux(强制访问控制安全政策)并重启系统vi /etc/sysconfig/selinux将SELINUX改为disableRoboot安装gitlab及依赖rpm -ivh net-tools-2.0-0.25.20131004g

2022-03-17 16:07:54 1188

原创 Centos设置打开终端快捷键

1、首先进入/usr/bin/目录下查看是否存在gnome-terminal文件cd /etc/bin/ls |grep gnome-terminal2、应用程序(Applications) > 系统工具(System Tools) > 设置(Settings) > 设备(Devices) > Keyboard3、拉到页面最底下,点击加号添加快捷键4、设置快捷键名称、命令以及快捷键,然后点击Add即可...

2021-10-13 14:28:38 4210

原创 doccano

DockerAs a one-time setup, create a Docker container as follows:docker pull doccano/doccanodocker container create --name doccano \ -e "ADMIN_USERNAME=admin" \ -e "[email protected]" \ -e "ADMIN_PASSWORD=password" \ -p 8000:8000 docc

2021-08-11 10:24:52 171

原创 docker容器jupyter

1.启动一个容器nvidia-docker run -it -d -p 8888:8888 -p 6006:6006 -p 8022:22 --ipc=host --name pytorch1.0 -v /home/xx/study/pytorch/:/workspace --workdir=/workspace registry.cn-hangzhou.aliyuncs.com/xvjialing/pytorch:latest /bin/bashdocker attach pytorch1.0

2021-07-08 18:26:31 439

原创 Ubuntu20.04修改mysql8.0密码

~# mysql -uroot -p~# use mysql;~# flush privileges;~# ALTER USER 'root'@'localhost' IDENTIFIED WITH mysql_native_password BY '你的密码';~# flush privileges;

2021-06-25 10:16:02 219

原创 Python多线程:线程安全与lock锁的应用

什么叫线程安全?线程安全是指某个函数、函数库在多线程环境中被调用时,能够正确的处理多个线程之间的共享变量,使程序功能能够正确的完成。lock 锁能做什么?当然是解决线程安全问题了。!!!!本篇所用的的类库import threadingimport time我们的代码分两段,一段是会出现问题的,一段是不会出现问题的import threadingimport timelock = threading.Lock()class Account: def __init__.

2021-06-03 01:25:51 193

原创 Python多线程实例之爬虫

多线程爬虫用到的类库import queueimport timeimport randomimport blog_spiderimport queueimport threadingimport requestsfrom bs4 import BeautifulSoup代码完成:"""首先我们先创建第一个文件,名字自己取,我这里取名为 crawl_spider.py"""import requestsfrom bs4 import BeautifulSoup# 使用列表.

2021-06-03 01:06:53 1010 1

原创 Scrapy学习_01

Engine: 引擎,处理整个系统的数据流处理、触发事务,是整个框架的核心。item: 项目,定义爬取结果的数据结构,爬取的数据会被复制成该 item 对象。Scheduler: 调度器,接收引擎发过来的请求,并将其加入队列中,在引擎再次请求的时候将请求提供给引擎。Downloader: 下载器,下载网页内容,并将网页内容返回给蜘蛛。Spiders: 蜘蛛,其内定义了爬取的逻辑和网页的解析规则,它主要负责解析响应并生成提取结果和新的请求。Item Pipline: 项目管道,负责处理有蜘蛛从网..

2021-03-08 17:54:39 439

原创 Java学习笔记_01

Java基本语法Java大小写敏感类名:对于所有的类来说,类名的首字母应该大写,如果类名由若干单词组成,那么每个单词的首字母应该大写,例如: MyJavaClass方法名:所有的方法名都应该以小写字母开头。如果方法名含有若干单词,则后面的单词首字母大写源文件名称:源文件名称必须和类名相同,当保存文件的时候,应该使用类名作为文件名称保存,文件名的后缀为 . java主方法入口:所有的java程序都是由 public static void main(String[] args) 方法开始执行

2021-03-05 21:15:36 103

原创 Redis学习_01

启动redis:# 启动Redis服务redis-server redis.windows.conf# 启动Redis客户端redis-cli.exe启动服务端时遇到个小问题文章链接为:https://blog.csdn.net/fengzhihen2007/article/details/52211048转载一下,用于个人学习,如有侵权还请联系删除,谢谢,提供解决方案的@Poineer12131. redis-cli.exe2. shutdown3. exit4. redis-s

2020-12-25 23:48:33 96

nginx+scrapyd Dockerfile

将scrapyd服务打包为镜像,并使用nginx + htpasswd启用登录鉴权

2024-03-05

完美验证码识别系统,可用多种语言调用

验证码识别,使用exe进行训练集标识,无代码基础也可进行训练集标注,理论上准确率可以到百分之百,压缩包里有一部分我做好的字模和一部分测试数据,下载后可以直接用我的数据进行测试。 支持的调用方式有:易语言、VB、VB-NET、VB、TC、python、Delphi、C++、C#、按键精灵等,理论上只要是能调用dll就可以使用,如果有什么问题的话可以在线面的文章中留言,我会定期查看并回复大家的问题 https://editor.csdn.net/md/?articleId=125498768

2022-06-28

gitlab安装包及依赖,配合https://editor.csdn.net/md/?articleId=123552886本文

gitlab安装包及依赖,配合https://editor.csdn.net/md/?articleId=123552886本文

2022-03-17

ibus离线安装依赖及安装包

配合文章进行使用

2021-10-13

MysqlInstallFiles.zip

Centos7.6已验证可安装mysql离线安装文件

2021-09-30

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除