- 博客(13)
- 收藏
- 关注
RSS订阅原创 书生浦语-第二课轻松分钟玩转书生·浦语大模型趣味 Demo 笔记-作业
这里我用的是浦语·灵笔2 ，它是基于 书生·浦语2 大语言模型研发的突破性的图文多模态大模型，具有非凡的图文写作和图像理解能力，在多种应用场景表现出色。这里我特意找了一张医学上的影像图片，看看它能否识别出来，结果还不错。作业1：让它书写一个300字的小故事。作业2：完成图文创作。
2024-04-25 09:51:20
80
原创 书生浦语第四课--XTuner 微调个人小助手认知 笔记及作业
对于 LoRA 或者 QLoRA 微调出来的模型其实并不是一个完整的模型，而是一个额外的层（adapter）。那么训练完的这个层最终还是要与原模型进行组合才能被正常的使用(备注：全量微调不需要)python /root/ft/data/generate_data.py,生成对应的语料文件。但是由于算力有限，我这个微调时间太长，因此换成了deepspeed 来加速训练。同时可以看到train文件夹中已经存放了对应的模型文件。后续可以看到对应的lr的变化以及loss的不断降低。程序启动，打印一些必要的信息。
2024-04-23 15:42:15
89
原创 书生-浦语第六课-Lagent & AgentLego 智能体应用搭建-作业
ssh -CNg -L 7860:127.0.0.1:7860 -L 23333:127.0.0.1:23333 [email protected] -p 你的 ssh 端口号。可以重新刷新几次，就会有正确的界面，一定要注意模型IP 要改成127.0.0.1:23333。新建文件touch /root/agent/direct_use.py,并执行，可以看到。1 Lagent Web Demo的部署以及使用。作业2：AgentLego的使用。1 前期的环境以及文件准备。
2024-04-20 14:42:20
251
1
原创 书生浦语-第五课作业
打开VSCode。在左边栏空白区域单击鼠标右键，点击Open in Intergrated Terminal。终端中输入touch /root/pipeline_transformer.py，新建pipeline_transformer.py按Ctrl+S键保存（Mac用户按Command+S）返回terminal ,运行程序使用LMDeploy与模型进行对话的通用命令格式为：lmdeploy chat [HF格式模型路径/TurboMind格式模型路径]
2024-04-14 20:15:45
698
1
原创 xgboost的算法整理
1 算法原理xgboost是boosting 中的一种，所用到的树模型是cart tree它的目标函数为第一部分是真实值和预测值的差，第二部分是正则化项，T表示叶子节点的个数，w表示叶子节点的分数，由于新生成的树要拟合上次预测的残差，当生成t颗树后，预测分数写成：y(t)=y(t-1)+f(x)因此将目标函数改写为然后在f_t=0处的泰勒二阶展开近似从而进行进一步求解2在寻找...
2019-04-10 21:29:33
254
原创 基本算法梳理(2)-random forest
接上篇：随机森林的思想1 为什么会产生随机森林解决决策树的过拟合问题。2 随机森林的产生方法给定一个有n个样本的训练集{X，Y}，for b=1,…,B:1.从X中有放回的采样n个样本，组成集合{Xb，Yb}；2.在{Xb，Yb}上随机抽取n个特征训练决策树（或者回归树）3.通过投票决定结果3随机森林的优缺点：优点：随机森林几乎不需要输入准备。它们可以处理二进制特征，分类特...
2019-04-04 21:49:36
167
原创 算法梳理_集成学习（1）
1 概念梳理集成学习(ensemble Learning)：通过构建并结合多个学习器来完成学习任务个体学习器(base learners):也叫基学习器，通常由一个现有的学习算法从训练数据中产生。(这个现有的学习算法可以是朴素贝叶斯，决策树这种单一算法，也许是random forest这种ensemble算法)2 分类常见的有三类：bagging,boosting,stacking（ba...
2019-04-03 09:49:51
236
原创 load json文件时常见错误以及修正总结（亲测有效）
示例1：json_file=’/home/mashagua/my_pycharm/hr_plot/data/address.json’with open(json_file,‘r’) as jf:data=json.loads(jf)错误1：TypeError: the JSON object must be str, bytes or bytearray, not ‘TextIOWrapp...
2019-03-29 08:43:17
6193
1
原创 leetcode刷题-26 删除重复元素
题目：给定一个排序数组，你需要在原地删除重复出现的元素，使得每个元素只出现一次，返回移除后数组的新长度。不要使用额外的数组空间，你必须在原地修改输入数组并在使用 O(1) 额外空间的条件下完成。（题目链接：https://leetcode-cn.com/problems/remove-duplicates-from-sorted-array/）题目的要点：1 数组是已经排序过的，2 在原地删...
2019-02-28 08:52:14
239
原创 使用python自动发送QQ邮件
from smtplib import SMTP_SSLfrom email.mime.text import MIMETextfrom email.mime.multipart import MIMEMultipartfrom email.mime.application import MIMEApplicationfrom email.header import Headerhost...
2019-01-26 18:54:32
597
原创 ubuntu 16.04.1配置tensorflow-gpu教程（tensorflow1.9）(所有亲测有效)
首先，nvidia driver和cuda的关系如下图Table 1. CUDA Toolkit and Compatible Driver VersionsCUDA Toolkit Linux x86_64 Driver Version Windows x86_64 Driver VersionCUDA 10.0.130 ...
2018-12-15 22:01:51
501
原创 SVN Update Error: Please execute the 'Cleanup' command的解决办法
我们经常会从SVN上拉文件或者上传文件，如果拉的文件数量太多，中间有操作中断，那么再重新update的时候会报文件被锁，需要cleanup,那么解决办法是（亲测有效）：选中所在的文件夹，点击右键出现下面界面：把Break write locks勾选上，然后再右键SVN update即可...
2018-12-11 09:16:29
8290
3
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人