- 博客(89)
- 资源 (1)
- 收藏
- 关注
RSS订阅
原创 强化学习 | 策略梯度 | Natural PG | TRPO | PPO
递进学习策略梯度：从 Gradient、Policy Gradient (REINFORCE、Q Actor-Critic、Advantage Actor-Critic ) 至 Natural Policy Gradient、TRPO、PPO 。逻辑清晰，含大量手写笔记，注释了黎曼流形、Hessian矩阵等30余个数学概念
2022-03-11 11:59:02
9738
16
原创 公司调研 | 1X | OpenAI投资的首个硬件公司 | 人形机器人NEO
1X公司是个具备强AI基因的公司，想做大模型+机器人硬件，是OpenAI投资的首个硬件公司。他们正在研发的人形机器人是NEO
2024-03-24 10:00:00
764
原创 公司调研 | Agility | 网红人形机器人Digit | 商业化情况
网红人形机器人Digit的2次商业化落地尝试。在2019年试图与福特汽车合作物流配送，但因疫情失败。2023年与亚马逊合作，尝试在仓库中做一些搬运工作，结果未知。但我有一个问题，在这种场景下，人形机器人是必要形态么...
2024-03-23 15:48:39
895
原创 公司调研 | 空间机械臂GITAI | 日企迁美
GITAI公司专注太空机器人。主要做蚯蚓机械臂和月球漫步车。前者主要用于在太空中的卫星日常维护，后者用于月球探索与基建
2024-03-23 10:00:00
851
原创 超详细 | 实验室linux服务器非root账号 | 安装pip | 安装conda
登录实验室公用服务器，个人账号下（非root）是空的，啥也没有，想安装下pip和conda。转了一圈，好像没太有针对这个需求写具体博客的，但有挺多讲直接在root下安的（用的应该是个人虚拟机，服务器一般是分账号的）。结合我的报错，写了这篇博客。其实大致步骤都相同，但与个人虚拟机安装不同的是：服务器的个人账号没有root权限，我修改不了root文件，但pip/conda安装命令是默认安装到root的。解决方式：通过安装命令设置，将pip/conda安装到，再手动更新下。
2023-11-22 16:29:26
581
4
原创 强化学习代码实战入门 | 井字棋Tic-Tac-Toe代码详解
这是一个易理解的强化学习demo，300行左右，可以作为RL的入门代码，辅助基础公式的理解
2023-09-10 16:48:09
664
1
原创 【报错】assert failed: xQueueSemaphoreTake queue.c:1545 (( pxQueue ))
嵌入式报错
2023-01-09 11:59:45
3149
3
原创 全网最简单解决方式1045-Access denied for user root@localhost(using password:YES)
报错一：1045-Access denied for user root@localhost(using password:YES)；报错二：Your password has expired.To log in you must change itusing a client that supports expired passwords
2022-07-20 12:02:34
14194
1
原创 2022大三计算机 | 保研面试 | 专业课(数据结构、计组等) 数学(离散等) | 资料整理
准备复习专业课和数学，每天会复习8个问题/知识点，大概6月底全部复习完。专业课：数据结构、计算机组成原理、操作系统、计算机网络、数据库、软件工程、汇编、编译、程序设计语言。数学：高数、线代、离散。借CSDN罗列已整理的题目，便于对照自答.....................
2022-05-29 11:29:54
5109
92
原创 控制台输出内容过多 | 将程序从前台转移至后台 | 输出日志文件 | nohup命令
感觉终端输出内容太多好乱，不想在终端看，并且想保留其输出日志
2022-04-26 12:11:16
843
原创 使用远程服务器总是因网络中断、终端不小心关闭、锁屏等导致程序中断 | screen窗口
用自己的笔记本连接远程服务器跑代码，网络中断、因输入密码界面中断、锁屏、终端被不小心关闭等导致跑到一半的程序中断，真是非常伤心的一件事.
2022-04-26 11:37:09
3565
4
原创 Windows连接远程Linux服务器 | VSCode配置 | 免密设置 | 跳板机配置
ssh连通跳板机，并实现跳板机免密登录。在VSCode，修改ssh的config文件。
2022-04-07 13:55:15
3243
原创 强化学习 | Mirror Learning
看了论文Mirror Learning: A Unifying Framework of Policy Optimisation.这篇blog对该论文的核心内容进行整理，限于时间未整理细节推导部分
2022-03-24 17:27:49
2198
19
原创 强化学习 | Multi Agents | Trust Region | HATRPO | HAPPO
ICLR2022多智能体论文，将trust region推广到MA上，保证单调递增。学习博客，共7k字，纯手敲。含大量手写笔记。
2022-03-22 20:02:10
12481
21
原创 强化学习入门笔记 | UCL silver RL | UC Berkely cs285 DRL
先后听了两门课程，分别是David Silver的RL和Sergey Levin的DRL。各耗时一周左右，后者更难一些。
2022-03-01 23:54:37
3292
2
原创 leecode刷算法C++ | 字符串数组15道题最全总结easy题型 | 删除有序数组中的重复项 | 轮转数组 | 两个数组的交集 | 只出现一次的数字
共9道数组、字符串相关题目，大多数为简单。 分为三类，分别为翻转问题、元素重复问题和其它类
2021-12-09 20:18:44
1131
1
原创 Linux中sudo ./xxx.sh找不到命令的真正原因——文件执行权限
执行脚本的时候报错：经检查，sudo命令正常，该脚本文件的确存在于该目录下遂使用 ls -l 命令查看下该文件的权限：ps： - 代表没有权限，r为可读权限，w为可写权限，x为可执行权限共9个基本权限位，其中每3个一组（r、w、x），共分为3组，这3组分别为文件属主的权限、文件所属组的权限、其它用户的权限举一个例子，-rw-r-xr--，其意为 属主有读取、写入的权限，属主的同组人有读、执行权限，其他人只有读的权限则上图中的权限位代表属主有读写权限，同组人和其他人有读的权限，所以需要修
2021-11-30 13:17:15
21065
3
原创 SSH连接Liunx虚拟机失败 | 主机ping虚拟机超时out of date | liunx中ifconfig命令找不到ip地址ens33显示00:0c:29:31:fa:30
连接ssh时失败，主机和虚拟机linux相互ping失败，ping失败后检查了Linux是否连接有线网络、更改同步了Liunx时间都没有用解决方式：1.打开虚拟网络编辑器2.检查有没有VMware8网卡（没操作第一步时我显示了VMware1网卡）3.再在Liunx里ifconfig，好家伙找不到ip地址了其中，ens33显示的原应是ip地址的位置为00:0c:29:31:fa:30这时重置一下Liunx里的网络连接systemctl stop NetworkManagersystem
2021-11-30 08:57:20
3115
原创 小众浏览器测评 | 星愿 | 百分cent | Vivaldi | Brave
目的：想基于浏览器进程抓包，但是想获得噪声相对小的数据，则找相对Chrome Google等主流browser更简单的浏览器；想使用Google的某个扩展程序，所以找基于Chrome内核的浏览器所以，我要找基于Chrome内核的简单浏览器最后找到了这几个符合条件的浏览器：星愿、百分cent、Vival、Brave星愿优点：星愿的主页面具有相当的自主性，可以自由拖动添加图标和更换背景、搜索框等。其主页有个搜索漫画的功能，好像在看漫画这一块做了一些页面优化。缺点：只能在它提供的星愿商店里下扩.
2021-11-28 16:29:10
3947
原创 区块链报错7 | invalid address | Error: [ethjs-query] while formatting outputs from RPC: “message“
初学记录 · 欢迎交流区块链DApp从零开始学 (一) | DApp抓包区块链DApp从零开始学 (二) | 超详细 DApp创建 | 发行代币token | 宠物领养区块链知识（一） | 实例化合约Contract区块链报错1 | npm run dev 无法解析json格式 | npm ERR JSON.parse Failed to parse json区块链报错2 | 区块链npm run dev失败lite-server区块链报错3 | truffle unbox 报错 | downl
2021-11-01 17:09:11
12869
2
原创 区块链报错6 | Failed to load resource: the server responded with a status of 404 (Not Found)
系列文章（持续更新）· 欢迎交流 ：区块链DApp从零开始学 (一) | DApp抓包区块链DApp从零开始学 (二) | 超详细 DApp创建 | 发行代币token | 宠物领养区块链DApp从零开始学 (三) | 获得Contract合约实例检查控制台时发现这个问题：Failed to load resource: the server responded with a status of 404 (Not Found)原因就是没部署好但是migrate时候没有提示可能是合约名字.
2021-10-31 17:26:22
890
原创 区块链报错 5 | Contract has not been deployed to detect network (network/artifact mismatch)
系列文章（持续更新）· 欢迎交流 ：区块链DApp从零开始学 (一) | DApp抓包区块链DApp从零开始学 (二) | 超详细 DApp创建 | 发行代币token | 宠物领养区块链DApp从零开始学 (三) | 获得Contract合约实例可能有两个原因：一：没有部署 ，需要 migrate --reset [–all]二：端口问题，即metamask或者私有链端口和合约端口不是一个我出错的原因是部署失败emm，部署失败的提示信息没显红，我没仔细看也没发现hh好多遍后我才发现.
2021-10-31 13:40:44
4660
原创 区块链报错1 | npm run dev 无法解析json格式 | npm ERR JSON.parse Failed to parse json
在我添加了json注释后，报错如下
2021-10-30 23:29:46
921
原创 区块链报错2 | 区块链npm run dev失败lite-server
看了下问题描述，是缺少node_models的依赖包。原因是我unbox命令下载失败，遂使用git下载。然鹅使用git下载的框架不自动安装依赖，问题不大，手动安装下 npm install
2021-10-30 22:39:52
1179
原创 区块链报错3 | truffle unbox 报错 | downloading失败 | unbox failed
可以使用 git clone https://github.com/truffle-box/tutorialtoken-box，替代 truffle unbox tutorialtoken。发现git时也403 time out了，于是修改下hosts
2021-10-30 22:19:51
7182
4
原创 区块链DApp从零开始学 (二) | 超详细 DApp创建 | 发行代币token | 宠物领养
本文由图文覆盖完整细节，可直接根据操作步骤上手。新手搭基础DApp环境，宠物领养demo
2021-10-27 00:58:42
5182
2
原创 区块链DApp从零开始学 (一) | DApp抓包
老师布置了一个任务，要求抓取dapp的流量包，具体任务拆解如下：模拟DApp发送数据，抓取数据包，进行过滤细节需求：① 抓20个DApp的流量，要求每个DApp上有点击操作，每个流量数据500M左右② 要求流量纯净，这需要过滤方法，要自己思考我的思路：首先完成第一步，即创建DApp然后使用抓包软件wireshark等（比较）抓取DApp流量最后搜索流量过滤方法注意事项：虽然最近事情特别特别特别特别多，但是这是老师布置的第一个任务，老师还能记得我，我还挺高兴的，需要尽快、尽快完成
2021-10-26 16:37:49
1306
2
原创 [例题详解]真值 机器数概念 | 原码 反码 补码 移码 概念及加减计算
含大量手写笔记，逻辑清晰，讲解原码、反码、补码、移码等概念，上计算机组成原理课程时候整理的复习笔记
2021-10-25 01:12:12
3557
2
原创 win10下小白安装MikTex+Texmaker详细指南 | 免费资源链接
MikTex官网下载网址ps：官网太慢，我用的资源无脑安装，实在小白参考官网链接无脑安装后，打开配置下：Texmaker官网下载地址ps：官网太慢，我用的资源
2021-10-20 23:38:01
1468
原创 python更改文件名/后缀
晚上写了一个非常简单的小脚本。好了，我又把别人的手机搞坏了，今天我跟手机就是犯冲烦死了功能是在文件名末尾加点东西，如a.png --> a_b.pngimport osflist_base_path = '/home/user/disk4T/dataset/RGB-MFNet_seg_dataset/leftImg8bit/val'flist = os.listdir(flist_base_path)oldFileName = os.path.join(flist_base_path,f
2021-09-03 22:03:07
528
原创 opencv查看图片属性
每次看学长敲代码，当时看懂了，过后就忘了，记录一下。唉，吃个饭的功夫记忆已经在飞速流逝了。记笔记感觉一些分段的可以记在CSDN，但是一些过于细节的东西还是记在word里方便，可以直接查找。今晚的饭好好吃啊，中午的糖醋鱼感觉咋像糖醋里脊呢哈哈。不过好吃就完事了。唉，今天手机被偷了，其实我的手机不值钱的，只是手机壳好看qaq现在七点就天黑了，跟八月份不一样了。这是一段调用opencv查看图片属性的小代码，为了对比两个图片数据集是否类型相同。写在控制台ipython，不得不说配色真好看控制台impo
2021-09-03 19:25:11
686
原创 GeForce RTX 3090无法使用mmsegmentation官方推荐cuda版本
mmsegmentation推荐的是PyTorch 1.6.0 and CUDA 10.1，但是在服务器GeForce RTX 3090上出现warning：GeForce RTX 3090 with CUDA capability sm_86 is not compatible with the current PyTo
2021-09-03 17:05:29
1316
2
原创 myeclipse中项目只显示src|不显示bin等
myeclipse2014windows -> show view -> Navigator
2021-06-19 16:55:05
227
1
原创 每个epoch的准确率总相同
前两天跑代码遇到两个问题：1.没分验证集，直接把测试集当作validation_data放进去，结果测试集准确率每个epoch准确率一直在0.3上，最后发现其真实准确率在0.6上解决：把标签独热一下2.每个epoch的最后一个batch的训练集拟合准确率、训练集loss、验证集准确率、训练集loss全部相同就很奇葩解决：换了loss函数。我做的是二分类问题，之前用的是binary_crossentropy,发现categorical_crossentropy+softmax也可以用于二分类，用了下
2021-04-13 14:45:41
4660
6
原创 You are trying to load a weight file containing 12 layers into a model with
跑神经网络程序的时候有些错误真的有点莫名其妙emm有的时候啥都没动，重跑一遍就出新错误。这时候把这个错误一搁，过上几天就好了emmm今天遇上的错误是：You are trying to load a weight file containing 12 layers into a model with把model.load_weights("./best/AlexNet_0.01_32_200-0.93.hdf5")语句放到model后面不行，放到compile后面不行，随便试最后一次放到model.
2021-01-14 14:07:51
539
原创 keras的ModelCheckpoint保存最佳epoch准确率
今天下午捣鼓一下午捣鼓得头疼，然后睡了一觉再弄弄弄出来了。可能是现在版本更新太快，网上有些东西少有人写或者没有人写。刚开始调用checkpoint根本没有覆盖也没有执行，跟摆在那好看似的。后来改了一下filepathfilepath="model_{epoch:02d}-{val_acc:.2f}.hdf5"好家伙开始报错了，val_acc报错，一搜网上说让把val_acc改成accuracy，然后还不对，我以为是其它加的地方有什么问题，整了半天发现现在版本不叫accuracy了，而是叫val_ac
2021-01-01 17:50:34
1908
3
miktex_texmaker.zip
2021-10-20
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人