自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(53)
  • 资源 (5)
  • 收藏
  • 关注

原创 cmake构建的C项目中调用了C数学库却无法构建成功的解决方法

linux系统下使用cmake构建项目,该项目调用了C数学库函数,总是构建失败,怎么解决?

2024-04-15 11:23:50 210

原创 数字EDA研究之Yosys简介

开源逻辑综合工具-Yosys简介

2024-03-20 17:05:10 922

原创 deepin系统下创建应用程序桌面快捷方式的bash脚本

该脚本展示了如何在deepin系统下创建应用程序快捷方式的脚本的用法。

2024-03-05 21:54:12 464 4

原创 为什么在python虚拟环境下执行pip install无法在虚拟环境下安装第三方包?

使用pip在虚拟环境下安装扩展库所遇到的问题及其解决。

2024-03-04 16:43:41 401

原创 latex宏包pythontex使用简明手册

如何在latex中插入python代码并执行代码,显示输出结果?pythontex提供了将latex文档创作的强大功能与python的编程强调功能相结合的方法。

2024-03-02 19:20:27 965

原创 linux系统下latex排版系统最新版发行包texlive2023的完全安装指南

如何在linux系统(如deepin、uos等)下从零开始安装latex排版系统texlive的最新版?这个过程涉及到软件的下载、一步步安装、测试、启动latex的学习之旅的整个流程。本文将带你完整地执行该流程,是你能尽快学会使用Latex。

2024-02-28 16:26:47 1096

原创 linux平台下latex中最简单的加粗楷体/仿宋等中文字体的方法

deepin for linux 下latex文档中的中文字体加粗问题的最简单解决方案

2024-01-24 11:31:25 621

原创 22. 离线MC强化学习算法(1)

深入理解重要性采样定理,对于离线MC强化学习至关重要。本篇介绍了重要性采样定理,并推导了离线MC强化学习中如何根据采样策略获得的轨迹数据,估计待评估策略的行为值函数的数学公式。

2024-01-22 22:45:28 1256

原创 如何使用jabref向gvim插入参考文献引用

介绍了如何在gvim编辑器编辑tex文档时随时使用jabref插入参考文献引文的步骤。

2024-01-20 10:15:32 874

原创 2. FPGA的电路结构概述

FPGA的电路结构总体概述。

2024-01-17 21:35:43 1029

原创 2. 分享三篇早期的FPGA 布局布线论文

分享一下早期的有关FPGA布局布线的论文。对入门该研究领域的读者有一点作用。

2024-01-17 14:08:29 625 4

原创 1. FPGA概述

什么是FPGA?为什么要学习它?学习它的先决条件是什么?

2024-01-14 23:02:52 493

原创 21.在线与离线MC强化学习

在线与离线蒙特卡洛强化学习的基本概念,进一步分类。

2024-01-14 14:49:50 1287

原创 20. 完整的蒙特卡洛强化学习算法

本篇给出较为完整的MC强化学习算法框架,主要采用面向对象方式描述环境和算法。这可以使我们从整体上把握MC强化学习的精髓。在这个基础上,又引出了新的问题。

2024-01-13 20:53:53 394

原创 19. 蒙特卡洛强化学习之策略控制

蒙特卡洛强化学习中的策略控制是什么?如何改进策略?完全贪心算法缺陷在哪里?部分贪心算法如何体现了利用与探索的基本思想?

2024-01-12 11:20:41 1090

原创 18 .蒙特卡洛强化学习之增量式策略评估

蒙特卡洛策略评估中行为值函数估计的增量式算法

2024-01-11 18:39:21 977

原创 17.蒙特卡洛强化学习之批量式策略评估

使用批量处理,如何根据完整轨迹估计值函数,有哪两种基本方法?

2024-01-11 11:26:36 1000

原创 16. 蒙特卡洛强化学习基本概念与算法框架

什么是蒙特卡洛强化学习?为了理解它,需要深入理解哪些基本概念?蒙特卡洛强化学习的形式化描述。

2024-01-11 09:06:32 933

原创 15. 蒙特卡诺简介

简要地介绍了什么是蒙特卡诺,它有何独特之处。

2024-01-10 18:59:47 833

原创 14-一段插曲:强化学习扩展库-gymnasium简介

强化学习扩展库-gymnasium简介。

2024-01-06 00:07:35 981

原创 13. 强化学习编程实验1-在格子世界中寻宝

本文介绍了第1个强化学习编程实验,在格子世界中寻宝的基本需求,程序设计的基本架构。

2024-01-06 00:02:52 1033

原创 python虚拟环境及其在项目实践中的应用

python虚拟环境在实际开发中的作用及如何创建

2023-12-25 21:02:24 924

原创 12. 动态规划之值迭代

值迭代的动态规划法。

2023-12-23 12:13:51 122

原创 11. 动态规划之策略迭代

策略迭代算法原理及其流程图

2023-12-23 09:24:30 875

原创 10.动态规划之策略改进

动态规划中的策略改进原理及公式。

2023-12-22 11:13:33 988

原创 9.动态规划之策略评估

动态规划中的策略评估环节。

2023-12-22 10:21:38 30

原创 8. 动态规划简介

介绍了动态规划是什么,与马尔科夫最优决策过程的关系。

2023-12-22 09:32:41 30

原创 7. 最优策略

什么是最优策略,已知最优值函数或最优动作值函数,如何求最优策略的基本思路是什么?

2023-12-21 19:09:02 74

原创 6. 贝尔曼方程

什么是贝尔曼方程?它有哪些表达式形式?它有何意义?

2023-12-20 10:55:13 78

原创 如何使用智能表格取代纸质表格记录教学过程的传统方式?

传统的纸质表格记录教学过程中的学生表现,已经不合时宜了,利用智能表格,可以让教师告别教学烦恼,省心、省时、省力!!!

2023-12-14 11:38:50 81

原创 5. 马尔科夫决策过程

什么是马尔科夫过程?它和强化学习有何关系?它涉及到哪些必须理解的概念?

2023-12-11 23:01:07 68

原创 4. 强化学习的重点概念

强化学习的重点概念:学习与规划,探索与利用,预测与控制

2023-12-10 22:49:40 75

原创 3. 强化学习的分类

强化学习算法分为哪些类别

2023-12-10 21:01:12 63 1

原创 1. 强化学习简介

什么是强化学习?它与其他机器学习方法有何不同

2023-12-10 20:13:28 97 1

原创 2 强化学习中的智能体的组成

智能体的构成是什么?构成智能体的要素分别具有什么意义?这些要素如何定量描述?

2023-12-10 17:46:38 133 1

原创 试图用vim取代IDE,真的有点难,怎么办?

对于VIM,我的关于它能取代IDE的幻想已经破灭,它还是回到它擅长的地方吧,可以成为IDE的贤内助。

2022-10-29 09:20:40 609 1

原创 deepin linux系统动态链接库搜索路径的管理

deepin linux下动态链接库问题的解决方案。

2022-08-08 11:53:34 197

原创 第1章 初识wxWidgets

本章对于初学者非常重要,有助于初学者从总体上把握wxWidgets应用开发的基本原理、基本概念。

2022-08-07 14:09:23 1782

原创 deepin平台下使用codeblocks进行C/C++应用开发指南

本文介绍国产开源桌面操作系统deepin(UOS也可,它是deepin的商业版)下如何搭建C/C++ 应用开发环境。deepin用的是Qt开发的。我个人认为Qt是重量级IDE,其商业味过重,我还是偏向于完全用c++开发的开源IDE—codeblocks。很多C/C++初学者在大学时就是用它来入门编程。不要以为它很简陋,它的强大超乎你的想象。...

2022-08-06 23:30:00 1572

原创 deepin 20.6系统下GTKMM+CPP+Codeblocks开发环境搭建

如何在不影响当前windows系统情况下使用该系统?通过wmware虚拟机进行安装。具体请百度。GTKMM: GTK的C++语言绑定库,目前已经发展到4.0版本,它是linux下最流行的桌面GUI库之一。CodeBlocks:跨平台的C/C++ IDE, windows、linux都支持。它让我们在QT、vs这些过重的IDE之外,有了新的选择。而且不受版权影响。开源嘛。...

2022-08-05 21:20:14 797

deepin系统下创建应用程序桌面快捷方式的脚本

该脚本下载后,双击即可执行,根据提示即可创建linux下,特别是基于debian的系统(如国产的deepin ,uos系统)下的应用程序的快捷方式。

2024-03-05

linux系统下(如uos,deepin,麒麟等)vim最常用插件一键式配置及安装

vim插件管理是一件繁琐的事情,涉及到插件管理器(如VundleVim/Vundle.vim)的安装和.vimrc文件的配置,特别是插件很多来自github,下载慢,繁琐,虽然网上资料 一堆堆,但有了我这个资源,你就一键轻松搞定。 该资源收录了我个人(也是其他开发者)最经常使用的vim插件: nerdtree,vim-markdown,vim-tex,supertab 以及自定义的快捷键。 即使你是新手,也能根据这个资源中的说明,1分钟内搞定。 注意:我这里针对的是linux系统,对于windows系统需要稍作修改,那个你自己摸索 我已经不使用windows系统好久了。 注意:使用说明中提到linux系统主目录,就是home目录(家目录)

2024-01-18

环境动力学已知条件下策略迭代与值迭代的强化学习算法

1. 这是作者花费一周的时间,使用python写出的策略迭代和值迭代强化学习算法,以一个完整的项目发布,为解决“已知马尔科夫决策过程五元组,求最优策略”这类问题提供了算法与通用框架 2. 项目采用面向对象架构和面向抽象编程,用户可以在抽象类基础上,利用继承机制,定义新的具体环境类,测试该算法的有效性。项目还给出了unittest.Testcase的测试代码。 3. 在该项目中算法名称分别对应类:ValueIterationAgent和PolicyIterationAgent(都继承自MdpAgent),马尔科夫决策模型已知的环境抽象类MdpEnv 4. 为展示该算法的有效性,定义了一个GridWorldEnv的具体类,实现了作者博文中“在格子世界中寻宝”的最优策略的学习,并定义了一个GridWorldUI类可视化最优策略及基于最优策略的,用户可以运行住文件main.py 5. 该项目源码的最大特点是:架构合理,可维护性好,可读性强。你不断能学到这两个强化学习算法的精髓,也能够学到什么是好的python程序架构。 6.注意先阅读里面的readme.txt文件。

2024-01-15

快速学会latex电路原理图绘制

本文分享了笔者如何快速掌握latex电路原理图绘制的经验,希望对你有用。

2023-03-07

Deepin-Linux学习笔记

本文对linux环境下的面向开发者的基础知识进行了较为系统的介绍,对从windows转向linux的读者,很有帮助。

2022-09-09

deepin linux 下的网络下载工具“我要下载"-能下载浏览器/迅雷下载失败的文件

这是我用linux脚本写的网络下载工具(linux shell脚本),把“我要下载”这个文件复制到/usr/bin目录下,并在命令行下允许如下命令以修改该文件的权限: sudo chmod +x /usr/bin/我要下载 之后,在终端下运行如下命令即可启动程序进行网络文件的下载: $ 我要下载 已经测试:迅雷下载失败的文件,这个工具可以成功,浏览器下载中途失败的网络文件,这个工具可以下载成功。

2022-09-01

deepin-linux+python虚拟环境下程序如何一键运行?

假设我们使用venv工具创建了一个python虚拟环境,并在此虚拟环境下开发了一个程序,主模块文件名为“anchor-box”。如何方便快捷地运行这个程序?

2022-08-23

如何在python idle中能够一键清屏.zip

python idle 清屏

2021-03-03

Java GUI程序开发插件-WindowBuilder简介.pdf

本文系统地介绍了Java平台下开发GUI程序的一个重要插件:WindowBuilder的基本功能、安装要点、基本用法。

2021-02-03

我实现的用于调用客户端播放器的类--gcjPalyer

一个用于实现网页音频播放的javascript类,对windows media player的方法进行了封装,使用上非常方便,希望对从事网站开发的人员有用。

2011-05-11

经验总结-asp.net程序中如何使用swfupload进行大文件上传

本人呕心沥血的经验总结,如何使用swfupload进行大文件上传,用户可以不用编写任何程序,就能实现上传,里面附有完整的使用步骤:1,2,3及笔者自行开发的类和典型应用实例,使用上非常方便。欢迎下载!

2010-06-04

我所见过的功能最强大的有源滤波器设计软件-filter design wizard

该软件用于设计有源滤波器,只要给定设计指标,就可用求得由实际元器件构成的滤波器。

2009-09-13

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除