Donneyming的专栏

原创 C# Qlearning 与SARSA（二）

Console.WriteLine("\n Agent 由 {0} 号房间移动到了 {1} 号房间\n", current_state, next_state);// 这里相当于python中的 np.argmax()函数，即当 np.argmax(f(x))中的f(x)取最大值的时候输出 x 的取值大小。Console.WriteLine("\n Agent 在 {0} 号房间开始移动了 {1} 步到达了目标房间\n", mR, step);// 这里是进行测试，依据训练好的Q值，选择动作。

原创 C# Qlearning 与SARSA（一）

Console.WriteLine("\n Agent 由 {0} 号房间移动到了 {1} 号房间\n", current_state, next_state);Console.WriteLine("\n Agent 在 {0} 号房间开始移动了 {1} 步到达了目标房间\n", start_room, step);// 这里相当于python中的 np.argmax()函数，即当 np.argmax(f(x))中的f(x)取最大值的时候输出 x 的取值大小。//γ，折损率，取值是 0 到 1 之间。

原创 MAC 10.10.5编译opencv3.0（java版本）

1、命令行中输入，该作者已经完全配置好了相关的库git clone git://github.com/Itseez/opencv.gi2、到当前文件夹下创建build文件夹mkdir build3、转入 build cd build4、进行 cmakecmake -DBUILD_SHARED_LIBS=OFF ..5、编译make -j8出错的话ld

原创 认真准备考博士了，以此做鉴

认真准备考博士了，以此做鉴。今天走到学院，碰到孙世新老师，孙老师说要好好选定方向，找一个可以指导的老师，多看论文，每周看一篇英文论文，坚持下去，挤出时间做科研，这样就可以博士毕业了。谢谢孙老师，我也不能再水了。

原创 一个桌面软件

http://download.csdn.net/source/3231402自己找点乐子吧 ~

原创 windows mobile的音视频采集传输

<br />毕设是基于windows mobile的音视频采集传输<br />现在才学会了写dshow 在windows mobile 6上面，发现工作量还是很大，<br />首先 264编码的移植，声音的处理还是稍微容易些，其次是jrtp的移植，哎恼火啊。要是有人一起做就好了~

原创 wince平台把jrtp封装到了一起，希望有同仁帮忙测试指导下

调试时正常的，但是抓包就不正常。在wince平台，jrtp都封装好了，但是就是不出包，郁闷。windowsmobile6平台，谢谢指导、

原创 使用netty思考

按照常理：创建一个java Server：首先启动一个ServerBootstrap ，bind返回一个Channel，这样就可以在这个绑定的Channel上监听数据存在的疑问：如果该Server要连接多个其他Server，是怎么管理的呢，bind 端口，然后返回一个Channel，根据该Channel要连接多个Server，好像不得行...

原创 (ｊａｖａ)snmp 管理中心程序简单分析，欢迎拍砖

snmp 管理中心程序简单分析，欢迎拍砖

这两天看了些 ，还是比较蒙，所以写下来，希望指得指导。首先作为管理中心，需要可以配置oid，我的理解就是一连串字符，每个对应着一个MIB，即就是一种固定格式的文件。其次可以发一些命令，如get、set这些，还要处理trap报文，都可以采用线程的方式，打算用snmp4j开发，不过这块还是有些迷惑。第一：snmp4j处理get、set好像支持同步、异步的方式，既然支持异步，那我还需要多线程...

原创 vc++ 编译出错

原创 想问下怎么在类里面写线程

原创 想写个日志类

 class LOG { public：   void WriteLOG（）； static LOG* GetInstance(); }; 想把__LINE__,__TIME__,__DATE__，__FUNC__这些宏在LOG里面得以体现，不知道有没有好的建议~