- 博客(11)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 算法实习面经
你说这样做会让数据不平衡问题得到缓解，为什么？根据人脸识别那篇文章，但是原理非常复杂。我以后还是不提这个了吧，只说这样精度会更高。根据ArcFace那篇文章来。即线性决策边界，线性margin。解释一下SIFT的算法流程？SIFT为什么具有尺度不变性、旋转不变性、亮度不变性？SIFT有4个主要步骤：a. 建立高斯差分金字塔：通过降采样的方式得到多个组，每个组里是由不同的sigma的...
2020-09-15 14:56:27
401
原创 关于机器学习需要知道的基础知识(持续更新)
机器学习的数学理论基础已经可作为我的一本资料书，里面有很多了解但是没有吃透的东西，需要记忆、理解。目前我正按照牛客网面试知识点总结的目录，来复习、整理我所欠缺的知识。面试中各种问题的比例如下图，可见机器学习算法、深度学习算法、算法与数据结构非常重要。算法：各种优化算法：SGD，Adam等sigmoid和softmax交叉熵损失函数L1不可导怎么办？坐标轴下降和近端梯度下降PCA...
2020-03-16 18:20:47
399
1
原创 LeetCode的解题思路、代码总结
本人是准备找实习的研二研究生，选择LeetCode作为我的题库。因为在github上分享代码更加方便，请参考我的LeetCode_Practice，完全自创。将在我找到理想的实习之前不断更新，如果有帮助到你可以点一下star。...
2020-03-13 16:07:18
725
原创 git的简要理解
前言在科研的道路上我们会不可避免的接触到GitHub并会对它产生依赖。虽然说“代码搬运工”这个词并不好听，但是我仍觉得在GitHub上找寻开源的代码并在其基础上改进，对我们的科研进度会有大大的提升，所以我始终觉得这是个利大于弊的事。但是Git的作用并不只是让大家分享自己的代码，它还是一个非常强力版本控制器。最近在用Latex撰写论文的时候，老师就让我用git来share我的latex文档。一开...
2020-03-13 15:57:32
231
原创 nni调参结果记录
Resnet20结构下，用CIFAR10数据集：搜索空间为{ "beta":{"_type":"choice","_value":[5e-3, 1e-3, 5e-4, 1e-5, 5e-5]}, "lr":{"_type":"choice","_value":[0.1, 0.2, 0.15, 0.25]}}其他参数batch_size = 128epoch = 200...
2019-09-24 21:16:24
588
原创 微软自动调参工具—NNI—安装与使用教程（附错误解决）
简介NNI是微软的开源自动调参的工具。人工调参实在是太麻烦了，最近试了下水，感觉还不错，能在帮你调参的同时，把可视化的工作一起给做了，简单明了。然后感觉很多博客写的并不是很明白，所以打算自己补充一下。如果觉得解决了你的一些问题，请收藏关注。本文分为以下两个部分：如何安装并使用NNI调试经验 & 错误汇总第一步：安装nni的安装十分简单。通过pip命令就可以安装了。并且提供了...
2019-09-20 00:54:03
20102
71
原创 WGAN学习心得
参考资料：令人拍案叫绝的Wasserstein GAN - 郑华滨1.原始GAN问题：梯度消失：根据原始GAN定义的判别器loss，我们可以得到最优判别器的形式；而在最优判别器的下，我们可以把原始GAN定义的生成器loss等价变换为最小化真实分布与生成分布之间的JS散度。我们越训练判别器，它就越接近最优，最小化生成器的loss也就会越近似于最小化和之间的JS散度。但是真实分布和生成分布可能没...
2019-09-03 16:17:03
701
原创 关于mode collapse的学习日志
终于开始接触机器学习相关的项目了，和博士师兄谈话后发现项目是GAN，安心了一点，GAN也是自己之前接触过的。之前只知道生成出来的结果多样性少，今天得知了一个新词"mode collapse"(模式坍塌)，指的是生成器产生的结果很单一，仅仅只是为了得到最低的判别器损失D_loss，却忽视了数据集的分布。根据今天的谈话内容整理以下待解决的问题：1.数学角度深入了解分布(学长是学概率的，没办法)...
2019-09-03 14:43:15
3349
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人