ludanwss0716-CSDN博客

原创 python版本管理

Mac上自带python版本为python2.7，可以利用python命令直接查看。由于Mask RCNN模型的训练要求python3.4+版本，周一时我用homebrew安装了一个python3.7版本，并基于该版本利用pip3命令安装了许多第三方包，pip3安装的软件包可在/usr/local/lib/python3.7/site-packages中查看，与此类似，pip安装的软件包在/usr...

2019-08-26 15:27:32 180

原创 bug伴我每一天

1、ValueError: could not broadcast input array from shape (224,224,3) into shape (224,224)solution: png图像是（height, width,4）RGBA而jpg图像是（height, width,3）RGB但转换文件类型无法改变通道数量，需要重新用numpy数组处理或者把占少数的png图...

2019-08-26 15:26:51 221

原创维度灾难与过拟合

1、介绍考虑一个例子，对图片分类为猫、狗两类，通过皮毛的颜色（rgb）设计一个简单的线性分类器：If 0.5*red+0.3*green+0.2*blue>0.6: return cat;else: return dog;发现增加更多特征后，分类器的效果并没有变的一直上升，反而特征数量超过一定值时分类器效果下降，即“维度灾难”。 ...

2019-08-26 15:24:16 712

原创目标检测问题中的评估指标mAP

1、为什么是mAP二元分类中，精确度和召回率是常用的评估指标。但是在目标检测问题上，不仅需要检测到图片中的物品种类，还需要正确定位，因此不能简单的使用以上评估值计算，而是使用mAP评估，mAP在图像定位、目标检测和语义分割问题上都是重要指标。2、相关定义2.1 Ground TruthGround truth即真实标签数据，包括训练、验证和测试数据集的ground truth。在目...

2019-08-26 15:17:18 835

原创机器学习模型三大评估指标：准确率、精度、召回率

1、混淆矩阵二分类任务中用准确率、精度和召回率三大指标评估模型性能，在介绍这些概念之前先介绍混淆矩阵的概念。二分类的混淆矩阵包含四个值：真正例（TP）、假正例（FP）、真反例（TN）、假反例（FN）。如果将一个数据点预测为正例，但它实际是反例，那么它就是一个假正例。混淆矩阵真实值 Positive Neg...

2019-08-26 15:08:43 3390

原创《百面机器学习》读书笔记

1、特征工程数据和特征决定了结果的上界，模型、算法的选择及优化则是在逐步接近这个上界。特征工程旨在去除原始数据中的杂质和冗余，设计更高效的特征以刻画求解的问题与预测模型之间的关系。结构化数据 & 非结构化数据1.1why特征归一化线性函数归一化：对原始数据线性变换使结果映射到[0,1]范围零均值归一化：映射到均值为0，标准差为1的分布上如果不归一化，两种数值特征...

2019-08-26 15:03:49 197

原创 tensorflow模型压缩

1、下载tensorflow源码，并用bazel编译git clone https://github.com/tensorflow/tensorflow.gitbazel build tensorflow/tools/graph_transforms:transform_graphbazel build tensorflow/tools/quantization:quantize_gra...

2019-08-26 15:01:53 383 1

原创 Tensorflow01：简单线性模型

1、一个Tensorflow图由以下几个部分组成：占位符变量（Placeholder）用来改变图的输入。模型变量（Model）将会被优化，使模型表现的更好。模型本质上就是一些数学函数，它根据Placeholder和模型的输入变量计算一些输出。一个cost度量来指导变量的优化。一个优化策略会更新模型的变量。 2、Placeholder...

2019-08-26 14:59:50 124

原创 hive函数

1、以取top5为例用法 : select row_number() over(partitionbynameorderbyXXdesc) rmp from XXX rank() 排序相同时会重复，总数不会变 1 2 2 4 5 dense_rank()排序相同时会重复，总数会减少 1 2 2 3 4 row_number() 会根据顺序计算 ...

2019-08-26 14:58:41 162 1

原创 FTRL-Proximal

Ad Click Prediction: a View from the TrenchesABSTRACT广告点击率预测是一个大规模的学习问题，对数十亿美元的在线广告行业至关重要。我们从部署的CTR预测系统的设置中提供了一些案例研究和从最近的实验中提取的话题，包括基于FTRL-Proximal在线学习算法(具有出色的稀疏性和收敛特性)以及使用每个坐标学习率的传统监督学习语境的改进。我们...

2019-08-26 14:55:23 340

原创 MobileNet v1

MobileNets: Efficient Convolutional Neural Networks for Mobile Vision ApplicationsAbstractMobileNets是用于移动和嵌入式视觉应用的高效模型。MobileNets是基于流线型架构，使用深度可分离卷积来构建轻量级深度神经网络。论文介绍了两个简单的全局超参数，可以在延迟和准确度之间有效折中。这些...

2018-12-03 20:16:23 396

原创 Deeplab v1

Semantic image segmentation with deep convolutional nets and fully connected CRFsAbstract高级视觉任务：图像分类、目标识别低级视觉任务：语义分割（像素级分类）、姿态估计深度卷积神经网络（DCNNs）在高级视觉任务中展示了最优的性能，本工作将DCNN中的方法与概率图形模型（probabilisti...

2018-12-03 19:59:45 2011

原创 [leetcode][4]Median of Two Sorted Arrays

ProblemThere are two sorted arrays nums1 and nums2 of size m and n respectively. Find the median of the two sorted arrays. The overall run time complexity should be O(log (m+n)).Example 1: nums1 = [1,

2017-12-31 10:39:13 106

原创 [leetcode][3]Longest Substring Without Repeating Characters

ProblemGiven a string, find the length of the longest substring without repeating characters.Examples: Given “abcabcbb”, the answer is “abc”, which the length is 3. Given “bbbbb”, the answer is “b”,

2017-12-30 15:55:31 111

原创在Linux下用QtCreator编译C++源码

前言昨天折腾了一天，要把在Visual Studio上的一个C++工程到Linux系统上编译，简单的C++程序直接写makefile或者g++命令行编译，但是这个工程有十几个cpp文件和h头文件，互相之间有依赖关系，还要依赖boost库，makefile会很复杂也费时，最终借助Linux下的一款叫QtCreator的IDE编译成功了，QtCreator比Clion编译更快。总结一下一些小经验，方便其

2017-12-26 22:04:43 6765

原创 [leetcode][2]add two numbers

ProblemYou are given two non-empty linked lists representing two non-negative integers. The digits are stored in reverse order and each of their nodes contain a single digit. Add the two numbers and re

2017-12-26 11:24:18 114

原创 [leetcode][1]two sum

ProblemGiven an array of integers, return indices of the two numbers such that they add up to a specific target.You may assume that each input would have exactly one solution, and you may not use the s

2017-12-26 10:57:46 94

原创 [leetcode][361]bomb enemy

ProblemGiven a 2D grid, each cell is either a wall ‘W’, an enemy ‘E’ or empty ‘0’ (the number zero), return the maximum enemies you can kill using one bomb. The bomb kills all the enemies in the same r

2017-12-25 23:15:25 260

ludanwss0716的博客