u013717571的博客

原创 CTR 预估中的校准

原创 推荐系统_10 DeepFM模型原理及实现

原创 推荐系统_09 Deep&Cross模型原理及实现

原创 推荐系统_08 Wide&Deep模型原理及实现

原创 推荐系统_07 Deep Crossing模型原理及实现

原创 推荐系统_06 双塔模型原理及应用

继上篇embedding讲解之后，本文主要讲解了embedding在推荐模型召回层上的应用，其中包括双塔模型结构，和双塔模型作为召回的具体实现demo代码见：https://github.com/WUYvonne/model_zoo/tree/main/DSSM...

原创 推荐系统_05 从Embedding开始进入深度学习

原创 推荐系统_04从FM到FFM(下篇)

FFM原理简介

原创 推荐系统_03从FM到FFM(上篇)

1、FM模型原理2、FM模型损失函数关于损失函数可参考：​​​​​​【机器学习】log loss、logistic loss与cross-entropy的关系_littlemichelle-CSDN博客3、FM模型训练4、手动实现FM二分类例子代码中使用的是随机梯度下降法：Git地址：https://github.com/WUYvonne/model_zoo/tree/main/FM参考文档：https://zhuanlan.zhihu.c...

原创 推荐系统_01推荐系统架构

如果数据量小，推荐策略不需要太复杂，一般情况，没有百万级用户不需要推荐。推荐系统中包括两个主要模块，召回和精排。召回：从百万甚至千万级别物品中快速，全面的迭代出百级别的候选物品，数据候选集大，模型特征简单，考虑时间开销和时效性，所以一般采用多路召回。精排：对召回结果进行精细化打分，推荐给用户，一般使用复杂的模型和特征。一、从系统架构方面考虑，分为离线和在线部分 离线架构 （1）内容源的收集与规范，（如淘宝的商家上架的物品，头条中的文章（一般需经过人工审核后进入非结构化数据库..

原创 推荐系统_02协同过滤

写此专栏，是为了总结我对推荐系统这块的学习路线，从机器学习到深度学习的演变，包括文档演示和具体代码。（图一）我画了一个思维导图，如图一所示，这一小节，先介绍协同过滤，代码地址：model_zoo/CF at main · WUYvonne/model_zoo · GitHub共现矩阵定义如下：共现矩阵（5个用户评价了6个商品，评分为1~10的整数值，0表示评分不存在） 　 item_id item_1 item_2 item_3 item_4 i.

原创 tensorflow学习笔记：交叉熵计算

多目标，多分类问题多目标又指多类别分类，即每个类别相互独立，但不互斥，如一幅图中同时包括几种动物。多分类又指单类别分类，即每个类别之间是相互独立且互斥，不可同时发生，如一幅图只能属于一类动物。代价函数可用于评价模型预测值与真实值之间的差距，常见的代价函数为均方误差（MSE）。在分类问题中，使用交叉熵作为代价函数。交叉熵的基本概念，计算例子以及为什么交叉熵可以用来作为代价函数可参考这篇文章：http...

原创 浅谈优化方法

荒废很久，还是重新拾起来吧！学如逆水行舟，不进则退！浅谈优化方法优化方法这块说难也不难，在tf中调用方法即可，但说简单并不简单，理解其中原理，会更有助于在平常工作中使用哪种优化方法。以下是我组内分享时整理的ppt，文章中大部分的内容是来自于李沐的《动手深度学习》，再加了一些自己平常看这些方法时的问题的解释。欢迎大家评论交流。本文涉及的算法包括以下5个方法，其中梯度下降法只做了简单的介绍：1.梯度下降法2.动量法3.AdaGrad算法4.RMSProp算法5.Adam算法

原创 2021-01-23

一转眼三年了，荒废了好久，还是要有持续性学习和更新啊！加油啊！

转载 (转载）约束优化方法之拉格朗日乘子法与KKT条件

原文地址：https://www.cnblogs.com/ooon/p/5721119.html

原创 基于Win7，python3.5 安装keras，以及安装时遇到问题的解决办法

Keras 是一个兼容 Theano 和 Tensorflow 的神经网络高级包, 可以用他来快速组件一个神经网络。有了tensorflow或者theano基础后，便可以学习使用keras，让神经网络的搭建更加容易。学习keras的基础知识，可以参考官方中文文档：http://keras-cn.readthedocs.io/en/latest/ 这边总结一下我在配置环境时遇到的一些坑。基于Win7...

原创 tensorflow学习：交叉熵计算

这是一篇学习tensorflow的日常记录，最近遇到了交叉熵计算问题，于是整理出来方便以后查阅，看到的朋友如有发现错误，请指正！-------------------------------------------------------------------------------------------------------------------------------先明确一个定义：多...

原创 TensorFlow学习：卷积层conv2d参数

卷积层参数解释tf.nn.conv2d(input,filter, strides, padding, use_cudnn_on_gpu=bool, data_format，name=None)input：指定需要做卷积的输入图像，输入要求为一个4维的Tensor，要求输入类型为float32或者float64。输入的shape为[batch, in_height, in_width, in_ch...

转载 TensorFlow学习：多线程训练

最近在学TensorFlow，在此把学到的东西记录一下。在学习别人代码时，遇到多线程训练的问题，代码截取部分如下：image, label = ReadMyOwnData.read_and_decode("dog_and_cat_train.tfrecords")sess = tf.InteractiveSession()tf.global_variables_initializer().ru...

原创 Windows下安装MySQLdb（python2.7）

记录我在安装MySQLdb时遇到的问题要通过python连接mysql数据库，需要安装MySQLdb模块，该模块在MySQL-Python包中，因此，需要安装MySQL-Python包。我的电脑64位，python是2.7版本。安装步骤：（1）打开Anaconda prompt，输入pip install MySQL-Python（2）接着在python中输入import MySQLdb，如果不报...

原创 过拟合解决方法

参考文章：http://blog.csdn.net/heyongluoyao8/article/details/49429629https://www.zhihu.com/question/59201590/answer/167392763http://blog.csdn.net/willduan1/article/details/53070777该文旨在解决建模时遇到过拟合问题，查阅了网上的一些...

原创 数据预处理，特征选择方法整理

数据进入模型之前，通常都需要进行预处理和特征选择，在查看了一些资料，借鉴他人的一些经验总结后，我将这些方法整理好，并写成函数，方便以后调用，也是对自己的学习和工作做了一个小总结，如有错误还请留言指正！'''统计数据中的空值比例'''def cal_null_info(input_data, *null_threshold): ''' 输入：需要处理的数据（为一个dataframe），可...