巫山云的专栏

原创 信贷风控中如何定位基站位置

1，手机上能够获取的与基站相关的信息：网络制式：GSM、WCDMA、CDMA、TD-LTE、FDD-LTETD-LTE是目前移动运营商使用的4G网络制式；FDD-LTE是联通和电信运营商采用的4G网络制式；CDMA是中国电信采用的2G网络制式；GSM是中国移动和联通使用的2G网络制式。除此以外，其它的移动通信技术还有：TD-SCDMA是移动的3G网络，WCDMA是联通的3G网络；CDMA2000是电信的3G网络。四个编码参数：MCC — Mobile Country Code：.

原创 薄底培根披萨

培根披萨记录生活的乐趣，比如烤一次培根披萨材料主料：薄底披萨饼、培根两条辅料：培根两条、披萨酱、马苏里拉奶酪碎步骤

原创 卤牛肉

电饭煲版卤牛肉记录生活的乐趣，比如卤一次牛肉材料主料：牛腩配料:大料、花椒、干辣椒、小茴香、香叶、陈皮、桂皮、葱、姜、蒜、冰糖、大枣、枸杞老抽、料酒、生抽、老卤水（卤制完成后，留取一部分）步骤...

原创 普罗旺斯羊排

普罗旺斯羊排记录生活的乐趣，比如做一次菜食材准备主料：法式小羊排辅料：面包糠适量大蒜2瓣西餐香料适量：迷迭香、罗勒叶、百里香橄榄油、黄油适量白葡萄酒黑胡椒粉（现研磨）盐步骤...

原创 python中如何对列表进行排序

@TOC# python中如何对列表进行排序文章目录前言一、使用List成员函数List.sort()二、使用内置函数Sorted()三、使用Heapq-堆队列算法前言list是python语言中经常使用的数据类型，在代码实现中，会经常涉及到对其进行排序处理，这里对经常使用的一些方法进行了总结。一、使用List成员函数List.sort()>>> help(list.sort)Help on method_descriptor:sort(...) L.sort

转载 用conda创建python虚拟环境

1、首先在所在系统中安装Anaconda。可以打开命令行输入conda -V检验是否安装以及当前conda的版本。2、conda常用的命令。    1）conda list 查看安装了哪些包。    2）conda env list 或 conda info -e 查看当前存在哪些虚拟环境    3）conda update conda 检查更新当前conda3、创

原创 如何实现tensorflow serving的离线安装

公司服务器无法直接连接外网，所以只能在本地进行下载或者变编译后，上传服务器，实现tensorflowserving的离线安装。本安装方法适用于centos、RHEL系统，建议使用最新版操作系统，避免后续升级gcc或者安装各种最新插件的烦恼。1安装grpchttps://pypi.org/上下载最新版grpcio安装所需插件，下载完成后上传服务器安装即可，具体可根据g

原创 libstdc++.so.6 version GLIBCXX_3.4.19 not found

RHEL系统中，编译一些软件会出现libstdc++.so.6version 'GLIBCXX_3.4.19' not found的报错，错误出现的原因是因为操作系统版本太低了，需要对一些插件进行升级。[root@bogon build]# strings/usr/lib64/libstdc++.so.6|grep GLIBCXXGLIBCXX_3.4GLIBCXX_3.4.1GL

原创 增加centos虚拟机磁盘空间

最近一直在编译、安装一些tf部署相关的软件，发现磁盘空间不够用了，选择增加磁盘空间：1，关闭VMware中对应的centos虚拟机后，编辑配置选项，拓展磁盘空间；2，开机进入虚拟机：[root@bogon marshall]# fdisk /dev/sdaWelcome to fdisk (util-linux 2.23.2). Changes will

原创 在python中使用评分卡技术

最近发现了一款使用python实现的评分卡相关技术的插件woe，这里总结分享一下。项目网址：https://github.com/boredbird/woe，安装方式十分简单，直接使用pip安装即可：pip install woe或者pip installgit+https://github.com/boredbird/woe一、 相关概念1.1   最优分组最优分组或者最

原创 熵、交叉熵、相对熵和sparse autoencoder

原创 Centos系统安装spark单机版

1， 配置JAVA_HOME通过yum等方式，可以安装最新的java版本（yum install java）。安装完java后，我们需要配置JAVA_HOME，首先要确定jdk安装的位置：[root@bogon marshall]# which java  /usr/bin/java[root@bogon marshall]#   [root@bogon marshall]# ls -lrt/us...

转载 深度学习训练技巧必读（转载）

Must Know Tips/Tricks in Deep Neural Networks (by Xiu-Shen Wei) Deep Neural Networks, especially Convolutional Neural Networks (CNN), allows computational models that are compo

原创 tf.train.Optimizer.minimize

官方文档如下：tf.train.Optimizer.minimize(loss, global_step=None, var_list=None, gate_gradients=1, aggregation_method=None, colocate_gradients_with_ops=False, name=None, grad_loss=None)Add operations t

转载 Practical Lessons from Predicting Clicks on Ads at Facebook

ABSTRACT这篇paper中作者结合GBDT和LR，取得了很好的效果，比单个模型的效果高出3%。随后作者研究了对整体预测系统产生影响的几个因素，发现Feature（能挖掘出用户和广告的历史信息）+Model（GBDT+LR）的贡献程度最大，而其他因素（数据实时性，模型学习速率，数据采样）的影响则较小。 1. INTRODUCTION介绍了先前的一些相关paper。包括G

转载 CTR预估中GBDT与LR融合方案

原文链接：http://blog.csdn.net/lilyth_lilyth/article/details/480321191、 背景      CTR预估（Click-Through Rate Prediction）是互联网计算广告中的关键环节，预估准确性直接影响公司广告收入。CTR预估中用的最多的模型是LR（Logistic Regression）[

转载 AI在蚂蚁金服产品线中的大规模应用

近日，蚂蚁金服副总裁兼首席数据科学家漆远博士发表了主题为《金融智能的发展与应用》的演讲。漆远表示，蚂蚁金服今年的两个关键词，一个是“开放”，一个是“AI（人工智能）”。在此次演讲中，漆远从风控系统、智能助理、定损宝等产品案例出发，全面介绍了蚂蚁金服产品背后的人工智能技术。以下为蚂蚁金服副总裁兼首席数据科学家漆远博士的演讲精华整理。金融服务的基本挑战蚂蚁金服为什么要做

原创 TensorFlow GPU版本安装（3）：Anoconda版本安装

一 安装已经按照tensorflow的推荐安装cuda8.0和cudnn5.1插件，下载anaconda安装文件、tensorflow gpu版本和其他python插件。使用anaconda安装原因为其本身完美集成了绝大多数常用插件，减少了很多安装麻烦，同时其本身也完美兼容tensorflow，可以在不用更改服务器已安装python版本的情况下，快速安装tensorflow。1.1 安装c

原创 TensorFlow GPU版本安装（2）：cudnn安装

一 官方安装文档PREREQUISITES    CUDA 7.0 and a GPU of compute capability 3.0 or higher are required. ALL PLATFORMS    Extract the cuDNN archive to a directory of your choice, referred tobelow a

原创 TensorFlow GPU版本安装（1）：cudn8.0安装

一、安装预检测1.1 检查显卡类型lspci | grep -i nvidia03:00.0 3D controller: NVIDIA Corporation GK110BGL [Tesla K40m](rev a1)查看是否为支持显卡：http://developer.nvidia.com/cuda-gpus1.2 检查操作系统类型uname -m && cat /et

原创 使用seq2seq模型实现一个聊天机器人

使用了TensorFlow中的transalte程序实现了一个简单的客服机器人，可以使用电影上下文对白等素材训练一个聊天机器人，祝你成功。

原创 berkeley DB +linux +python+bsddb3安装

1，berkeley DB安装http://www.oracle.com/technetwork/database/database-technologies/berkeleydb/downloads/index.html官网下载6.2版本，tar -zxvf 解压缩下载文件，进入build_unix目录，../dist/configure --prefix=/opt/Berkeley

原创 python中调用动态链接库（C++，linux）

1，创建并编译C++程序#include #include  #include  #include      #include #include #include #include  #include  using namespace std; extern "C"

原创 python中调用动态链接库（C++，DLL）

1，动态链接库编译使用VS2015创建“Win32项目”，选择应用程序类型为“DLL”，创建项目完成后，头文件中：#ifdefEXT_DEC_EXPORTS#defineEXT_DEC_API__declspec(dllexport)#else#defineEXT_DEC_API__declspec(dllimport)

原创 SAS中调用动态链接库（C++，DLL）

1，动态链接库编译使用VS2015创建“Win32项目”，选择应用程序类型为“DLL”，创建项目完成后，头文件中：#ifdefEXT_DEC_EXPORTS#defineEXT_DEC_API__declspec(dllexport)#else#defineEXT_DEC_API__declspec(dllimport)

转载 linux tr命令详解

通过使用 tr，您可以非常容易地实现 sed 的许多最基本功能。您可以将 tr 看作为 sed 的（极其）简化的变体：它可以用一个字符来替换另一个字符，或者可以完全除去一些字符。您也可以用它来除去重复字符。这就是所有 tr 所能够做的。     tr用来从标准输入中通过替换或删除操作进行字符转换。tr主要用于删除文件中控制字符或进行字符转换。使用tr时要转换两个字符串：字符串1用于查询

转载 Python中subprocess学习

subprocess的目的就是启动一个新的进程并且与之通信。subprocess模块中只定义了一个类: Popen。可以使用Popen来创建进程，并与进程进行复杂的交互。它的构造函数如下：subprocess.Popen(args, bufsize=0, executable=None, stdin=None, stdout=None, stderr=None, preexec_f

转载 Linux awk 命令详解

简介awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。awk有3个不同版本: awk、nawk和gawk，未作特别说明，一般指gawk，gawk 是 AWK 的 GNU 版本。awk其名称得自于它的创始人 Alfr

原创 将sklearn生成的决策树进行图形化展示

1，工具和平台：python2.7 windows2，决策树的可视化展示据我所知有两种途径：一是将生成的结果导出为pmml文件，工具包为sklearn2pmml等，具体可见https://github.com/jpmml/jpmml-sklearn 和https://github.com/jpmml/sklearn2pmml 如果遇到安装问题可以留言；而是进行graphviz的图形

原创 RHEL6.5（Red Hat Enterprise Linux）全新安装R

公司服务器才用了RHEL操作系统，虚拟机上也安装了一个相同版本，用于相关工作的研究。1，安装R首先配置yumRHEL的yum是需要收费的，所以需要删除预安装的服务，重新配置：删除：rpm -aq|grep yum|xargs rpm -e --nodeps 下载 ：wget http://mirrors.163.com/centos/6/os/x86_64/Packages

转载 hive表信息查询：查看表结构、表操作等

转自：http://www.aboutyun.com/forum.PHP?mod=viewthread&tid=8590&highlight=Hive问题导读：1.如何查看hive表结构？2.如何查看表结构信息？3.如何查看分区信息？4.哪个命令可以模糊搜索表1.hive模糊搜索表  show tables like '*name*';2.查看表

转载 Python yield 使用浅析

如何生成斐波那契數列斐波那契（Fibonacci）數列是一个非常简单的递归数列，除第一个和第二个数外，任意一个数都可由前两个数相加得到。用计算机程序输出斐波那契數列的前 N 个数是一个非常简单的问题，许多初学者都可以轻易写出如下函数：清单 1. 简单输出斐波那契數列前 N 个数 def fab(max): n, a, b = 0, 0, 1 while

转载 五大存储模型关系模型、键值存储、文档存储、列式存储、图形数

昨天跟一同事讨论Sybase是不是关系型数据库，同事说Sybase是列式存储，应该属于NoSQL，我一直的记忆Sybase是关系型数据库，后来专门去查了资料，才发现同事所说的Sybase IO是列式存储;而我说的是Sybase SQL Server，是关系型数据库。网上看到这篇文章，算是对几种数据库模型补补课。数据库市场需要细分，行式数据库不再满足所有的需求，而有很多需求需要通过本内存数据

转载 小米风控实践

风控系统从0到1的过程，极具借鉴意义邓文俊，小米高级研发工程师，2013 年加入小米，参与了数据后台，风控系统，支付等系统的研发工作。我来自小米支付，今天分享的主题是小米风控实践。为什么选风控这个题目？其实在我看来风控对互联网金融来说，风控就像是内裤，每个人都有，但是不会把它秀给别人看。对其他人来说风控是很神秘，今天带给大家看看小米我们怎么是一步步走过来，在风控方面

转载 终身机器学习（Lifelong Machine Learning）综述

原文地址：http://blog.csdn.net/qrlhl/article/details/49364173大概有十几天了没有回来更新博客了吧，这期间遇到了大大小小各种事情，最悲伤的事应该是跟我关系最好的一个哥们的父亲去世了，被酒驾的人撞了，希望叔叔在天国安好！再次告诫各位开车一定不能喝酒，不只是对自己负责，也是对他人生命的尊重，在这里谢过大家了！下面说一说我这些天积累的一点东

转载 社区发现(Community Detection)算法

作者: peghoty 出处: http://blog.csdn.net/peghoty/article/details/9286905   社区发现（Community Detection）算法用来发现网络中的社区结构，也可以看做是一种聚类算法。以下是我的一个 PPT 报告，分享给大家。     

原创 如何使用python进行社交网络分析

Social Network Analysis for Startups 是一本介绍如何使用python进行社交网络分析的入门书，主要使用了NetworkX、numpy等插件进行网络分析，前端可以使用Matplotlib进行可视化展示，一个展示效果图如下所示：  一些资源：• Code&data used in this lecture: http://www.cl.cam.a

原创 皮尔森相关系数及python计算代码

在社交网络中，如果对用户进行聚类，一般有两种距离计算方法：节点之间的图举例和节点的相似度计算。其中，节点的相似度计算可以采用皮尔森相关系数给定连个连续变量X和Y，皮尔森相关系数被定义为等于两个变量的协方差除于两个变量的标准差：系数的取值总是在-1.0到1.0之间，接近0的变量被成为无相关性，接近1或者-1被称为具有强相关性。皮尔森相关系数是衡量线性关联性的程度，p的

转载 层次聚类算法的原理及实现Hierarchical Clustering

Read more: http://bluewhale.cc/2016-04-19/hierarchical-clusteri层次聚类(Hierarchical Clustering)是聚类算法的一种，通过计算不同类别数据点间的相似度来创建一棵有层次的嵌套聚类树。在聚类树中，不同类别的原始数据点是树的最低层，树的顶层是一个聚类的根节点。创建聚类树有自下而上合并和自上而下分裂两种

转载 在Django中使用Logging

原文地址：http://www.smallerpig.com/1022.html?utm_source=tuicool&utm_medium=referral前言我们在编写程序过程中，很难免的会出现一些问题，程序并非按照我们预想的那样运行，这个时候我们通常会对程序进行调试，来看看到底是哪边出了问题。而程序日志是来帮助我们记录程序运行过程的帮手，善用日志的程序员也就能很快找出