- 博客(21)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 玩转人工智能（11）大数据的ETL和人工智能的EDA
1、Extract-Transform-Load的缩写，数据抽取（Extract）、转换（Transform）、装载（Load）的过程。Extract 设计原则 为提高ETL效率，数据在进入ETL系统后的EXF文件都将转换为Flat Text文件格式 从ETL程序设计的灵活性和整体结构的一致性考虑，尽量采用Pull的方式，减少对源系统的影响和对其他开发队伍的依赖，并减少网络压力 由于Batch Windows的限制，如果日源数据量大于5GB则必须...
2020-06-01 10:12:44
832
原创 产品经理必修课（3）从产品经理的视角看待物联网架构
本文内容结合智能种植项目展开，涉及传感、短通、网关、协议、后台、前端可视化等多个领域。第一段介绍物联网核心组件第二段介绍单片机、FPGA、ARM等第三段介绍嵌入式网关第四段介绍传感器接入第五段介绍数据库接入第六段介绍物联短通技术和模块第七段介绍WEB框架介绍 一个完整的物联网应用一般由传感器、处理芯片、通信模组、网络协议、应用软件等组成，也是一个多元的应...
2020-05-30 18:08:52
510
原创 产品经理必修课（4）toB产品思考需要了解的部分知识
疫情的影响，从2月份到6月份，投入了大部分时间重新学习和思考如何做产品？怎么做？如何做出来？卖出去的些许琐事，间断的回顾了一部纪录片：《超级工厂》---National Geographic Channel 国家地理频道出品、众多世界级产品/公司的介绍其中包括：法拉利，兰博基尼，宝马，阿帕奇飞机，超级大卡车，UPS快递，坦克，超级房车，从2007年开始到目前总共上上线66集，每集大概时常47分钟左右。Season 1 (2006) 共7集Season 2 (2007) 共7集Season 3 (20
2020-05-30 18:05:28
807
原创 轻量级web项目：（2）模块开发和相关原理
在开始介绍前后端各自模块和原理前，介绍下上篇遗留的部分细节。如下后端配置数据库，前端子工程独立调试、后端独立调试，前后端打包调试，打包部署。一、后端子工程配置MYSQL数据库，那就先安装MySQL。小技巧，如果安装的数据库过多，推荐使用navicat工具，记住MySQL的用户名和密码，默认情况下用户名为：“root”,密码就是前面安装的时候设置的：“root”。1、...
2020-02-21 22:05:03
197
原创 轻量级web项目：（1）技术选型和环境搭建
一、技术选型客户需要构建一web，架构采用轻量级的前后端分离框架，从成本和客户喜好考虑，该web使用前后端分离，后端使用python的Django，前端使用VUE的element-ui，数据库使用MySQL，编辑器采用pycharm（专业版）。二、工具准备1、python环境搭建python安装包下载路径：https://www.python.org/ （浏览器下载较慢怎么办...
2020-02-21 02:53:54
869
原创 Python数据化运营30分钟从入门到大牛
一、如何撰写出完整的数据分析报告？1、结构完整是一份完整报告的基础，封皮、摘要、目录、正文、附录说明。2、正文中的色彩、留白、对称、字体、注释给读者美感。3、专业的图表，简单直观为主。4、突出报告主题，围绕主题说清楚关键信息。5、用客户习惯的方式撰写报告。二、数据化运营的其他扩展？1、数据API2、数据模型，这里指具有固定规律和工作方法的应用封装而成的小应用。3...
2020-02-17 22:14:36
149
原创 Python数据可视化30分钟从入门到大牛
本文参考：https://pbpython.com/effective-matplotlib.html原文比较啰嗦，本文简而言之。1、介绍可视化关键词2、介绍使用python的工具包的好处3、奉献数据4、撸代码5、小结①数据空间：是由n维属性和m个元素组成的数据集所构成的多维信息空间；②数据开发：是指利用一定的算法和工具对数据进行定量的推演和计算；③数...
2019-07-18 09:09:27
1772
原创 linux下使用firefox下载百度网盘资源的小技巧
突然有一天，想把百度云盘废掉。。。于是。我的环境：LINUX下使用FIREFOX浏览器，资源在百度网盘。于是乎！1、https://addons.mozilla.org/zh-CN/firefox/addon/baidu-pan-exporter/安装浏览器的百度助手2、打开终端，输入如下命令行，安装ARIA2的依赖库sudo apt-get install aria2...
2019-06-13 15:10:34
1496
原创 玩转人工智能（11）使用Pyspark上手机器学习
文件系统 HDFS Hadoop Distributed File System，简称HDFS，是一个分布式文件系统。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。 GlusterFS 是一个集群的文件系统，支持PB级的数据量。GlusterFS 通过RDMA和TCP/IP方...
2019-06-03 16:06:17
737
原创 产品经理必修课（2）产品上线后的运营推广
好产品经理是最懂运营的人。产品上线前：1、试着给用户解释自家产品的功能特点。2、思考产品的定位是否匹配客户的痛点，解决客户的亟需。3、回过头来调研和分析市场上和竞品。4、分析产品用户的微变和量变，分析各渠道的推广效果。5、上线时开通产品的官方微博和微信公众号等宣传渠道。6、建立百度、搜狗等百科词条、知识问答。7、APP产品的话最好提前申请各大应用市场的开发者账号。...
2019-01-22 17:02:03
320
原创 产品经理必修课（1）产品研发的工作流程
工作流程： 1、一款产品必须有一个最核心的需求，一个解决这个需求的功能特性。这是第一步，也是至关重要的一步。2、从MRD到PRD，想清楚这款产品或者方案的独特性，从同质化产品中构建差异。3、分解用户，如何让自己的产品更好用，站在用户的角度思考问题，优化设计。4、让小白用户上手产品，潜移默化的解决用户的痛点。5、一开始就把产品当成铁杵，不断地打磨，直到交付到客户手上的时候就是客户...
2019-01-22 13:47:45
402
原创 玩转人工智能（10）解析深度学习之线性代数
基本概念：矩阵、向量、标量、张量矩阵：由 m × n 个数aij排成的m行n列的数表称为m行n列的矩阵，简称m × n矩阵。记作：这m×n 个数称为矩阵A的元素，简称为元，数aij位于矩阵A的第i行第j列，称为矩阵A的(i,j)元，以数 aij为(i,j)元的矩阵可记为(aij)或(aij)m × n，m×n矩阵A也记作Amn。元素是实数的矩阵称为实矩阵，元素是复数的矩阵称为复...
2018-07-16 22:16:52
964
原创 玩转人工智能（9）使用python爬取X度中国人脸图片，构建人脸识别数据库
本文介绍使用python从X度的图像库爬取特定种类的图片资源。工具准备：1、安装python，路劲：https://www.python.org/ 选择自己喜欢的版本即可，本人使用3.5.4实验。注意在安装过程中勾选PATH路劲设置。安装成功后的图如下所示 2、使用PIP下载requests库（URL访问用）在python的PIP安装路径下CMD 输入：pip install request...
2018-04-11 14:50:52
1023
原创 玩转人工智能（8）Python机器学习基础库、autoML、Apollo2.0介绍
本文前半部分介绍numpy、scipy、matplotlib、pandas、pyTorch等机器学习的基本函数库。后半部分介绍cloud autoML和autoML Version、以及X度的Apollo 2.0/auto技术。numpy库是python中用来处理数据的函数库，核心是数组计算。http://nbviewer.jupyter.org/github/lijin-THU/note
2018-01-25 17:57:08
4602
原创 玩转人工智能（7）计算机视觉OpenCV库持续深入学习总结
聪明出于勤奋，天才在于积累。结合上文，本篇首先介绍数字图像处理的基础知识，由于篇幅有限，本人尽量结合日常工作中用到的或者熟悉的部分总结。后续介绍OpenCV库中图像处理函数的实现以及在应用平台中的使用。在计算机世界里图像信息就是矩阵，图像处理技术按照应用来看，一般是图像的数字化、几何变换、对比对增强、图像平滑、阈值分割、形态学处理、边缘检测、规则形状的检测和拟合、傅立叶变换、频域处理。
2018-01-24 20:38:29
1067
原创 玩转人工智能（6）应用之计算机视觉必知必会及快速上手
计算机视觉是什么？https://zh.wikipedia.org/wiki/%E8%AE%A1%E7%AE%97%E6%9C%BA%E8%A7%86%E8%A7%89，这是一门让机器学会看的科学。类似于人的眼睛，或者双眼，认识和处理看到的万事万物，人类利用眼睛收集和感知自然世界的信息，计算机视觉技术的目的是让机器也具有类似人眼的能力，人类的世界丰富多彩，计算机看来就是由无以计数的图片构成，或
2018-01-21 21:41:50
467
原创 玩转人工智能（5）深度网络模型演进介绍及框架Keras实战
本文前半部分介绍深度网络的理论基础，重点介绍残差网络、生成对抗网络。后半部分介绍实现深度网络的模型框架Keras的使用。目的是让读者快速上手，达到抛砖引玉的目的。残差网络，准确的称呼是Deep Residual Network来源于Deep Residual Learning for Image Recognition，作者何凯明（自行谷歌） http://kaiminghe.com/在实践中发现
2018-01-19 15:00:34
1810
原创 玩转人工智能（4）算法的灵魂之数据结构Python实战
为什么要写数据结构，因为这是算法的灵魂。十年前我听老师讲这句话，觉得是扯淡，现在看来，确实是灵魂。没有见过鬼的人总觉得这世界上没有鬼，见过鬼的人也不会告诉别人鬼啥样（被吓死了呗）。开始阅读博客之前，推荐大家一本书：《我的奋斗》作者罗永浩。数据结构，顾名思义就是数据的结构，数据一般指数字、字符串等，结构就是数据的构造方式。计算机世界里的数据不能是杂乱无章的，必须要组织起来，就像人喜欢打扫卫生和喜欢干
2018-01-18 23:51:14
1387
原创 玩转人工智能（3）常用的大数据框架简单介绍
时光不老，我们不散。讲大数据框架前，简单的介绍下大数据的文化。信息时代人类社会的进步得益于分享和开源。大数据时代属于信息时代的第三代发展阶段（2001年到2011年可以认为是CT行业的黄金期，2008年到2018年可以认为是IT的黄金时代），共享理念的需求和落地特征表现的更为突出。商业社会，共享的做大做强，保守的终日没落，开源的日益壮大，封闭的穷途陌路。当然，DT时代有人极端的说是共享时代（A
2018-01-17 18:47:42
814
原创 玩转人工智能（1）使用TensorFlow框架训练神经网络模型识别MNIST数据集
本文重点讲解神经网络，深度剖析当红炸子鸡tensorflow开源框架，最后使用科研界的MNIST数据集小试牛刀。目的让读者达到对AI思想的深度理解，同时起“码”上手对神经网络有个直观认识。所谓‘学习’者，即对直观事物的规律总结，用于找到对于未知事物的判决和认知。周老师的西瓜书中开门见山的讲了‘识’瓜术，老农看一叶便知天下秋来，诸葛亮观察天象预测人间灾情等等，都是对万事万物的规律发现和总结提炼走
2018-01-12 22:10:06
2490
原创 玩转人工智能（2）RNN的前世今生，用于序列的深度学习框架模型
RNN-循环神经网络（Recurrent Neural Networks），也叫递归神经网络。Recurrent一般指时间序列上的递归或者循环，也有一种叫做Recursive neural network的神经网络，通常指网络结构递归类型的，要注意区分。时间递归神经网络的神经元间连接构成矩阵，而结构递归神经网络利用相似的神经网络结构递归构造更为复杂的深度网络（--维基百科）。RNN最牛逼的
2018-01-10 10:16:56
510
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人