- 博客(12)
- 资源 (12)
- 收藏
- 关注
RSS订阅原创 使用scrapy编写爬虫并入库Mysql全过程
1、使用pip install scrapy 安装scrapy2、打开cmd命令行窗口，创建属于自己的爬虫项目工程。命令：scrapy startproject First3、通过步骤2爬虫工程已经创建完毕，使用pycharm打开，其目录结构如下： 4、其中spiders文件夹专门用来存放爬虫的文件，item...
2018-03-17 19:19:09
3649
1
原创 Hadoop中正常启动了datanode但管理界面却却显示0个datanode节点或者只有本机的一个datanade，DFS Used显示0（100%）
Hadoop中正常启动了datanode但管理界面却却显示0个datanode节点或者只有本机的一个datanode，DFS Used显示0（100%）日志显示： Problem connecting to server: master/192.168.216.10:9001
2017-09-16 17:26:26
7039
2
原创 python实现随机梯度下降法
看这篇文章前强烈建议你看看上一篇python实现梯度下降法：一、为什么要提出随机梯度下降算法注意看梯度下降法权值的更新方式（推导过程在上一篇文章中有） 也就是说每次更新权值都需要遍历整个数据集（注意那个求和符号），当数据量小的时候，我们还能够接受这种算法，一旦数据量过大，那么使用该方法会使得收敛过程极度缓慢，并且当存在多个局部极小值时，无法保证搜索到全局最优解。为了解决这样的问题，引入了梯度下...
2017-08-01 09:40:25
11774
1
原创 用python+numpy+matplotalib实现梯度下降法
这个阶段一直在做和梯度一类算法相关的东西，索性在这儿做个汇总，一、算法论述梯度下降法(gradient descent)别名最速下降法（曾经我以为这是两个不同的算法-.-）,是用来求解无约束最优化问题的一种常用算法。下面以求解线性回归为题来叙述：设：一般的线性回归方程（拟合函数）为：（其中的值为1） 则这一组向量参数选择的好与坏就需要一个机制来评估，据此我们提出了其损失函数为(选择均方误差)：...
2017-07-30 17:11:56
3947
6
原创 linux中有关环境变量的一些理解
这篇文章不涉及某一项环境变量的配置，而是整体上阐述一下，配置环境变量在linux中是怎样的一个过程。 众所周知当环境变量配置好之后，我们可以不必进入到该软件的工作目录，敲击命令即可运行，比如mysql数据库，当环境变量配置好之后，无论在linux的哪一级目录，通过mysql -uroot -p这条命令我们就可以随时随地进入到mysql的工作界面，而不是一定要进入到它的工作目录bin
2017-06-13 17:33:24
359
原创 linux中mysql数据库忘记密码解决方法
ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: NO)，linux中mysql数据库忘记密码，解决方法
2017-06-13 09:44:26
1295
原创 虚拟机linux中jdk配置及其安装
第一步：挂载JDK镜像文件 步骤：虚拟机——>设置——>CD/DVD(SATA)——>选中JDK镜像文件进入linux系统中输入命令：mount /mnt/cdrom此时可能会出现mount: can't find /mnt/cdrom/ in /etc/fstab 这样的错误，换条命令：mount dev/cdrom /mnt /cdrom 如果mnt下没有cdro
2017-06-06 11:12:52
741
python-matplotlib英文版翻译
2017-03-21
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人