zyj20200-CSDN博客

原创 pytorch learn 07 优化算法

From: https://github.com/L1aoXingyu/code-of-learn-deep-learning-with-pytorch1 SGD数据def data_df(x): x = np.array(x, dtype='float32') / 255 x = (x -0.5) / 0.5 x = x.reshape((-1, )) # 拉平...

2019-07-23 16:26:46 247 1

原创 pytorch learn 06 深层神经网络&参数初始化

From: https://github.com/L1aoXingyu/code-of-learn-deep-learning-with-pytorchmnist 数据集是一个非常出名的数据集，基本上很多网络都将其作为一个测试的标准，其来自美国国家标准与技术研究所, National Institute of Standards and Technology (NIST)。训练集 (tra...

2019-07-23 11:32:58 564 1

原创 pytorch learn 05 多层神经网络，Sequential 和 Module

From: https://github.com/L1aoXingyu/code-of-learn-deep-learning-with-pytorch在前面的线性回归中，我们的公式是 y=wx+by = w x + by=wx+b，而在 Logistic 回归中，我们的公式是 y=Sigmoid(wx+b)y = Sigmoid(w x + b)y=Sigmoid(wx+b)，其实它们都可...

2019-07-23 11:13:07 436

原创 pytorch learn 04 Logistic Regression

From: https://github.com/L1aoXingyu/code-of-learn-deep-learning-with-pytorchLogistic 回归是一种广义的回归模型，其与多元线性回归有着很多相似之处，模型的形式基本相同，虽然也被称为回归，但是其更多的情况使用在分类问题上，同时又以二分类更为常用。Logistic 回归的模型形式和线性回归一样，都是 y = wx...

2019-07-23 10:55:47 150

原创 pytorch learn 03 Linear Regression

From: https://github.com/L1aoXingyu/code-of-learn-deep-learning-with-pytorch线性回归是监督学习里面一个非常简单的模型，同时梯度下降也是深度学习中应用最广的优化算法，我们将从这里开始我们的深度学习之旅生成数据x_train = np.array([[3.3], [4.4], [5.5], [6.71], [6.93...

2019-07-23 10:39:37 111

原创 pytorch learn 02 autograd

From: https://github.com/L1aoXingyu/code-of-learn-deep-learning-with-pytorch自动求导是 PyTorch 中非常重要的特性，能够让我们避免手动去计算非常复杂的导数，这能够极大地减少了我们构建模型的时间，这也是其前身 Torch 这个框架所不具备的特性，下面我们通过例子看看 PyTorch 自动求导的独特魅力以及探究自动...

2019-07-23 10:24:08 103

原创 pytorch learn 01 base

From: https://github.com/L1aoXingyu/code-of-learn-deep-learning-with-pytorchPyTorch 的官方介绍是一个拥有强力GPU加速的张量和动态构建网络的库，其主要构件是张量，所以我们可以把 PyTorch 当做 NumPy 来用，PyTorch 的很多操作好 NumPy 都是类似的，但是因为其能够在 GPU 上运行，所以...

2019-07-23 10:12:46 114

原创 Django restframework使用3

Django restframework使用3modelfrom django.db import modelsclass Book(models.Model): title = models.CharField(max_length=32) price = models.IntegerField() pub_date = models.DateField(null...

2019-05-06 15:52:52 158

原创 Django REST framework views小记

1. modelsfrom django.db import modelsclass Book(models.Model): title = models.CharField(max_length=32) price = models.IntegerField() pub_date = models.DateField() publish = models.F...

2019-03-01 10:34:00 243

原创 python模块打包及离线安装

1 将当前环境所需的python模块打包1.pip freeze &gt; requestments.txt2.pip download -r requirements.txt -d /home/zyj/bags2 在服务器上离线安装打包的模块2.1 服务器python安装pip（若已经安装了pip，则跳过，直接到第下一步）2.1.1 安装setuptools1.解压setup...

2019-01-24 08:45:37 2822

原创 Django REST framework使用小记

Django REST framework使用小记利用Django + REST framework 生成(单条，多条)数据api1. 创建Django项目2.创建app3. models.py4.注册应用, 迁移&amp;amp;创建超级管理员5.admin.py注册models6. 运行测试服务器&amp;amp;添加数据7.在app下新建serializers.py并编辑8.修改 views.py9.修改u...

2019-01-16 11:24:43 227

原创 centos6.8使用pyinstaller异常解决记录

执行：pyinstaller -F test.py提示：Traceback (most recent call last): File "/usr/local/bin/pyinstaller", line 9, in <module> load_entry_point('PyInstaller==3.4', 'console_scripts', 'pyins...

2018-11-14 10:15:20 757

转载 windows cmd here

Windows Registry Editor Version 5.00 [HKEY_LOCAL_MACHINE\SOFTWARE\Classes\Directory\background\shell\cmd_here] @="命令行""Icon"="cmd.exe" [HKEY_LOCAL_MACHINE\SOFTWARE\Classes\Directory\background...

2018-09-26 09:35:46 1131

原创 Ubuntu 执行spark程序异常（Python版本问题）

Ubuntu下，在pycharm中执行spark程序，出现如下异常信息：org.apache.spark.api.python.PythonException: Traceback (most recent call last): File "/home/z/module/spark-2.3.1-bin-hadoop2.7/python/lib/pyspark.zip/pyspark/w...

2018-08-15 13:45:37 1459

原创 pycharm 开发 spark 程序配置

方法一： 1.pycharm 中 peoject structer 配置：2.py文件添加SPARK_HOME 和 HADOOP_HOME 方法二：1.在C:\Anaconda3\Lib\site-packages目录下新建pyspark.pth，内容是D:\2_job\learning\py_spark\support_file\spark-2.3.1-bi...

2018-08-15 09:56:02 511

转载 pyspark读写操作

目录 1. 连接spark2. 创建dataframe 2.1. 从变量创建2.2. 从变量创建2.3. 读取json2.4. 读取csv2.5. 读取MySQL2.6. 从pandas.dataframe创建2.7. 从列式存储的parquet读取2.8. 从hive读取3. 保存数据 ...

2018-08-15 08:54:48 3142

原创 matplotlib学习记录

import matplotlib.pyplot as pltplt.plot([1,2,3,4])plt.ylabel('some numbers')plt.show()import matplotlib.pyplot as pltplt.plot([1,2,3,4], [1,4,9,16], 'ro')plt.axis([0, 6, 0, 20])plt.show(...

2018-08-14 22:16:34 186

原创 ubuntu 修改用户权限

登录用户：zyj修改普通用户具有root权限：sudo suvim /etc/sudoers添加一行：修改文件夹所属：将这两个文件夹改为属于zyj用户：sudo chown zyj:zyj anaconda3/ -Rsudo chown zyj:zyj pycharm-community-2017.2.3/ -R权限说明：d rwx rwx ...

2018-08-14 09:28:25 28782

原创 ubuntu hive安装记录

hive 安装及使用：1、把 apache-hive-1.2.2-bin.tar.gz 上传到 linux 的/opt/software 目录下2、解压 apache-hive-1.2.2-bin.tar.gz 到/opt/module/目录下面 tar -zxvf apache-hive-1.2.2-bin.tar.gz -C /opt/module/ 3、修改 apa...

2018-08-09 15:18:57 459

原创 windows下navicate连接虚拟机Ubuntu中的mysql无法连接问题

1、修改：/etc/mysql/mysql.conf.d/mysqld.cnf文件中的bind-address 127.0.0.1这一行。将该行注释2、重启mysql服务 service mysql restart====================================================================3、...

2018-08-09 15:04:16 415

原创 spark standalone搭建记录（未完待续）

1、解压spark压缩文件2、conf文件夹下： slaves.template--配置从节点hostname spark-env-template.sh--spark Master配置重命名这两个文件 slaves spark-env.sh：export JAVA_HOME=/usr/java/jdk1.7.0_8...

2018-08-09 10:44:03 109

原创 hadoop 搭建记录（完全分布式）

========================================================================完全分布式： 1、准备机器：ip，hostname配好 2、安装jdk，hadoop 3、配置环境变量 4、安装ssh 5、配置集群（免密登录） 6、启动集群测试 1、配置各台服务器ip、hos...

2018-08-09 10:40:48 220

原创 hadoop 搭建相关记录（伪分布式）

hadoop简单介绍1、Hadoop组成： MapReduce、Yarn、HDFS、Common(辅助工具)2、HDFS： 1.NameNode：存储文件的元数据，如文件名，文件目录结构，文件属性（生成时间、副本数、文件权限）以及每个文件的块列表和块所在的DataNode等。 2.DateNode：在本地文件系统存储文件块数据，以及块数据的校验和。 ...

2018-08-09 10:39:17 195

转载 ubuntu 允许远程登录

（1）检查是否开启SSH服务　　命令：ps -e|grep ssh 查看SSH服务是否开启，或者通过命令：service sshd status 可以查看某个服务的状态。（2）安装SSH服务　通过apt-get 安装，命令：apt-get install ssh （3）启动SSH服务　命令：sudo /etc/init.d/ssh start（4）修改SSH配...

2018-08-09 10:37:46 14887 1

转载激活pycharm

1、将“0.0.0.0 account.jetbrains.com”中的内容添加到hosts文件中，hosts路径为：C:\Windows\System32\drivers\etc2、打开http://idea.lanyus.com/ ，点击激活，获得并复制注册码。3、打开pycharm，选择第二个选项：Activate code（用激活码激活），把第二步复制的注册码粘贴在下面的文本...

2018-07-20 14:15:57 1783

转载 lambda、map、filter、reduce

1、三元表达式简单的 if else 语句，可以使用三元运算来表示# 普通条件语句if 1 == 1: name = '张三'else: name = '李四' # 三元运算name = '张三' if 1 == 1 else '李四'2、lambda表达式# 定义函数（普通方式）def func(arg): return arg + 1...

2018-07-17 14:44:47 359

原创 YAML学习记录

YAML（英语发音：/ˈjæməl/，尾音类似camel骆驼）是一个可读性高，用来表达资料序列的格式。YAML参考了其他多种语言，包括：C语言、Python、Perl，并从XML、电子邮件的数据格式（RFC 2822）中获得灵感。1、基本语法规则:1.大小写敏感2.使用缩进表示层级关系3.不允许使用TAB键来缩进，只允许使用空格键来缩进4.缩进的空格数量不重要5.使用"#"来表示注释2、支...

2018-07-13 16:48:13 442

原创联想笔记本win10触摸板双指轻触问题

问题：双指轻触无效，必须用较大力气按下才起作用原因：synaptics触摸板驱动有一个专门针对双指轻触的注册表键值，由于安装程序暂时无法识别win10，导致键值不能正确设置，使得双指轻触失效解决办法：修改注册表1、打开注册表快捷键win+r后输入regedit，搜索"2FingerTapAction"2、将两个"2FingerTapAction"的键值0改为2，重启即可。...

2018-03-18 11:08:41 10029 1

原创 chrom 安装 stylish 修改jupyter notebook 显示字体

1、chrome 应用商店安装stylish2、stylish 添加新样式，并指定网址前缀#notebook-container * { font-family: Consolas, "微软雅黑" }3、保存即可

2018-03-17 14:27:39 1227

转载 mysql 报错 division by 0

division by zero "除数是o"导致的错误。解决方法1：运行前判断如果除数为0，则不要计算解决方法2：使用@符号屏蔽掉错误

2018-03-13 10:18:55 25976 2

原创 mysql安装

1、在mysql文件夹下新建 my.ini文件，新建data文件夹2、my.ini 添加内容[mysqld]basedir=C:\mysqldatadir=C:\mysql\dataport=3306character-set-server=utf83、将mysql文件和其里面的bin文件夹路径添加到环境变量4、管理员身份运行cmd5、执行：mysqld...

2018-03-12 21:17:33 142

原创 Ubuntu设置

1、切换软件源设置-软件和跟新-下载自--其他站点2、跟新软件和软件源sudo apt-get updatesudo apt-get upgrade3、中文支持设置--语言支持，点开自动提示4、卸载Libreoffice、亚马逊链接sudo apt-get remove libreoffice-commonsudo apt-get remove unity-webapps-c...

2018-03-12 16:43:18 312

原创安装Ubuntu

1、U盘进pe，创建未分配的空间给ubuntu2、关闭Windows的快速启动，进入BIOS设置关闭Security Boot，否则Ubuntu无法写入引导程序3、重启，设置USB启动，进入Ubuntu安装界面，一直到安装类型步骤4、/dev/sda是SSD，/dev/sdb是HDD 选择空间分配EFI系统分区，逻辑分区，空间起始位置，500M交换空间，逻辑分区，空间的起始位置，15360...

2018-03-12 16:40:46 302

原创 ubuntu 触摸板双指滑动异常以及键盘重复键异常问题解决记录

最初，机械硬盘win10，固态ubuntu，触摸板及键盘正常使用现在，机械硬盘Ubuntu，固态win10，在win10下一切正常，ubuntu下无法使用双指滑动及键盘重复键。解决办法：修改内核查看内核启动顺序grep menuentry /boot/grub/grub.cfgif [ x"${feature_menuentry_id}" = xy ]; then menuentry_id_o...

2018-03-07 14:54:01 1882

原创 windows下，谷歌浏览器修改jupyter notebook字体样式

1、安装 stylish 插件2、添加新样式： 3、指定网址应用样式：保存即可方法二：修改css文件：C:\Anaconda3\Lib\site-packages\notebook\static\custom\custom.css.CodeMirror pre {font-family: Consolas; font-size: 10pt;}* {...

2018-03-05 15:23:20 2371 1

原创 python虚拟环境安装（win下）

使用 virtualenvwrapper更方便管理virtualenv1、安装virtualenvwrapperpip install virtualenvwrapper-win linux下运行pip install virtualenvwrapper2、创建虚拟环境：修改虚拟环境默认安装位置：计算机-->属性-->高级系统设置-->环境变量-->在系统变量中新建“变量名...

2018-03-05 10:28:53 150

原创 ubuntu--mysql

mysql data文件夹位置检查Mysql是否正在运行：sudo netstat -tap | grep mysql如果服务器不能正常运行，您可以通过下列命令启动它：sudo /etc/init.d/mysql restart更改mysql默认编码：输入 SHOW VARIABLES LIKE 'char%'; 查看MySQL编码，有两个不是utf8在终端中输入 sudo gedit /etc...

2018-03-04 14:20:56 141

原创 ubuntu下安装navicat

1.官网下载：https://www.navicat.com.cn/download/navicat-premium 2.使用命令解压：sudo tar -zxvf navicat112_premium_en_x64.tar.gz解压好了可以看到当前目录下有个navicat112_premium_en_x64目录。进去执行下面命令：./start_navicat剩下等待自动安装程序执行即可。补充...

2018-03-04 14:18:52 936

转载虚拟机下ubuntu 手势

作者：xu不群链接：https://www.zhihu.com/question/21657365/answer/46404166来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。这应该不是ubuntu的问题而是vmware。vmware里的触摸板问题貌似已经存在很久了。在vmware的社群里有人反映已被这一问题困扰了8年。。。但是就是没有人来...

2018-03-04 14:17:24 661

原创 vim--终端--使用

切换到root用户：sudo su 退出root用户：exit终端：生成多个终端： shift+t 右击拆分在不同终端键切换 alt+数字 ctrl+上/下/左/右 vim 安装插件：在 ~/.vimrc 文件中添加插件打开一个文件，输入：PluginInstall 安装插件删除插件：先在vimrc文件...

2018-03-04 14:16:25 1305

空空如也

空空如也