- 博客(90)
- 收藏
- 关注
RSS订阅
原创 TensorFlow Models/Tutorials/image/alexnet模块源码分析之（二）
# Copyright 2015 The TensorFlow Authors. All Rights Reserved.## Licensed under the Apache License, Version 2.0 (the "License");# you may not use this file except in compliance with the License.# Y...
2018-07-30 11:51:14
257
原创 Models/Tutorials/image/mnist模块源码分析之（一）
# Copyright 2015 The TensorFlow Authors. All Rights Reserved.## Licensed under the Apache License, Version 2.0 (the "License");# you may not use this file except in compliance with the License.# Y...
2018-07-20 12:07:08
263
原创 shell脚本批量修改文件后缀
#!/bin/bashold='.mp4'new='.avi'dir=$(eval pwd)for file in $(ls $dir | grep .$old) do name=$(ls $file | cut -d. -f1) mv $file ${name}$new doneecho "change done!"
2019-06-26 16:55:09
1648
原创 Pytorch自定义损失函数losses.py
PyTorch已经有很多标准的损失函数，有时也需要创建自己的损失函数。为此，需要创建一个单独的文件 losses.py ，然后扩展 nn.Module类创建自定义损失函数：class CustomLoss(torch.nn.Module): def __init__(self): super(CustomLoss,self).__init__() ...
2019-05-31 15:20:45
5126
原创 Pytorch使用技巧
import 包模块import argparseimport osimport torchfrom torch import nn, optimfrom torch.nn import functional as Ffrom torch.utils.data import DataLoaderfrom torchvision import datasets, transform...
2019-05-31 13:29:05
522
原创 Sequence to Sequence Learning with Neural Networks论文翻译
Sequence to Sequence Learningwith Neural Networks论文翻译摘要1. 导言2. 模型3. 实验3.1 数据集详细信息3.2 解码和重新评分3.3 反转源语句3.4 训练详情3.5 并行化3.6 实验结果3.7 长句子的表现3.8 模型分析4. 相关工作5. 结论6. 致谢引用摘要深度神经网络是在困难的学习任务中取得卓越性能的强大模型。尽管拥有大量的...
2019-04-25 17:04:26
3960
1
原创 TensorFlow Datasets简介
公共数据集为机器学习研究的快速发展提供了动力，但仅仅将这些数据集放入机器学习管道仍然太困难了。 每个研究人员都经历了编写一次性脚本以下载和准备他们使用的每个数据集的痛苦，这些数据集都具有不同的源格式和复杂性。今天，我们很高兴推出TensorFlow Datasets（GitHub），它将公共研究数据集公开为tf.data.Datasets和NumPy数组。 它完成了获取源数据并将其准备为磁盘上...
2019-03-19 16:06:39
7439
原创 Tensorflow Datasets v1.0.1 API tfds.download (三)
Module: tfds.downloadDefined in core/download/init.py.tfds.download.DownloadManager API.Classesclass DownloadConfig: Configuration for tfds.core.DatasetBuilder.download_and_prepare.class Down...
2019-03-07 14:59:36
541
原创 Tensorflow Datasets v1.0.1 API tfds.core (二)
1. OverviewModule: tfds.coreDefined in core/init.py.API to define datasets.Classesclass lazy_imports：重度依赖项的延迟导入器。class BuilderConfig：DatasetBuilder数据配置的基类。class DatasetBuilder：所有数据集的抽象基类。...
2019-03-07 12:25:46
495
原创 Tensorflow Datasets v1.0.1 API简介(一)
模块：tfds在__init__.py中定义。tensorflow_datasets(tfds)定义与TensorFlow一起使用的数据集集合。每个数据集都定义为tfds.core.DatasetBuilder，它封装了下载数据集和构造输入管道的逻辑，并包含数据集文档（版本，拆分，示例数等）。主库入口点是：tfds.builder：按名称获取tfds.core.DatasetBuil...
2019-03-07 11:29:35
1101
原创 TensorFlow Datasets
TensorFlow DatasetsTable of ContentsInstallationUsageDatasetBuilderNumPy usageWant a certain dataset?DisclaimersTensorFlow Datasets provides many public datasets as `tf.data.Datasets`.[![K...
2019-03-07 10:59:37
2810
原创 tf.keras损失函数总结
tf.keras损失函数一览keras.losses.mean_squared_errorkeras.losses.mean_absolute_errorkeras.losses.mean_absolute_percentage_errorkeras.losses.mean_squared_logarithmic_errorkeras.losses.squared_hingekera...
2019-02-26 15:54:08
6573
原创 ModuleNotFoundError: No module named 'gluoncv'报错
---------------------------------------------------------------------------ModuleNotFoundError Traceback (most recent call last)<ipython-input-34-edd286ee72a3> in <mod...
2019-01-09 22:00:40
4283
原创 Tensorflow指数衰减源码
# Copyright 2015 The TensorFlow Authors. All Rights Reserved.## Licensed under the Apache License, Version 2.0 (the "License");# you may not use this file except in compliance with the License.# Y...
2019-01-09 17:10:06
558
原创 txt2xml.py文件
from xml.dom import minidomimport cv2import ospath = '/home/hy/work/OCR_Detection_Simple/data/label'setname = set([i.split('.')[0] for i in os.listdir(path)])for i in setname: txt_dirtory = ...
2018-09-03 18:48:19
824
1
原创 coco数据集下载脚本
#!/usr/bin/env bashmkdir datawget http://msvocds.blob.core.windows.net/annotations-1-0-3/captions_train-val2014.zip -P ./data/wget http://images.cocodataset.org/zips/train2014.zip -P ./data/wget h...
2018-08-13 10:22:34
1094
原创 pandas查询数据
pandas查询数据这里的查询数据相当于R语言里的subset功能，可以通过布尔索引有针对的选取原数据的子集、指定行、指定列等。我们先导入一个student数据集：student = pd.io.parsers.read_csv(‘C:\Users\admin\Desktop\student.csv’) 查询数据的前5行或末尾5行student.head() student.tai...
2018-07-30 11:54:09
1961
原创 强化学习入门之基本介绍（一）
1. 什么是RL强化学习( RL )是机器学习的一个分支，agent通过与环境（env）交互来进行学习。这是一个以目标为导向的学习过程，agent不被告知要采取什么行为（action）；相反，agent从其行为(action)的结果中学习。它正以各种各样的算法（DQN, A3C, DDPG, TRPO等）迅速发展，是目前人工智能( AI )最活跃的研究领域之一。agent可以探索(expl...
2018-07-14 16:07:57
1336
原创 Ubuntu16.04配置CUDA9.0和cudnn
sudo apt-get install freeglut3-dev build-essential libx11-dev libxmu-dev libxi-dev libgl1-mesa-glx libglu1sudo sh cuda_9.0.176_384.81_linux.runaccept no yes yes yes yessudo gedit ~/.bashrc 文件的末尾...
2018-07-12 19:48:05
406
原创 python爬虫
#!/usr/bin/env python# -*- coding:utf-8 -*-import osimport reimport urllibimport jsonimport socketimport urllib.requestimport urllib.parseimport urllib.errorfrom tqdm import tqdm# 设置超时imp...
2018-07-12 17:53:04
289
原创 Import error with mpl_toolkits.mplot3d报错
引入以下即可import importlibimportlib.import_module('mpl_toolkits.mplot3d').__path__
2018-07-03 10:15:23
3052
原创 数据与特征处理
特征处理 1.数值型幅度调整/归一化统计max、min、mean、std离散化Hash分桶每个类别下对应的变量统计值histogram(分步情况) 2.类别型one-hot编码哑变量Hash与聚类处理 3.时间型 4.文本类 5.统计类 6.组合特征...
2018-07-03 10:14:30
269
原创 UnknownError (see above for traceback): exceptions.AttributeError: 'module' object has no attribute
./scripts/test.sh 0 ./models/seglink-512/model.ckpt-217867 ./datasets/ICDAR2015/Challenge4/ch4_test_images+ set -e+ export CUDA_VISIBLE_DEVICES=0+ CUDA_VISIBLE_DEVICES=0+ CHECKPOINT_PATH=./models/...
2018-07-02 12:06:14
1432
原创 pytorch实现Linear regression
#!/usr/bin/env pythonfrom __future__ import print_functionfrom itertools import countimport torchimport torch.autogradimport torch.nn.functional as FPOLY_DEGREE = 4W_target = torch.randn(POLY...
2018-05-30 22:24:43
673
原创 pytorch实现mnist分类
torchvision包 包含了目前流行的数据集，模型结构和常用的图片转换工具。torchvision.datasets中包含了以下数据集 MNIST COCO（用于图像标注和目标检测）(Captioning and Detection) LSUN Classification ImageFolder Imagenet-12 CIFAR10 and CIFAR100 STL10...
2018-05-30 21:57:01
3043
原创 pandas 报错
E:\Anaconda3\python.exe C:/Users/yunfan/Desktop/5.25/data_after.pystr_date= ('2000', '11', '5')编号： YL1：ylrq 2000/11/5 未找到str_date= ('2017', '5', '13')Traceback (most recent call last): File "E:\...
2018-05-30 01:49:03
6920
5
原创 pandas查询数据
pandas查询数据通过布尔索引有针对的选取原数据的子集、指定行、指定列等。 我们先导入一个student数据集： student = pd.read_csv(‘C:\Users\admin\Desktop\student.csv’) 查询数据的前5行或末尾5行 student.head() student.tail()查询指定的行studen...
2018-05-23 17:01:38
2144
原创 pandas 根据列的值选取所有行
# 选取等于某些值的行记录 用 == df.loc[df['column_name'] == some_value]# 选取某列是否是某一类型的数值 用 isindf.loc[df['column_name'].isin(some_values)]# 多种条件的选取 用 &df.loc[(df['column'] == some_value) & df['other_...
2018-05-23 16:40:17
11002
原创 RGB转灰度图
#coding:utf-8import numpy as npimport cv2# 首先以灰色读取一张照片src = cv2.imread("001.jpg", 0)# 然后用ctvcolor（）函数，进行图像变换。src_RGB = cv2.cvtColor(src, cv2.COLOR_GRAY2BGR)# 显示图片#cv2.imshow("input", src)#...
2018-05-22 00:02:24
807
原创 pandas 删除某列空值
import pandas as pd# 删除含有空数据的全部行df4 = pd.read_csv('4.csv', encoding='utf-8')df4 = df4.dropna()# 可以通过axis参数来删除含有空数据的全部列df4 = df4.dropna(axis=1)# 可以通过subset参数来删除在age和sex中含有空数据的全部行df4 = df4.dr...
2018-05-15 17:53:39
28066
1
原创 linux命令
连接服务器ssh -p 3075 [email protected]往服务器上传文件scp -P 3075 OC.zip [email protected]０7.92:/var
2018-05-07 10:08:00
160
原创 Keras优化函数解析
from __future__ import absolute_importimport siximport copyfrom six.moves import zipfrom . import backend as Kfrom .utils.generic_utils import serialize_keras_objectfrom .utils.generic_utils im...
2018-04-26 10:18:21
1981
原创 OCR技术原理
OCR技术原理文档识别技术功能特点图像输入：读取不同图像格式文件的算法。图像预处理：主要包括图像二值化，噪声去除，倾斜较正等算法。版面分析：将文档图片分段落，分行的算法就叫版面分析算法。字符切割：字符切割算法主要处理因字符粘连、断笔造成字符难以简单切割的问题。字符特征提取：对字符图像提取多维的特征用于后面的特征匹配模式识别算法。字符识别：将当前字符提取的特征向量与特征模板库进行模板...
2018-04-18 16:47:04
10552
原创 Ubuntu16.04 报错ImportError: torch.utils.ffi requires the cffi package
Traceback (most recent call last): File “/home/warp-ctc/pytorch_binding/setup.py”, line 7, in from torch.utils.ffi import create_extension File “/usr/local/lib/python2.7/dist-packages/torc...
2018-04-18 11:56:42
6315
9
原创 ubuntu16.04安装 tkinter
raise ImportError(str(msg) + ', please install the python3-tk package')ImportError: No module named '_tkinter', please install the python3-tk package解决办法：首先udo apt-get update然后sudo apt-get ins...
2018-04-11 15:18:20
5800
原创 自然语言处理领域的相关干货整理
自然语言处理（NLP）是计算机科学，人工智能，语言学关注计算机和人类（自然）语言之间的相互作用的领域。本文作者为NLP初学者整理了一份庞大的自然语言处理领域的概览。选取的参考文献与资料都侧重于最新的深度学习研究成果。这些资源能为想要深入钻研一个NLP任务的人们提供一个良好的开端。论文自动评分论文：Automatic Text Scoring Using Neural Networks...
2018-04-09 14:42:06
2198
原创 yolov3报错
hy@hy-desktop:~/2018-ocr/darknet$ ./darknet detector train cfg/voc.data cfg/yolov3.cfg darknet19_448.conv.23 yolov3layer filters size input output 0 conv 3...
2018-04-08 11:10:53
1921
4
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人