- 博客(170)
- 资源 (5)
- 收藏
- 关注
RSS订阅
原创 Windows在pip install tensorflow遇到的问题 一些python安装包的时候，超时问题以及权限问题
交代一下环境，win10系统，已经装了anaconda。现在是要安装TensorFlow选择直接安装TensorFlow，一般直接pip install tensoflow 就可以了。但是我安装的时候遇到两个问题。就是下面的两个问题。然后逐一解决了，就可以安装了Windows在pip 一些python安装包的时候，超时问题以及权限
2017-10-25 20:12:37
18331
3
转载 使用Pycharm 连接内网服务器
配置跳板机和服务器的免密登录，实现方式有多，这里只列出了一种方式。在本地配置在config文件中输入以下内容完成配置后在本地登录一次跳板机.登录跳板机，并在跳板机配置在config文件中输入以下内容完成配置后在跳板机上登录一次内网服务器。
2024-02-27 23:36:27
42
原创 Latex multirow 的使用方法，内容居中
改动：\multirow{4}{*}[-1.5ex]{\textbf{SL}}，往下移动-1.5ex距离，+1.5ex就表示往上移。multirow 宏包提供了 \multirow 命令可以在表格中排版横跨两行以上的文本。width 设定该栏文本的宽度。如果想让 LaTeX 自行决定文本的宽度，则用 * 即可。bigstructs 此为可选项，主要是在你使用了 bigstruct 宏包时使用。fixup 此为可选项，主要用来调整文本的垂直位置。主要讲一下，怎么让跨几行的内容上下左右都居中。
2022-09-22 22:15:24
6621
1
原创 Elsevier latex模板 三级标题斜体改直体
在排版LaTeX时候，感觉elsevier三级标题斜体看上去不太好看，不太工整于是修改在cas- 搜索“sssectionfont”，"sss"表示subsubsection，找到下面一条代码\def\sssectionfont{\rmfamily\fontsize{10.5pt}{12pt}% \fontseries{b}\fontshape{it}\selectfont}把\fontshape{it}去掉改成\def\sssectionfont{\rmfamily\fonts.
2022-05-29 11:41:19
1781
3
原创 pytorch如何freeze模型参数
pytorch如何freeze模型参数在做迁移学习或者自监督学习时，一般先预训练一个模型，再将该模型参数作为目标任务模型的初始化参数，或者直接freeze预训练模型，不再更新其参数。今天记录下如何pytorch freeze模型参数我是参考知乎一个文章，总结的很完整，我直接拿过来用了，原文出处为https: // www.zhihu.com / question / 311095447 / answer / 589307812from collections.abc import I
2020-10-16 16:22:55
7972
3
原创 MacOS 更新了matplotlib后import出错
错误：ImportError: Python is not installed as a framework. The Mac OS X backend will not be able to function correctly if Python is not installed as a framework. See the Python documentation for more information on installing Python as a framework on Mac OS
2020-08-26 12:28:50
262
原创 进入Linux后中断出现(base)或没有base
关于这个问题，有一些类似的问题，比如“如何改变Linux系统默认Python路径”，"如何去掉Linux用户中断出现的（base）"先说明我的情况，我是习惯了带（base）的终端，因为这样终端会用不同颜色区分文件或者文件夹，看起来很舒服。先解释为什么会有（base）的出现 ，是因为在打开终端的时候自动 执行了 conda activate base 就会出现(base)。...
2020-04-19 21:01:25
7068
原创 Did you mean to set reuse=True or reuse=tf.AUTO_REUSE in VarScope? Originally defined at:
在使用Inception V3等预训练模型，训练新的模型的时候，出现以下错误ValueError: Variable InceptionV3/Conv2d_1a_3x3/weights already exists, disallowed. Did you mean to set reuse=True or reuse=tf.AUTO_REUSE in VarScope? Originally...
2020-04-17 16:57:20
2776
原创 Latex中单引号，双引号
写论文时候，需要写出英文的单引号和双引号单引号就是' '这个符号双引号的话，如果输入两个英文输入下的""，比如"paper"，LaTeX编译显示的话就是两个向下的引号。正确应该是第一个向上方向的引号 用 ` `这个符号,就是输入两个下图的键盘上的符号，所以正确应该为 ： ``paper"...
2020-02-21 23:31:34
15205
原创 MacOs的Pycharm卸载，安装
最近想卸载Pycharm2019.3版本，重新安装，发现在应用程序中 移除后，再安装，发现都是以前默认的东西，也默认加载了以前的工程等。这是因为，我们还有很多缓存，日志，默认设置偏好都没有彻底删除干净......一下几个命令可以删除这些，不过需要妥善删除。参考这篇博客：原文链接：https://blog.csdn.net/weixin_42288822/article/details...
2020-02-19 12:36:14
2566
原创 LaTeX论文修改时，序提交一版具有annotation标记的marked版本论文
论文修改时，序提交一版具有annotation标记的marked版本论文，如何方便的在LaTeX上修改我是在原版上修改，把修改的部分写在\textcolor{black}{所修改的文字}里面，生成最终修改版本。生成有标记版本时，将所有\textcolor{black}替换成\textcolor{red}这样修改的部分就能全部标记成红色。...
2020-01-04 17:10:55
1377
原创 LaTeX给文件加下划线，出现参考文献也加了下划线
写paper的时候，需要给一些文字加下划线，使用的是\underline命令，但是这个命令会因字母原因导致不对齐，看上去很丑，所以加入这个包\usepackage{ulem}，使用\uline命令，这样就对齐了。这又带来了一个问题（这个问题可能和期刊模板有关，没验证），就是参考文献中会议期刊名都自动加了下划线，解决方法是在最后的参考文献命令前面加入\normalem，如下所示。这样...
2019-11-05 22:34:35
5645
3
原创 写paper新体会
以前发表的两篇paper，感觉写得很佛系，没有时刻体会写paper的要点，就这样写完了，经过大修小修也accept。但现在经过导师的狂怼，发现写论文是真的难，考验的是语文，英语，语文考逻辑，英语考写作，要搞出好文章，数学还要牛逼。越往上的研究，语数外打天下啊！...
2019-08-16 20:27:49
199
原创 Arxiv上传文章的注意事项
1. 使用edu校园邮箱，这样不需要其它人授权，也就是endorsement相关的问题。（163，谷歌都湿了，不行）2. 上传Latex源文件，注意，所有文件都要在同一目录下，如果你LaTeX排版时候，比如图片是在某个子目录下的，需要修改tex源码的图片地址3. 参考文献需要bbl格式的参考文献，bib不可以4. 上传title，abstract时候可能会有一些bad characte...
2019-07-21 00:20:12
2912
原创 服务器上非root用户账号pip安装命令
一般使用服务器，都会被分配一个账号，用，每个用户安排一个文件夹.....那么这种非root用户如何利用pip安装包呢？pip install --user packagename
2019-04-15 19:33:42
2880
转载 Linux 环境下载百度Linux 环境下载百度云资源，Firefox插件(百度网盘助手)
Linux 环境下载百度云资源，Firefox插件(百度网盘助手)https://blog.csdn.net/a499957739/article/details/79593286转载上面链接的，就不自己写了，用的时候直接用好了...
2019-04-15 14:05:57
742
原创 bert-as-service三行代码使用bert模型
bert火了，许多应用都可以直接使用bert模型生成embedding。今天记录下很好用的工具，bert-as-service。我的环境是在macOS下的。先一顿pip，pip install bert-serving-server # serverpip install bert-serving-client # client, independent of `bert...
2019-04-10 16:07:06
20370
16
原创 解决pytorch在pycharm中某些函数不能自动提示
好久没有写博客了，虽然不是大佬，但是还是可以一点一点记录一下的，毕竟很多都是自己折腾自己踩得坑，值得记录一下。争取硕士毕业进入博客前10000名哈哈，还有三个多月。---------------------------------------------------------------------今天主要记录下Torch在pycharm中无法自动提示。网上的答案比较少，或者许多人没...
2019-03-12 12:30:03
9116
6
转载 import 一些已有的模块，会出现红色下划线
导入tensorflow,以及使用print，都会出现红色下划线，然而程序是没有错误的。这种情况其实可以不用管，是可以正常运行的； 但是，如果看着不舒服，可以进行以下过程进行设置即可： file->settings->project->project structure->点击项目路径->点击Excluded。然后确定就正常显示了感谢https://b...
2019-01-29 18:41:48
7331
原创 搞懂一般的stacking和blending只需一张图片
搞懂一般的stacking和blending只需一张图片，搞不懂我把这张图片的纸吃了！！！下面再简单参考一下其他博主的对于这两种集成方法的比较：Blending的优点在于：1.比stacking简单（因为不用进行k次的交叉验证来获得stacker feature）2.避开了一个信息泄露问题：generlizers和stacker使用了不一样的数据集3.在团队建模过程中，不需...
2018-08-30 21:36:27
1386
2
原创 三张简图搞懂GBDT
首先假设你有初步的了解什么是决策树，CART树，集成，Adaboost, boosting的一些概念。下面我们先了解什么是提升树 都知道，在每个基分类器（CART树）生成的过程，有一个最小化损失函数的步骤，那么对于回归树来说，当我们使用的损失函数是平方损失误差的话，来看看是什么情况：（注意图片上的标注红字）看了红字，我觉得大家应该能理解有些书上说的残差，拟合什么的了。...
2018-08-29 10:00:28
1837
1
原创 Process finished with exit code -1073741819 (0xC0000005)
在pycharm中只要一导入matplotlib.pyplot就会直接退出，然后报错，Process finished with exit code -1073741819 (0xC0000005)。import matplotlib.pyplot as plt都会报错。 解决方法：卸载了此时的matplotlib然后重新安装了一个然后就好了...
2018-07-21 14:09:00
4858
6
原创 ValueError: Variable word_encoded/bidirectional_rnn/fw/gru_cell/gates/kernel already exists, disallo
在搭建网络的时候，出现类似这样的错误，说变量Variable word_encoded已经存在，这个word encoder是我的name scope中的一个。问题出在这样，我重复使用了这个命名，我有个函数是这样的：def A(inputx): name_scope('word_encoder') .....我在网络中分别使用这个函数处理了两个数据A(inputx1)A(input...
2018-05-29 18:45:30
1913
原创 如何扩大虚拟机ubuntu系统的硬盘容量
首先，我们在虚拟机上，扩充硬盘大小，具体我是参考别人的，大家也可以参考一下吧，挺简单的。https://jingyan.baidu.com/article/fb48e8be149d486e622e14f2.html根据上面链接的操作，你会发现虚拟机设置的界面里面虚拟机的硬盘容量已经达到你设置的大小了，但是在你进入虚拟机看你的系统容量的时候，发现根本没有变化，也就是说上面这个链接根本没有达到我们想扩...
2018-05-29 10:06:51
5221
2
原创 升级pip后出现ImportError: cannot import name main
在Ubuntu中，升级了pip,再次使用pip 安装相关的python包的时候就出现以下错误ImportError: cannot import name main解决：pip文件在usr/bin目录下，cd进去，进行以下修改把下面的三行from pip import mainif __name__ == '__main__': sys.exit(main())换成下面的三行from p...
2018-05-10 16:11:44
80612
18
原创 python2.7和anaconda python3.5共存，并且切换自如
最近在写程序的时候，由于需要用python2.7的环境来测试代码，饼子这种环境下提交相关的代码，所以就需要使用python2.7。以前使用过2.7,所以电脑上有保留。现在这个阶段使用的是anaconda的python 3.5，所以需要调整系统的环境变量，来切换python的默认解释器。一定是要调整系统变量中的path,将python2.7的安装目录上移动到顶部，作为系统的首要选项...
2018-05-09 20:19:58
2468
原创 python3代码用python2跑的兼容性总结
这几天在搞一个比赛，攒点经验，但是我平常都是使用python3来写代码的，但是比赛在提交结果的时候，系统时使用python2.7的，并且是在linux下。所以代码之间可能存在许多兼容性的问题，我的py3代码不能再py2平台上运行，为了解决这个问题，把遇到的解决兼容性的方法列出来，以便下次查看与使用。1. 一般在py3中读写文件时都喜欢加一个参数encoding='utf-8'，但是这种用法在py2...
2018-05-08 08:47:31
4254
2
原创 tensorflow处理文本时加载字典与保存字典
在处理nlp数据时，通常将文本处理成词在字典中的序号组成的序列，在tensorflow中直接使用下面的函数from tensorflow.contrib import learn#加载模型，利用训练语料形成的字典vocab_processor=learn.preprocessing.VocabularyProcessor.restore('vocab')vocab_processor=learn...
2018-04-27 22:23:00
2772
原创 TensorFlow加载模型的时候注意事项
自己在根据训练集训练好相关模型后，再去利用该模型去获得训练集和测试集的深度特征表示。但是在获取测试集的特征表示的时候出现如下错误： tensorflow.python.framework.errors_impl.InvalidArgumentError: Assign requires shapes of both tensors to match. lhs shape= [14351,128] ...
2018-04-14 14:39:03
4078
1
原创 Pycharm运行程序直接跳出exit with code 1073740791(0xc0000409)
在tensorflow程序，在pycharm中运行，在运行到某一步的时候，程序直接跳出，然后不报其它错，只出现一句话，exit with code 1073740791(0xc0000409)查阅了相关博客的介绍，说是可能由于显卡内存不足，直接退出了IDE。然后我想了一下，我用print来查看出错地方，然后发现是我一次运算过程中，需要一次计算很多数据，所以我去掉了这个步骤或者减小了这个步骤的计算量...
2018-04-12 22:43:14
10228
原创 tensorflow训练网络时loss出现nan值，准确率为0的问题解决方法（尝试）
问题：在使用tensorflow训练网络的时候，发现每次一个batch训练时，它的loss都为nan,导致准确率都为0。nan是代表无穷大或者非数值，一般在一个数除以0时或者log(0)时会遇到无穷大，所以你就要想想是否你在计算损失函数的时候，你的网络输出为0，又计算log,从而导致出现nan。网上也有很多原因的解释，比如学习率过大，batch过大，或者本身数据就很脏等等原因，我尝试减小学习率，从...
2018-04-11 08:24:16
30827
15
原创 leetcode top 100 的121_BestTimetoBuyandSellStock
这是leetcode top 100 的121_BestTimetoBuyandSellStock。Say you have an array for which the ith element is the price of a given stock on day i.If you were only permitted to complete at most one transaction ...
2018-03-21 09:21:05
268
原创 leetcode Top100 之MaximumSubarray/MergeTwoSortedLists
这是leetcode top 100中的21、53题第21题，将两个有序的链表，拼接在一起。package leetcodeJava.array;public class top100_21_MergeTwoSortedLists { /** * Definition for singly-linked list. * public class ListNode { * ...
2018-03-20 10:19:41
254
原创 leetcode之top100_01_twoSsum/top100_20_ValidParentheses
top100第一题，是给定一个整型数组，然后给定一个target，让你求数组中两个数的和为target，然后然后返回这两数的下标索引。import java.util.HashMap;import java.util.Map;public class top100_01_twoSsum { public static int[] twoSum(int [] nums,int targ...
2018-03-19 10:15:42
272
原创 关于bitmap结构的大数据场景应用
参考文献：http://blog.csdn.net/hguisu/article/details/7880288http://blog.csdn.net/xiaoliangsky/article/details/38473595?utm_source=tuicool给定一个文件，里面包含40亿个整数，写一个算法找出文件中不包含的一个整数，假设你有1GB的内存可以用。如果只有10MB 的内存呢？解析...
2018-03-16 14:06:18
1034
转载 经典大数据处理十道题
第一部分、十道海量数据处理1、海量日志数据，提取出某日访问百度次数最多的那个IP。 此题，在我之前的一篇文章算法里头有所提到，当时给出的方案是：IP的数目还是有限的，最多2^32个，所以可以考虑使用hash将ip直接存入内存，然后进行统计。 再详细介绍下此方案：首先是这一天，并且是访问百度的日志中的IP取出来，逐个写入到一个大文件中。注意到IP是32位的，最多有个2^32个IP。同样可以采用映...
2018-03-15 16:47:43
4313
2
转载 KMP算法理解
参考这篇博客http://blog.csdn.net/qq_33323162/article/details/52397814加了点文字，有助于自己理解程序员代码面试指南（左程云）读书笔记 第九章KMP算法详解（今天听力左程云老师在牛客网上的课，讲的其中一个就是kmp，所以决定把这个过程记下来，巩固学习。）题目：给定两个字符串str和match，长度分别为N和M。实现一个算法，如果字符串str中含...
2018-03-10 10:03:37
758
3
原创 766. Toeplitz Matrix
A matrix is Toeplitz if every diagonal from top-left to bottom-right has the same element.Now given an M x N matrix, return True if and only if the matrix is Toeplitz. Example 1:Input: m
2018-01-30 14:00:46
204
原创 561. Array Partition I
Given an array of 2n integers, your task is to group these integers into n pairs of integer, say (a1, b1), (a2, b2), ..., (an, bn) which makes sum of min(ai, bi) for all i from 1 to n as large a
2018-01-29 22:40:42
196
Spark升级后无Logging类
2018-11-06
(Yoav Goldberg)Neural Network Methods for Natural Language Processing适合nlp进阶
2018-01-10
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人