- 博客(157)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 凸面镜反射场景无监督域适应语义分割的一些问题
大家好，我是来自北京大学的石永杰同学，最近我们组的工作《Unsupervised Domain Adaptation for Semantic Segmentation of Urban Street Scenes Reflected by Convex Mirrors》被IEEE Transactions on Intelligent Transportation Systems (T-ITS)接收，传送门https://ieeexplore.ieee.org/document/9903282
2022-10-19 20:55:57
807
原创 北大研究团队提出凸面镜反射场景语义分割UDA，超越基线10个点！
最近，来自北京大学的研究团队提出凸面镜反射场景无监督域适应语义分割算法《Unsupervised Domain Adaptation for Semantic Segmentation of Urban Street Scenes Reflected by Convex Mirrors》，该工作也是目前学术界内第一篇有关凸面镜场景理解的工作，发表在IEEE Transactions on Intelligent Transportation Systems (T-ITS)上，作者单位为北京大学智能学院。
2022-10-18 16:11:57
1538
2
原创 凸面镜反射场景的无监督预适应语义分割
最近，我们组的关于凸面镜反射场景无监督域适应语义分割的工作《Unsupervised Domain Adaptation for Semantic Segmentation of Urban Street Scenes Reflected by Convex Mirrors》被IEEE Transactions on Intelligent Transportation Systems (T-I...
2022-10-18 16:03:00
1260
原创 python列出文件夹下所有的文件
import osall_file = []def gci(filepath):#遍历filepath下所有文件，包括子目录 files = os.listdir(filepath) for fi in files: fi_d = os.path.join(filepath,fi) if os.path.isdir(fi_d): ...
2022-01-12 18:26:00
4395
原创 MSMT17_V1 reid数据集onedrive下载
主要是看zhedong的reid的github(https://github.com/layumi/Person_reID_baseline_pytorch#getting-started)。对数据集的要求貌似是要有train，test文件夹，以及一堆txt文件，然而百度盘下载就贼慢，所以上传到了阿里云，然而阿里云不支持分享zip文件。所以上传到了onedrive，链接如下https://p...
2022-01-09 21:32:00
1811
1
原创 colab pro 编辑bash文件，运行时提示$‘\r‘: command not found
最近赶实验进度，加上colab pro中的p100有16g，大batch跑起来比较快所以开了一个colab pro会员，但是colab24小时自动clear，所以有一个自动配置环境的网上的解决方法虽多，但是对于colab都不太友好一种简单的方法是在colab中使用vim编辑，colab不自带vim，需要apt-get install vim在colab pro中得terminal中使用...
2021-12-30 19:27:00
600
1
原创 pytorch新的layer，debug梯度能否传过去
常常遇到诸如以下之类的问题one of the variables needed for gradient computation has been modified by an inplace operation:一种推荐的方式是经过新layer的变量，直接torch.sum(变量).backward()，看一下是否报错，每经过一层自己的layer，或者每经过一个操作，就可以做这种操作，如...
2021-12-28 19:48:00
799
原创 pytorch中的标准化的tensor转图像
常常在工作之中遇到将dataloader中出来的tensor成image，numpy格式的数据，然后可以可视化出来但是这种tensor往往经过了channel变换(RGB2BGR)，以及归一化(减均值除方差)，然后维度的顺序也发生变化(HWC变成CHW)。为了可视化这种变化比较多的数据，在tensor转numpy之前需要对tensor做一些处理如下是一个简单的函数，可以可视化tensor...
2021-12-07 20:01:00
1923
原创 一种操作google drive文件的方法
利用google 的colab，建立notebook，然后可以在cell中运行terminal的命令。因为可以在google colab中挂载google drive网盘，所以google drive中的所有文件都可以在colab中进行操作，挂载显示如下比如右侧就是我在colab中建立notebook，然后对zip文件进行解压。要知道，如果在本地解压zip文件，然后上传google dri...
2021-11-30 19:23:00
3359
原创 Typora+坚果云插图设置
需求是这样的：我可能会在不同的设备编辑markdown，并且这个markdown是在坚果云中同步的，文字当然没问题。但是如果markdown插图图像的话，并且这个图像是的引用路径是一台设备的绝对路径，则在另一台设备用打开坚果云的markdown的文件就会出现找不到，因为在另一台设备的markdown中的绝对路径并没有该图片所以如果插图的时候能自动复制到坚果云，并且是用相对路径就会好很多，在t...
2021-11-16 11:07:00
551
原创 从ubuntu向windows拷贝数据
一般而言，如果ubuntu和windows链接同一个交换机，并且使用的网线都是千兆网的话，理论上拷贝的速度都是千兆的，即100M/s的速度。windows上拷贝的工具是scp。在此之前，先介绍一下windows上切换目录的命令。windows输入cmd，会得到命令提示符界面，如果想切换到某个盘的话(以D盘为例)，只需要D:即可，即盘符+冒号比如我将某一个文件(注意这里是一个文件，可以是z...
2021-11-11 13:54:00
1799
原创 latex表格调整行距
主要是在表格环境中插入这两句\begingroup\setlength{\tabcolsep}{10pt} % Default value: 6pt\renewcommand{\arraystretch}{1.5} % Default value: 1一个是调整列距离，一个是调整行距离然后表格前后的对比为以下为源码%\title{LaTeX Table spacing exampl...
2021-10-29 14:02:00
7067
原创 latex插图自动在双栏的最top，IEEE期刊格式
众所周知，\begin{figure}的时候，会有htbp的选项，我尝试使用第一个h表示here，去掉之后发现
2021-10-28 12:04:00
785
原创 latex插图\begin{minipage}强制左移\hspace命令
事情是这样的，我在latex中插图，上面一张图是排列整整齐齐的图片，下面一张图就是我绘制的概率密度图，在使用latex插图的时候，因为概率密度图的纵坐标是有title的，所以会显得不整齐，如下图所示在includegraphics前面添加了hspace命令之后，就变成如下所示...
2021-10-26 11:50:00
13383
3
原创 SYNTHIA-RAND-CITYSCAPES数据集云盘下载
最近SYNTHIA-RAND-CITYSCAPES的官网总是崩溃，小伙伴们不能下载数据，特意压缩了下上传阿里云盘链接 https://pkueducn-my.sharepoint.com/:u:/g/personal/shiyongjie_pku_edu_cn/ESJ7hh_A30xAk1aLIvkZ_fAB-fW9QK5RTZEFJlgoTp5QwA?e=xVOtFR里面的RAND_CIT...
2021-10-20 10:09:00
1530
5
原创 一种用于多张图片同时缩放比较细节的软件faststone
在做超分或者是做实验可视化图片的细节的时候，需要同时比较不同图片的细节，有一个软件比较好用，为faststone链接为：https://www.faststone.org/
2021-10-13 15:30:00
496
原创 vim+putty+右键粘贴+进入visual mode 解决办法
一般我都是使用putty链接服务器，编辑文件的时候，使用右键粘贴文本。最近链接另外一个中文服务器的时候变不好使了，不知道和中文这个原因有没有关系。网上搜了很多方法，建议的是修改系统/etc或者是/usr下的vimrc文件，但是都没有用解决的办法是在用户目录创建一个~/.vimrc文件，然后输入if has('mouse') set mouse-=aendif...
2021-10-04 12:56:00
447
原创 行人重识别-全局特征和局部特征（二）
全局特征全局特征指每一张行人图片的全局信息进行一个特征抽取，得到一个向量，没有包含任何空间信息。没有spatial信息会有问题有时候，一个人只有上半身，一个人只有下半身就很蛋疼。所以全局特征会遇到瓶颈。为了解决这个问题，提出局部特征局部特征局部特征是对图像的某一个区域进行特征抽取，最后将多个局部特征融合起来得到最终特征切片，从上到下，符合人体拓扑结构姿态，利用姿态估计模型将人的姿...
2021-09-18 20:07:00
1734
原创 行人重识别初学（一）
主要是看b站一个链接上的视频，然后做了一些笔记，尝试对REID有一些理解行人重识别系统如下图所示一般是由行人检测和行人重识别两个问题组成，这两个问题是学术界里面两个不同的研究方向，比如行人检测可以用faster rcnn或者其他之类的检测框架但是对于reid则是使用检测出来的行人的结果来做所以实际上是两个不同的任务重识别的方法一般分为两种，一种是表征学习，一种是度量学习。表征...
2021-09-18 16:56:00
431
原创 matplotlib plt.legend方框放置在任意的位置
之前用matplotlib的时候，调用plt.legend的时候，会传入一个参数，loc，loc的位置只是有限的，比如但是有时候这种有限的位置并不能满足需求，比如我绘制直方图的时候，只有中间有些区域是空白的，我想将legend放置在空白区域，就需要设定legend的位置比如我想放在这一片空白区域，用loc属性就不能够设定放在任意位置只需要调用在legend中传入bbox_to_anchor...
2021-09-01 17:27:00
2527
原创 python递归列出文件夹下所有文件的full_path
语义分割数据集idd和cityscapes是很类似的，他们可以产生相同的id意义的ground truth， 代码在https://github.com/AutoNUE/public-code可以设置和cs的类别意义一样的setting，idd根据json自动生成cs格式的gt因为advent的代码是传入cityscapes的路径list，所以需要获取诸如一个文件夹下所有子文件中的路径，即...
2021-08-27 19:51:00
272
原创 Mapillary Vistas数据集的label读取的坑，对比opencv和PIL读取图像的差异
下载了一个Mapillary Vistas的语义分割数据集，模仿cityscapes读取label的方式，用PIL进行label读取，发现不对劲解决的办法
2021-08-24 12:02:00
351
原创 cityscapes和Mapillary Vistas两种不同分割数据集的label映射
众所周知，cs一共有19类，但是Mapillary Vistas有很多类，在做domain adaption的时候，往往需要将二者的类别做一个映射如下表同时发现Mapillary Vistas这个数据集下载下来之后，对应的label咋instance这个文件夹下，优点奇葩...
2021-08-23 19:32:00
960
原创 cityscapes中road的划分
关于road的类别，作者给出了说明如下：Part of ground on which cars usually drive, i.e. all lanes, all directions, all streets. Including the markings on the road. Areas only delimited by markings from the main road ...
2021-08-19 12:01:00
145
原创 ubuntu16+2080ti 重装显卡驱动
问题背景是这样的，我们组服务器使用nvidia-smi命令的时候，显卡的显示停留在历史界面，即使重启，并没有跑任何程序，也是显示如下界面所以立马想到的办法就是重新安装驱动，但是安装的老方法都是去官网下载run文件，然后本地bash安装，其实还挺麻烦，记得之前就曾经在terminal安装过384的驱动，看了一下我们曾经的版本是410，所以通过以下两行命令卸载之后又重新安装sudo apt-g...
2021-08-18 11:31:00
148
原创 overleaf latex使用目录问题，pdf找不到
情况是这样的，我用overleaf进行latex编译，以前我都是将tex文件放到根目录，然后同级目录下创建文件夹，上传一些pdf啥的，这样可以直接指定相对路径但是我这个工程是直接上传的，如下图所示overleaf如果是上传工程的话，tex默认是在一个文件夹之中，并不是在根目录下，所以这个时候指定，哪怕带有完整的路径，也表示找不到pdf文件但是如果是latex中的\input命令输入tex...
2021-08-09 18:51:00
3359
原创 python opencv 与PIL库对于semantic label的最近邻插值对比
事情是这样的：因为要做分割图的缩放，但是segmentation map中的label的id的数值没有数值意义，就是表示第几类，所以对于label缩放的时候都是要用最近邻插值的，这样才有意义，否则插出来一个不知道的类别也没啥用。比如advent中的数据读取链接就是用PIL，然后对于Image对象进行resize的，链接有些数据集并不像cityscapes那么规范，比如synthia，这个数据集...
2021-08-08 15:59:00
303
原创 一次惨痛的debug的经历-RuntimeError: CUDA error: an illegal memory access was encountered
之所以说惨痛是有原因的。这个错误有人严重怀疑是显卡和pytorch二者之一有一个是有问题的，也曾经想一度放弃，最后还是分享我的解决方法是啥，不确定对大家都适用。一开始遇到这个错误，报的是我写的一个模块内的：File "/gpfs/share/home/1601111331/uda_for_convex/convex_mirror_block/convex_mirror_block.py", ...
2021-07-29 20:05:00
11161
7
原创 labelme安装使用，以及标注我们自己的数据
目录使用labelme对图像进行语义分割标注写在前面语义标注软件安装软件使用下载修改之后的仓库进行标注标注过程见教程链接.数据可视化使用labelme对图像进行语义分割标注写在前面这个文档旨在教大家如何使用labelme软件进行语义分割标签的标注。语义标注cityscapes里面有效的标注是19类，还有很多虽然标注了，但是是无效的类别。序号名称category说明(CS的官...
2021-07-06 15:20:00
660
原创 SPADE阅读笔记
SPADE阅读笔记目录SPADE阅读笔记作者的方法spatial-adaptive denormalizationSPADE generator为啥SPADE work better？同样的，作者提出一个simplt but effective layer，给定一张分割的图，作者能够合成photorealistic images.作者说，normalization layer能够wash wa...
2021-06-02 14:35:00
1092
原创 CYCADA: cycle-consistent adversaial domain adaption阅读笔记
CYCADA: cycle-consistent adversaial domain adaption阅读笔记目录CYCADA: cycle-consistent adversaial domain adaption阅读笔记作者的方法adversarial objectivecycle consistencysemantic consistencyfeature level之前方法是在feat...
2021-06-02 14:32:00
794
1
原创 Arbitrary Style Transfer in Real-time with Adaptive Instance Normalization论文阅读笔记
Arbitrary Style Transfer in Real-time with Adaptive Instance Normalization论文阅读笔记目录Arbitrary Style Transfer in Real-time with Adaptive Instance Normalization论文阅读笔记backgroundBNINCINAdaIN训练这篇文章是基于gatys...
2021-06-02 14:28:00
278
原创 Learning from synthetic data: addressing domain shift for semantic segmation阅读笔记
Learning from synthetic data: addressing domain shift for semantic segmation阅读笔记目录Learning from synthetic data: addressing domain shift for semantic segmation阅读笔记作者的方法对于网络的描述对于source和target data的对待迭...
2021-06-02 14:24:00
136
原创 pytorch计算图扩大，反传变慢问题debug
是这样的，我自己写了一个block，这个block的内容如下# 为了更加集成，给定两个角度，生成compact的倾斜图片class Compact_Homo(nn.Module): def __init__(self, device): super(Compact_Homo, self).__init__() # 假设内参数K为单位矩阵 ...
2021-06-02 11:25:00
1247
1
原创 NSGA-NET中的micro内部细节搜索
NSGA-NET中的micro内部细节搜索目录NSGA-NET中的micro内部细节搜索micro做了啥micro的编码方式random产生新个体交叉和变异交叉变异micro做了啥这篇文章的micro采用的是nasnet的搜索目标以及编码方式，只不过nasnet采用的是强化学习(如下图所示)，作者这里将其更改为ea相关的算法来进行优化。搜索的目标主要是一个normal cell和一个redu...
2021-05-26 14:12:00
294
原创 fbnetv3中的predictor
fbnetv3中的predictor目录fbnetv3中的predictor粗粒度搜索(Constrained Iterative Optimization)早停机制predictor training细粒度搜索搜索空间实验autotrain searchjoint search作者想做的是网络超参和网络结构的联合搜索，并且定义了如下的网络结构的候选值以及超参的候选值给定搜索空间\(\Om...
2021-05-26 14:11:00
297
原创 TAPAS与EVALUATING THE SEARCH PHASE OF NEURAL ARCHITECTURE SEARCH阅读笔记
EVALUATING THE SEARCH PHASE OF NEURAL ARCHITECTURE SEARCH目录EVALUATING THE SEARCH PHASE OF NEURAL ARCHITECTURE SEARCHTAPAS: Train-less Accuracy Predictor for Architecture Search相关工作作者的方法DCLDETAPNN ar...
2021-05-26 14:10:00
123
原创 Efficient Sample-based Neural Architecture Search with Learnable Predictor
我们想要的结果predictor的输入的形式predictor的结构predictor输出的结果和实际的表现对比Efficient Sample-based Neural Architecture Search with Learnable Predictor这篇文章做了啥作者说之前的方法很少有研究如何提升采样效率的，为了平衡exploitation和exploration，作者...
2021-05-26 14:09:00
79
1
原创 ACCELERATING NEURAL ARCHITECTURE SEARCH USING PERFORMANCE PREDICTION阅读笔记
ACCELERATING NEURAL ARCHITECTURE SEARCH USING PERFORMANCE PREDICTION目录ACCELERATING NEURAL ARCHITECTURE SEARCH USING PERFORMANCE PREDICTION作者的方法对learning curve的建模features数据集和训prediction performance17...
2021-05-26 14:08:00
75
原创 再读autoaug
目录再读autoaug算法总览关于operation的类型及搜索空间实验stepcifarsvhnimagenet数加速的策略再读autoaug算法总览使用RNN做controller，并且每次采样得到一个policy \(S\)，其中\(S\)包括使用哪种operation(数据增强操作)，幅度是多少，以及应用的概率用validation上的精度\(R\)作为reward作...
2021-05-26 14:07:00
335
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人