- 博客(618)
- 收藏
- 关注
RSS订阅原创 python执行export设置变量
linux中可以通过export进行环境变量设置，那么如何在python中通过export设置环境变量呢？下意识的以为是直接os.system。
2024-04-07 10:43:55
203
转载 【图像增强】图像分割中Albumentations同时增强原图与掩码
原文链接：https://blog.csdn.net/qq_43426908/article/details/121955919。其开源、快速、简单且增强方式很多：重要的是可以同时增强图像及其掩码，边界框或关键点位置等。深度学习中比较常用的是数据增强库Albumentations。
2024-02-18 09:23:52
111
转载 pycharm bash: 第 1 行:cd: D:/xxxxxxx: 没有那个文件或目录 No such file or directory
在pycharm远程调试运行时出现错误：这个目录是项目目录，实际上存在。
2024-01-28 17:39:14
669
转载 下载带坐标的高清历史影像（Google、World Imagery Wayback）
需要下些带坐标的高清遥感历史影像，但通过GEE、PIE、地理空间数据云、USGS等途径都找不到符合需求的数据。然后，在网上找了许多教程，发现目前可以通过ersi的World Imagery Wayback和谷歌地图能看到高分辨率的历史影像；但是要下载这两个来源的历史影像还是比较麻烦的，需要其他软件、科学上网等途径作为辅助。接下来我就把这两天学到的下载World Imagery Wayback和谷歌地图带坐标的历史影像分享一下，希望对在为下载高清历史遥感影像烦恼的同学有所帮助。
2024-01-17 10:15:20
1548
原创 【mmseg】‘SegDataPreProcessor is not in the model registry问题解决
在使用mmseg的模型进行推理导出为torchscript时出错： 出错原因是模块没在注册信息中找到，需要添加mmseg注册模块代码。 具体参考：Here is the answer : #9719 (comment)The whole thing can be fixed by adding this to you inference script :I explain some of what I understood in the issue above, it's
2024-01-12 15:24:36
733
原创 rpb/rpc文件说明与matlab读取
rpb文件是用来存储用于遥感数据几何校正的RPC（Rational Polynomial Coefficients ）模型的文件。类似的还有RPC文件，rpb与rpc文件只是格式不同，但包含的信息一致。其用于从图像坐标转换到地理坐标，L1级别的遥感数据是没有经过地理编码及几何校正的，因此可以通过数据包内的RPC文件进行数据几何校正（地理编码）。
2024-01-12 14:13:59
1347
转载 卫星RPC有理多项式模型原理与正反算实现（python）
后续也将基于这个简单的小库，做一些应用的演示。RPC可以将其理解为一个带畸变参数的相机模型，其描述的是从三维的地理坐标到二维的卫星影像坐标之间的转换关系，一般称之为从物方到像方，我们可以理解为3D到2D，这也被称之为正投影，具体为已知lon，lat，h，求得像素坐标s，l。而反向投影的则是从影像坐标系到地理坐标系，即从像方到物方，这里要注意的是，这仍然是一个3D到2D的关系，因为2D是无法升维到3D的，具体为已经s，l，h，求得lon与lat。分别为归一化的行列号，使用归一化值是为了减少计算过程中的误差。
2024-01-11 17:27:34
438
转载 GPU 利用率低常见原因分析及优化
优化：设置 torch.utils.data.DataLoader 方法的 num_workers 参数、tf.data.TFRecordDataset 方法的 num_parallel_reads 参数或者 tf.data.Dataset.map 的 num_parallel_calls 参数。如上图所示，GPU 任务会交替的使用 CPU 和 GPU 进行计算，当 CPU 计算成为瓶颈时，就会出现 GPU 等待的问题，GPU 空跑那利用率就低了。d、关于查询操作，多使用 dict 加速查询操作；
2023-11-25 21:39:19
728
原创 【CUDA】算子编译错误ATen/ATen.h: No such file or directory
在Torch1.10环境下，build含CUDA算子编译的工程时出错：build命令：错误：出错的主要原因是用于编译算子的torch版本不合适，升级Torch1.11后正常编译。
2023-11-09 22:46:33
715
原创 【mmrotate】*** is not in the task util registry
使用mmrotate-1.x 自定义类时，明明已经注册，并添加到__init__.py中，但提示没有注册。
2023-11-09 22:38:43
279
原创 【错误】 undefined symbol: cublasLtHSHMatmulAlgoInit, version libcublasLt.so.11
pip安装完pytorch=1.13.1后，build代码时出错：原因因为pytorch1.13安装时会给我们自动安装但由于一般用户已经安装CUDAtoolkit，所以会产生这个错误。
2023-10-17 15:54:20
469
原创 PyTorch Lightning错误TypeError: lr_scheduler_step() takes 3 positional arguments but 4 were given
使用PyTorch Lightning时对lr_scheduler_step定义如下： 出错： 出错原因是参数差异导致的，函数定义接收3个参数，但是实际调用的时候传参并不是3个，而是4个，可以在定义函数的时候使用参数列表，避免参数数量差异出错。参考：Error in `lr_scheduler_step()` function - LightningModule - Lightning AI
2023-08-23 07:30:46
240
转载 SSIM (Structure Similarity Index Measure) 结构衡量指标+代码
结构相似指标可以衡量图片的失真程度，也可以衡量两张图片的相似程度。与MSE和PSNR衡量绝对误差不同，SSIM是感知模型，即更符合人眼的直观感受。同样MSE下，不同SSIM展现的图片结果：SSIM的取值范围[-1, 1], 具有对成性，边界性，唯一最大性（当且仅当x=y时SSIM=1），是一种距离公式。
2023-07-31 19:05:44
824
转载 Coco数据集中的rle格式处理
原文链接：https://blog.csdn.net/xx_xjm/article/details/126608359。rle = {'size':[512,512],'counts': '一个很长的字符串乱码'}直接利用下面这条命令就可以得到二值mask。此时该如何转化为可以训练的mask呢？2：mask转rle。1：rle转mask。
2023-07-31 18:46:32
460
转载 docker gpu报错Error response from daemon: could not select device driver ““ with capabilities: [[gpu]]
Docker容器中使用Nvidia GPU报错 docker: Error response from daemon: could not select device driver “” with capabilities: [[gpu]]
2023-07-28 04:58:53
810
转载 PyQt5中多线程模块QThread使用方法
本文主要讲解使用多线程模块QThread解决PyQt界面程序唉执行耗时操作时，程序卡顿出现的无响应以及界面输出无法实时显示的问题。用户使用工具过程中出现这些问题时会误以为程序出错，从而把程序关闭。这样，导致工具的用户使用体验不好。下面我们通过模拟上述出现的问题并讲述使用多线程QThread模块解决此类问题的方法。
2023-07-21 11:47:42
1057
转载 Linux&Windows系统Qt应用打包发布
最近在发布Qt应用时遇到了一些困难，Windows还好，在Linux上面发布遇到了不少的麻烦（实际Linux应该简单才对），经过在网络搜索发现帖子不少，但都比较片面，现把Qt应用程序在Linux&Windows打包部署总结如下。
2023-07-21 11:42:11
426
原创 Linux下搭建pyqt5开发环境—基于Pycharm
防踩坑Tips：1、不能学windows那样直接用pip安装PyQt5Designer和pyqt5-tools。这两个模块最根本的是用的windows的程序，linux上是运行不了的，特别是PyQt5Designer，会提示安装失败。2、推荐在python环境安装同系统版本一致的pyqt，例如ubuntu18.04下默认安装的pyqt版本是5.10.1，则在python环境中也可以安装对应版本 pip install PyQt5==5.10.1。
2023-07-20 11:20:07
1648
转载 Linux顺序执行多行命令
在终端执行Linux命令时，有时需要顺序执行多行命令，每行命令的执行时间可能会很长时间，如果人为的逐条输入执行则会非常麻烦和不确定，也会很浪费时间。
2023-07-04 23:30:15
625
原创 pycocotools报错,NameError: name ‘unicode’ is not defined
参考：https://blog.csdn.net/weixin_43788752/article/details/130087686。据网上说应该是python2和3版本的问题，Python2 的unicode函数在 Python3 中不再使用。
2023-06-15 11:59:19
107
原创 【mmcls】mmdet中使用mmcls的网络及预训练模型
mmcls现在叫mmpretrain，以前叫mmclassification，这里为了统一称为mmcls。在基于MM框架的下游任务，例如检测(mmdetection)中可以使用mmcls中的backbone进行特征提取，但这就需要知道网络的参数以及输出特征的维度。本文简单介绍了在mmdetection中使用mmcls中backbone的方法。mmdetection中需要配置backbone、模型权重及neck的特征维度等信息。
2023-06-15 11:55:05
1600
转载 【MMDetection】ERROR:The testing results of the whole dataset is empty
使用MMdetection复现论文swin Transformer，显示错误：与此同时，各项评价指标如AP,AR结果趋于零，F1值变成-1，loss与grad_norm爆炸增加，具体情形如下图： 看到报错的第一眼，猜测可能是数据集的问题，所以检查了数据集的路径，然后检查了数据集里面是否有图片，但经过一番验证，排除了这种可能性。如果数据集本身有问题，代码一开始就无法运行起来，因为mmdet一定会报错，而且报错内容是：找不到数据集或者说找不到某张图片。再仔细观察报错：ERROR:The testing res
2023-06-14 17:24:55
811
2
原创 GitHub 下载某个程序的特定版本（代码）
可以强制切换分支以舍弃修改，再checkout。你当前文件夹下的源码会变成这个版本号的源码。git checkout +某版本号。git tag 列出所有版本号。git clone 下载源码。
2023-06-12 14:06:33
751
原创 平面坐标变换（单应性变换/Homography变换）
单应性(homography)变换用来描述物体在两个平面之间的转换关系，可以用于描述平移、翻转、缩放、旋转、仿射变换等。下面以翻转为例简单介绍其变换矩阵。将矩阵带入变换公式，可以得到实际的变换为：x' = w-x, y' = y。
2023-06-08 12:16:34
897
原创 MMDetection 3.x中的PackDetInputs
重新规范化了一下，更标准化的输入数据有利于进行检测 /语义分割 /全景分割。源码附在最后，其keys默认包括'img_id', 'img_path', 'ori_shape', 'img_shape', 'scale_factor', 'flip', 'flip_direction'。可以在函数定义的注释中查看，例如RandomFlip函数（mmdetection-3.0.0\mmdet\datasets\transforms\transforms.py）可以看到。关于源码理解可以参考这位博主的。
2023-06-08 11:47:21
744
1
转载 Python机器学习笔记：异常点检测算法——Isolation Forest
1，异常点检测算法使用场景什么时候我们需要异常点检测算法呢？常用的有三种情况。1.做数据预处理的时候需要对异常的数据做过滤，防止对归一化等处理的结果。2.对没有标记输出的特征数据做筛选，找出异常的数据。3.对有标记输出的特征数据做二分类时，由于某些类别的训练样本非常少，类别严重不平衡，此时也可以考虑用非监督的异常点检测算法来做。
2023-06-06 18:28:48
1344
转载 scikit-learn奇异值和异常值检测
判断新观测值是否与现有观测值具有相同的分布(它是一个内点(inlier))，或者应该被认为是不同的（它是一个离群值）。离群点检测和奇异值检测都用于异常检测, 其中一项感兴趣的是检测异常或异常观察。离群点检测又被称之为无监督异常检测，奇异值检测又被称之为半监督异常检测。在。相反的，在奇异值检测的背景下，奇异值/异常点只要位于训练数据的低密度区域，是可以形成稠密聚类簇的，在此背景下被认为是正常的。scikit-learn项目提供了一组机器学习工具，可用于新颖性或离群值检测。然后可以使用以下predict。
2023-06-06 18:25:49
656
原创 timm错误features_only not implemented for Vision Transformer models.
使用timm的ViT模型时出错：features_only not implemented for Vision Transformer models.
2023-06-05 19:05:17
315
转载 mmdetection修改backbone使用mmcls和timm已有模型
官方文档对更换backbone已经有了比较详细的介绍，特别是较新的版本已经支持mmcls库以及timm库中的现有分类网络，一般直接拿来修改使用即可，但这里最重要的一点就是需要保证修改后的backbone要和后面的neck结构进行进行匹配，主要是通道数方面。目标检测模型的通用结构如下图所示，如果更改backbone后导致于neck的结构不适配，将导致模型失效报错。
2023-06-05 18:51:59
882
1
转载 git如何进行断点续传
当git项目较大或网速不快的情况下，git clone可能会中断，其不支持断点续传，导致要重新操作，那如何进行断点续传呢。为了在断掉后，自动git fetch, 我写了一个bash脚本样例， 会循环执行，重试2000次，直到成功后退出。5.命令行执行 git remote add origin [项目地址]1.新建目录, 命令行进入目录，执行 git init。2. 命令行执行： git fetch [项目地址]3. 若断掉后，重复执行步骤2， 直到完成下载。
2023-06-01 11:34:31
1704
转载 nvidia-smi 在 MIG M. 出现 Disabled
两卡的 NVIDIA A100 服务器，在输入命令 nvidia-smi 时，出现了和之前不同的界面，如下图所示：在最右列的选项中，除了 Uncorr. ECC 和 Compute M. 之外，还多出了一个 MIG M. 选项，并且其状态置为。
2023-05-30 14:53:36
601
原创 MMRotate注册模型无法使用，提示is not in the model registry
使用MMRotate注册了backbone模型后，发现无法使用，出现错误：模型中的伪代码如下：（这里是mmrotate-1.x/mmdet-3.x，用法与mmrotate-0.x/mmdet-2.x不同）
2023-05-24 16:17:09
1321
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人