- 博客(4)
- 收藏
- 关注
RSS订阅原创 搭建hadoop、SPARK，安装PySpark和notebook，实现简单实例文件分别在local、standalone、yarn和k8s上的运行
搭建hadoop、SPARK，安装PySpark和notebook，实现简单实例文件分别在local、standalone、yarn和k8s上的运行——大数据作业准备一、安装jdk二、安装hadoop集群1.设置SSH免密钥2.hadoop下载及环境配置3.hadoop配置相关文件4.分发和启动Hadoop三、安装zookeeper1.zookeeper分布式集群搭建2.修改相应的配置文件四、安装spark1.下载安装scala1.搭建spark集群2.启动spark集群准备 准备了三台虚拟机，配置网
2021-09-30 09:12:10
193
原创 对比学习
对比学习首先介绍自监督学习方法对比学习细节首先介绍自监督学习自监督学习属于无监督学习范式的一种，特点是不需要人工标注的类别标签信息，直接利用数据本身作为监督信息，来学习样本数据的特征表达，处理任务。方法1.Generative Methods（生成式方法）这类方法以自编码器为代表，主要关注pixel label的loss。举例来说，在自编码器中对数据样本编码成特征再解码重构，这里认为重构的效果比较好则说明模型学到了比较好的特征表达，而重构的效果通过pixel label的loss来衡量。2.Con
2021-04-09 16:59:59
366
原创 TypeError: tuple indices must be integers or slices, not tuple
TypeError: tuple indices must be integers or slices, not tuple针对这个问题，是因为匈牙利算法在python库中发生了变化，通过from sklearn.utils.linear_assignment_ import linear_assignment得到的结果与from scipy.optimize import linear_sum_assignment as linear_assignment得到的结果不一样，而sklearn库中的这个方
2021-04-09 16:58:58
5058
4
原创 target = target.cuda(async=True) SyntaxError: invalid syntax
target = target.cuda(async=True)SyntaxError: invalid syntax针对此错误是由于python3.7丢弃了async，改为non_blocking了，将对应的async改为non_blocking即可。
2020-11-18 20:00:16
6521
3
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人