- 博客(18)
- 收藏
- 关注
RSS订阅原创 使用x.org登陆时，显示“login failed for display 0“ 错误【ubuntu】【xrdp】【x.org】
使用x.org登陆时，显示"login failed for display 0" 错误
2023-10-30 16:49:21
1895
原创 浅析数仓分层：DB+ODS+DW+DM
本期将从结构层面了解数据仓库分层的几个名词和简单理解。文章目录1 理想的数据分层总体结构2 DB层：关系型数据库和非关系型数据库2.1 关系型数据库RDB2.2 非关系型数据库NoSQL3 ODS层：操作数据存储层3.1 ODS产生背景3.2 ODS在企业数据架构中担任的角色3.3 ODS层的特征3.4 ODS层的功能4 DW层：数据仓库1 理想的数据分层总体结构[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-CFfRleTt-1607275403838)(C:%5C.
2020-12-07 01:25:24
2366
2
原创 大数据专栏之工具安装（一）：CENTOS安装JAVA+HADOOP伪分布模式
近期要使用Hadoop这一套大数据工具，包括Hadoop、Hive 、Hbase 、 Spark 、 Flume 、 Sqoop、 Kafka、Zookeeper、impala、presto等在数据中台各层级会用到的工具。在接下来的一段时间里，作者将在此专栏分享以下内容，敬请关注：笔者将整理这一套工具的的从零开始安装和使用；MR、DAG、HDFS、GFS等底层概念整理；数据ETL相关内容：数据质量、数据同步、数据血缘、数据治理以及数据库建模；基于PYTHON/R 的数据分析案例分享以及相关工具.
2020-11-30 14:39:51
266
原创 【阿里云数据总线】Datahub使用Python SDK记录
文章目录1. 阿里云 python sdk的安装和使用1.1 PIP安装：1.2 使用AccessKey简单调用ECS2. Datahub Python SDK的安装和使用2.1 安装pydatahub2.2 使用pydatahub调用Datahub SDK2.2.1 导入pydatahub库包2.2.2 连接Datahub 2.2.3 创建新的project 查看已有的project2.2.4 创建新的Topic2.2.4.1 Tuple类型的Topice创建2.2.4.2 BLOB类型的Topice创
2020-11-24 21:52:17
1243
原创 postgresql 踩坑合集
docker 启动 postgresql ，navicat'连接报错： FATAL: password authentucation failed for user ‘xxx’
2020-11-02 19:56:07
488
1
原创 windows/linux: 离线安装python+python三方库的一种方法以及报错解决
windows或者linux通常会由于生产环境的原因，不得不离线安装，笔者也是走过一些坑，也参考了网上很多方法，一次偶然发现了如下最稳定和快捷的方法。一 离线安装python这一步没有什么好说的， python官网下载历史发布版本，笔者测试时windows生产环境选择的是python3.6.8，windows自然是选择executable installer版本的可执行程序。然后就是文件拷贝过去，一顿咔咔点，就完成安装了。二 离线安装python三方库1 可上网电脑环境准备在可上网电脑准备一.
2020-10-10 01:27:36
8097
5
原创 CSS 实现嵌套六边形边框
CSS 实现嵌套六边形边框期望输出原理即三个六边形组合而成。而六边形原理为：一个举行加上下俩三角形。实现HTML<div class="hex"> <div class="hex inner"> <div class="hex inner2"></div> </div></div>CSS.hex { margin-top: 70px; wi
2020-09-01 13:46:14
2491
原创 re.sub 使用技巧：捕获分组
Python re正则笔记（1）1. re.sub调用格式：re.sub(pattern, repl, string, count=0, flags=0)这里记录一下当repl参数为函数时的使用方法。方法一：import redef dashrepl(matchobj): if matchobj.group(0) == '-': return ' ' else: return '-' re.sub('-{1,2}', dashrepl, 'pro----gram-files')
2020-08-31 14:25:13
2630
1
原创 安装 ：win10 + CUDA 11.0 + cuDNN8.0.2 + Pytorch-gpu
安装 ：win10 + CUDA 11.0 + cuDNN8.0.2 + Pytorch-gpu前言注意： 点进来的各位，你以为这是一篇正常的教程篇吗？ 不是的！ 这是一篇劝退文。笔者安装cuda11+pytorch-gpu失败，故有此文。安装时间：2020-08-07原因安装CUDA和cuDNN时，请先打开Pytorch-gpu安装命令链接查看Pytorch是否有发布支持cuda11.0的binaries版本。结果如下图：可以看到，此时并无支持cud
2020-08-07 10:35:15
10585
29
原创 数据治理：数据血缘关系分析
数据治理：数据血缘关系分析此文章由百度的多篇文章归纳总结而成，以供本人学习和记录方便，不做任何商务用途，如有侵权，请联系我删除，谢谢！参考列表：微信 - 头哥侃码公众号：数据治理的大方向是Database Mesh？先把数据之间的血缘关系搞明白，咱再吹行吗？搜狐 - 数据大家：数据之间有血缘关系？数据治理不得不懂的血缘关系梳理方法 知乎 - NBI大数据可视化分析平台: 数据治理中的数据血缘关系是什么？用来解决什么问题相亲相爱的数据：论数据血缘关系文章目录数据治理：数据血缘关系分析前言
2020-07-16 16:33:14
21862
1
原创 WIN10专业版安装docker不成功的两种解决思路
WIN10专业版安装docker不成功的两种解决思路问题分析和解决思路问题win10 专业版（win10 pro）装最新版docker 时偶尔会发生如下图所示的错误:分析和解决思路上图中可以看到 win10 pro/企业版 15063+ 和win10家庭版19018+，记住这两个数字。在菜单搜索 powershell ，点击打开windows powershell ，依次键入以下指令：Get-WmiObject -Class Win32_OperatingSystem | % Caption
2020-05-12 17:39:20
3126
2
原创 python 3.x 小笔记（持续记录）
避免忘记，做个记录一、 基础1.1 排序 sort（）用法问题 ：怎么有条件的sort list？python 解决办法：from functools import cmp_to_key# sort关键字cmp在python3.x被弃用，补漏方法是引用functoolsa='byrrybryryb'arr=[]for i in a: arr.append(i)o...
2019-09-02 13:18:57
111
原创 python 获取一年中所有工作日列表来辅助计算工作时间内的时间差
python 获取一年中所有工作日列表来辅助计算工作时间内的时间差思路来源扣除一年365天（时间区间可自定义）中的节假日和周日休息日，得到工作日列表dataset，方便计算工作日与工作日之间的工作时间差。思路来源时间A: 2019-01-05 14:30:00 （周六）时间B: 2019-01-07 15:20:00 （周一）实际时间差： 时间B - 时间A = 2 天 0 小时 50 ...
2019-08-07 13:30:04
2771
1
原创 PYTHON实现排赛程（淘汰制）
PYTHON实现排赛程（淘汰制）想法来源思路使用的库判断排赛程DemoResult想法来源最近到了夏季的尾巴了，小shin的公司想来一波运动团建，搞搞羽毛球啊乒乓球之类的比赛，因为报名的人数并不是都是偶数，会出现奇数，有人轮空的情况。根据赛程承办方，其实就是部门boss的想法，落单的人不轮空，抓对多赛一场，这样一来，为了避免多赛的人心里不平衡，秉承公开公正的原则，有了这次的代码。思路需...
2019-08-06 09:49:20
2288
原创 Deep Forest: 使用gcForest时 遇到的源码问题详解和记录
Deep Forest: 使用gcForest时 遇到的源码问题详解和记录简介资源传送门我的配置依赖的第三方库安装使用gcForest遇到的问题安装错误问题NameError: name 'basestring' is not definedTypeError: 'float' object cannot be interpreted as an integeronly integers, sli...
2019-05-17 17:10:35
4078
12
原创 github 上的沙鲷项目macOS上微信插件
项目的功能：微信消息防撤回微信消息自动回复远程操控你的macOS 关闭chrome，屏幕 etc.这个项目的沙雕之处在于原作者在github上已经1.2w+的star后删库跑路了，原因好像是腾讯后来发布公告说这个项目会收集个人信息。原作者链接：https://github.com/TKkk-iOSer/WeChatPlugin-MacOS不过fuckhub的大佬们怎么会放弃这种...
2019-04-29 11:07:53
412
原创 No module named ‘PyQt5.QtWebEngineWidgets‘ ？
前提：遇到这个问题说明你的电脑可能和我的电脑一样是 win x86而PyQt 的版本呢是 5.11.x问题的原因是：PyQt 5.10.x之后的版本 不再对32 bit 提供WebEngie解决方法：**一 退回pyqt5.10.x **打开cmd 或者编辑器里打开Terminal，命令如下：pip3 uninstall PyQt5先卸载pyqt5,如果安装在python...
2019-04-22 13:42:55
1089
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人