自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

大数据之眸

手握代码,心怀天下。专注大数据挖掘与机器学习

  • 博客(208)
  • 资源 (2)
  • 收藏
  • 关注

转载 Failed to initialize NVML: Driver/library version mismatch

昨天跑代码,cuda还能好好的to(device),今天就不行了。为了更好的解决问题,并且避免再次出现,我对这些方法进行了简单的整理。如下图所示,系统内核版本已经与驱动版本一致了。本来文章到这里就要结束了,但是为了避免再次出现这样的问题,机智的博主们给出了一些解决方案。由于是系统驱动更新导致出现的问题,那么就有可能再次出现这样的问题。红框里指的是,系统驱动从470.141.03更新到了470.161.03。可以发现显卡驱动内核版本还是原来的版本(由于我已经更新过了,这里不再贴图)卸载现有驱动,重新安装。

2024-01-29 09:48:26 91

原创 大模型GPU安装bitsandbytes报错解决

在conda python环境下,通过pip install bitsandbytes直接安装,或是按源码编译安装,在python -m bitsandbytes检测时均出现异常。操作系统:Ubuntu 22.04。

2023-08-15 20:28:28 1972

原创 全网最全Linux学习路线!十一张原创思维导图涵盖日常全部命令(干货)

测试、后端、开发、大数据分析&挖掘、AI算法、产品都能无压力掌握的linux重点知识归纳,图形化系统展现要点,你值得拥有!无论是测试、后端、开发的同学,还是数据分析、挖掘、算法的大佬,甚至是产品人,都值得学习linux,其中对于工作的重要性不言而喻,因为不掌握甚至都无法工作!可以说安卓系统、常见的各类服务器底层包括最近以ChatGPT为代表的生成式对话系统部署都离不开linux的身影。但是...

2023-04-26 08:01:27 6162 1

原创 保姆级教程教你快速搭建属于自己的AI绘画系统!(收藏)

Midjourney收费高、无法支付,且生成想要的图片受限,风格固定,如果能够10分钟快速搭建属于自己的AI绘画系统,并且对电脑配置无要求,你心动了吗?先来看看AI系统构建完成后的画面,只需要输入自定义的prompt,就能生成自己想要的人像、风景、动物各种主体,科幻、油画、写实各种风格的图片,后期还可以叠加超分辨率技术(SR)进一步生成高清大图!很难想象这是10分钟能够做出来的轮子,如果觉得画面熟...

2023-04-04 21:17:38 4461 1

原创 最近火出圈的GPT-4 技术Report出来了,快进来看看逐文对照翻译!

近期OpenAI发布的GPT-4的效果好得让人惊艳!碾压了之前火到出圈的ChatGPT,通过同步发布的GPT-4 Technical Report一同看看到底发生了什么!No.0摘要We report the development of GPT-4, a large-scale, multimodal model which can accept image and text inputs an...

2023-03-30 08:00:25 3001

原创 GPT-4火爆出圈,GPT-5或年底发布?这儿有一份原创最全NLP学习路线请查收!

首先声明:此篇文章非GPT-4生成!由OpenAI发布的GPT-4火爆全网,可预见未来5-10年都将是大模型的天下,它带来了多少本质突破?多少职业会被取代?NLP是否还值得学习以及如果值得具体怎么学?一文带你分析以上问题!No.1GPT-4出圈如果说此前NLP大模型领域的RoBERTa、T5大家还没有了解过,那么此次彻底出圈的ChatGPT、GPT-4则显得的非常“突然”,这也是非专业领域的人们第...

2023-03-30 08:00:25 364

原创 原创最全数据分析师学习路线+思维导图!文末附PDF下载

吐血整理八张思维导图,涵盖数据分析师学习路线及Python等结构化学习框架,让你以最短时间get数据分析秘籍!

2023-03-29 22:59:40 684 5

原创 【已解决】Unable to negotiate with XXX port : no matching host key type found. Their offer: ssh-rsa

已解决!

2023-03-20 11:22:36 8724

原创 原创超详细Python学习路线+思维导图!多图预警

对当前各行业方向薪资状况,Python学习路线,Python核心知识做系统归纳!

2023-03-12 15:59:22 321

原创 原创超详细Python学习路线+思维导图!多图预警,文末附PDF下载

对当前各行业方向薪资状况,Python学习路线,Python核心知识做系统归纳!No.0初识Python自1990年问世以来,Python逐渐逐渐走向大众视野,究其火的原因有几点:首先是语法简单易学,一位初中生一天之内就可以掌握Python基础语法;其次是类库生态丰富,一个较为形象的例子就是同样的功能C需要1000行,Java需要100行,而Python只需要10行,本质就是调包顺畅;还有就是跨平...

2023-03-12 15:26:31 293 1

转载 CNN经典结构(AlexNet,ZFNet,OverFeat,VGG,GoogleNet,ResNet)

前言本文主要介绍2012-2015年的一些经典CNN结构,从AlexNet,ZFNet,OverFeat到VGG,GoogleNetv1-v4,ResNetv1-v2。在论文笔记:CNN经典结构2中我介绍了2016-2017年的几个经典CNN结构,WideResNet,FractalNet,DenseNet,ResNeXt,DPN,SENet。另外,在ImageNet历年冠军和相关CNN模型中,我简单介绍了ImageNet和历年冠军。AlexNet贡献:ILSVRC2012冠军,展现出了深度C

2021-06-04 19:25:02 1497

原创 Mac使用git命令时出现:xcrun: error: invalid active developer path

Mac使用git命令时出现:xcrun: error: invalid active developer path (/Library/Developer/CommandLineTools), missing xcrun at: /Library/Developer/CommandLineTools/usr/bin/xcrun解决方法1.终端输入xcode-select --install之后按照提示安装即可...

2021-04-15 10:27:18 368

原创 小何同学问了苹果CEO库克哪些问题?

小何同学采访库克的视频的看了数次,深深地感觉到小何同学已经触及到当代年轻人的天花板,因此,笔者本着学习的态度将采访中英文对照稿件整理出来供大家参考。与其称之为一次视频采访,不如说是苹果与用户之间的沟通,或者是苹果CEO与数码爱好者的一次交流。正是这样拉近中国消费者距离的方式,让一些人感觉到这是苹果为了扩大受众市场的一次广告。不管其目的到底是什么,这段谈话中的一些内容还是很值得关注。在视频采访中,他们不仅谈到了iPhone12的创新,重视创造与合作的苹果团队,基于中国消费者反馈的功能,还谈到了新的互.

2021-03-12 11:34:46 1390

转载 super(MLP, self).__init__() 的含义

class MLP(nn.Module): def __init__(self, num_layers, input_dim, hidden_dim, output_dim): super(MLP, self).__init__()在读论文源码时,发现如上这个比较拗口的语法点。其实意思很简单,首先找到MLP的父类(这里是类nn.Module),然后把类MLP的对象self转换为类nn.Module的对象,然后“被转换”的类nn.Module对象调用自己的_init_函..

2021-02-23 11:06:38 1610

原创 自然语言最强总结!百度NLP前沿探讨:从BERT到ERNIE有多远

自然语言处理(Natural Language Processing,NLP)是人工智能、计算机科学、信息工程的交叉领域,涉及统计学、语言学等知识。语言是人类思维的证明,故自然语言处理是人工智能技术的最高境界,因而被誉为“人工智能皇冠上的明珠”。而谷歌BERT和百度ERNIE都取得过该领域的SOTA(State-Of-The-Art),因此本文着重讨论BERT和ERNIE的发展历程以及在NLP领域所做的贡献,旨在对NLP框架的思路进行梳理进而构建知识体系。1.NLP核心:Represent...

2020-12-30 16:17:14 661

原创 百度NLP前沿探讨:从BERT到ERNIE有多远

点击上方 蓝字 关注我们自然语言处理(Natural Language Processing,NLP)是人工智能、计算机科学、信息工程的交叉领域,涉及统计学、语言学等知识。语言是人类思维...

2020-12-26 21:00:00 652

原创 pip升级出错 ModuleNotFoundError: No module named pip的解决办法

Traceback (most recent call last): File "d:\python375\lib\runpy.py", line 193, in _run_module_as_main "__main__", mod_spec) File "d:\python375\lib\runpy.py", line 85, in _run_code exec(code, run_globals) File "D:\Python375\Scripts\pip3.exe\_.

2020-06-10 12:55:59 1676 2

转载 Scala语言基础:函数式编程

scala和Java、Python一样是面向对象语言,本文讲解scala中函数定义、高阶函数和函数式编程实例WordCount1.函数定义与高阶函数Scala是一门多范式编程语言,混合了...

2020-05-18 21:00:00 701

转载 scala语言基础:面向对象编程中的继承与特质

scala和Java、Python一样是面向对象语言,本文讲解scala面向对象中继承与特质的相关概念与实例。1.继承Scala中的继承与Java有着显著的不同:(1)重写一个非抽象方法...

2020-05-16 21:00:00 359

转载 scala语言基础:面向对象编程中的类与对象

scala和Java、Python一样是面向对象语言,本文讲解scala面向对象中的类与对象相关概念与实例。1.类类和对象是Java、C++等面向对象编程的基础概念。类是用来创建对象的蓝...

2020-05-14 21:00:00 397

转载 scala语言基础:一文带你熟悉六大数据结构

scala语言的数据结构基础,涵盖数组、列表、元组、集、映射、迭代器等。1.数组数组是编程中经常用到的数据结构,一般包括定长数组和变长数组。本教程旨在快速掌握最基础和常用的知识,因此,只...

2020-05-12 21:00:00 368

原创 scala控制结构:条件表达式与循环

今天带大家一起过一遍scala语言的基础知识,涵盖if条件表达式、for循环与while循环。if条件表达式Scala IF...ELSE 语句是通过一条或多条语句的执行结果(True或...

2020-04-22 21:00:43 319

原创 scala语言基础:变量声明 基本数据类型 Range和文件读取

今天带大家一起过一遍scala语言的基础知识,涵盖变量声明、基本数据类型、Range使用和文件读取。val变量与var变量Scala有两种类型的变量,一种是val,是不可变的,在声明时就...

2020-04-17 21:00:00 586

转载 强推Markdown神器,一秒钟拯救微信公众号排版

我一直觉得微信公众号是最难用的文章编辑器,直到我开始写知乎专栏。作为两个UGC内容为主的产品,用户体验如此之差真的大大降低了写作者的创作欲望。基于这个痛点,滋养了一大批像365编辑器、壹伴、秀米等第三方微信图文排版编辑工具,但是页面杂乱繁复,模版花里胡哨,还要忍受粘贴后样式全乱的崩溃感。有一天偶然在github上发现了lyric大神的微信公众号排版编辑器项目,可以直接将Markdown格式...

2020-04-17 17:08:55 1586

原创 淡黄的长裙,蓬松的头发,Scala是个啥?干啥得靠它

笔者今天开始记录一下Scala语言的基础学习。Scala语言一般很少独立使用,而是作为在大数据领域的开发语言,是Spark的底层语言,也是Spark的首选调用语言。Scala简介 ...

2020-04-08 21:00:00 354 1

原创 妈妈再也不用担心双系统安装了!(最详细!附镜像资源+分区详解+实测教程)

ubuntu又出新版本了~附上19.10双系统安装教程,一文解决资源、分区和安装问题!一、制作ubuntu启动盘1.下载ubuntu19.10首先我们通过链接https...

2020-04-04 20:59:10 1596

原创 Spark机器学习不想跟你说话并向你扔了一个kaggle小例子

在前文中分别就Spark机器学习中的各个模块进行逐个描述,本文将Kaggle中Flights and Airports Data数据集作为研究对象,使用Spark对其进行简单的pipl...

2020-04-02 21:00:00 544

转载 一文带你get七种常用特征工程方案

当在做数据挖掘和数据分析时,数据是所有问题的基础,并且会影响整个工程的流程。相比一些复杂的算法,如何灵活的处理好数据经常会取到意想不到的效益。而处理数据不可或缺的需要使用到特征工程。目录一、什么是特征工程二、常用方法1. 时间戳处理2. 分解类别属性3.分箱/分区4. 交叉特征5. 特征选择6. 特征缩放7. 特征提取一、什么是特征工程简单的说,...

2020-04-02 11:19:24 684

转载 用python分析1225万条淘宝数据,终于搞清楚了我的交易行为

1、项目背景与分析说明1)项目背景  网购已经成为人们生活不可或缺的一部分,本次项目基于淘宝app平台数据,通过相关指标对用户行为进行分析,从而探索用户相关行为模式。2)数据和字段说明...

2020-04-01 21:00:00 789 1

原创 Spark分布式机器学习源码分析:模型评估指标

Spark是一个极为优秀的大数据框架,在大数据批处理上基本无人能敌,流处理上也有一席之地,机器学习则是当前正火热AI人工智能的驱动引擎,在大数据场景下如何发挥AI技术成为优秀的大数据...

2020-04-01 21:00:00 936

原创 牛客SQL题解 - 获取当前薪水第二多的员工的emp_no以及其对应的薪水salary,不准使用order by

题目描述查找当前薪水(to_date='9999-01-01')排名第二多的员工编号emp_no、薪水salary、last_name以及first_name,不准使用order byCREATE TABLE `employees` (`emp_no` int(11) NOT NULL,`birth_date` date NOT NULL,`first_name` varchar(14...

2020-04-01 12:11:45 492

原创 牛客SQL题解 - 获取当前薪水第二多的员工的emp_no以及其对应的薪水salary

题目描述获取当前(to_date='9999-01-01')薪水第二多的员工的emp_no以及其对应的薪水salaryCREATE TABLE `salaries` (`emp_no` int(11) NOT NULL,`salary` int(11) NOT NULL,`from_date` date NOT NULL,`to_date` date NOT NULL,PRIMAR...

2020-04-01 12:08:42 444

原创 牛客SQL题解 - 统计出当前各个title类型对应的员工当前薪水对应的平均工资

题目描述统计出当前各个title类型对应的员工当前(to_date='9999-01-01')薪水对应的平均工资。结果给出title以及平均工资avg。CREATE TABLE `salaries` (`emp_no` int(11) NOT NULL,`salary` int(11) NOT NULL,`from_date` date NOT NULL,`to_date` date...

2020-04-01 12:06:25 297

原创 Spark MLlib分布式机器学习源码分析:频繁模式挖掘

Spark是一个极为优秀的大数据框架,在大数据批处理上基本无人能敌,流处理上也有一席之地,机器学习则是当前正火热AI人工智能的驱动引擎,在大数据场景下如何发挥AI技术成为优秀的大数据挖掘工程师必备技能。本文结合机器学习思想与Spark框架代码结构来实现分布式机器学习过程,希望与大家一起学习进步~目录1.FP增长算法2.FP示例3.关联规则4.序列模式挖掘本...

2020-04-01 10:37:25 485

原创 Spark MLlib分布式机器学习源码分析:特征提取与转换

Spark是一个极为优秀的大数据框架,在大数据批处理上基本无人能敌,流处理上也有一席之地,机器学习则是当前正火热AI人工智能的驱动引擎,在大数据场景下如何发挥AI技术成为优秀的大数据挖掘工程师必备技能。本文结合机器学习思想与Spark框架代码结构来实现分布式机器学习过程,希望与大家一起学习进步~本文采用的组件版本为:Ubuntu 19.10、Jdk 1.8.0_241、Scala...

2020-04-01 10:33:54 512

原创 Spark MLlib分布式机器学习源码分析:奇异值分解(SVD)与主成分分析(PCA)

原理 Spark是一个极为优秀的大数据框架,在大数据批处理上基本无人能敌,流处理上也有一席之地,机器学习则是当前正火热AI人工智能的驱动引擎,在大数据场景下如何发挥AI技术成为优秀的大数据挖掘工程师必备技能。本文结合机器学习思想与Spark框架代码结构来实现分布式机器学习过程,希望与大家一起学习进步~本文采用的组件版本为:Ubuntu 19.10、Jdk 1.8.0_241、...

2020-04-01 10:30:21 921

原创 Spark分布式机器学习源码分析:频繁模式挖掘

Spark是一个极为优秀的大数据框架,在大数据批处理上基本无人能敌,流处理上也有一席之地,机器学习则是当前正火热AI人工智能的驱动引擎,在大数据场景下如何发挥AI技术成为优秀的大数据...

2020-03-31 21:00:00 640

转载 当面试官要求现场手敲代码,该如何体现你对Python的编程能力?

点击上方“Python数据科学”,星标公众号重磅干货,第一时间送达☞500g+超全学习资源免费领取如果你已经通过了招聘人员的电话面试,那么下面正是该展现你代码能力的时候了。无论是练习...

2020-03-31 21:00:00 430

原创 Spark分布式机器学习源码分析:特征提取与转换

Spark是一个极为优秀的大数据框架,在大数据批处理上基本无人能敌,流处理上也有一席之地,机器学习则是当前正火热AI人工智能的驱动引擎,在大数据场景下...

2020-03-30 21:00:00 426

转载 拜托,别再问我什么是B+树 了

前言 每当我们执行某个 SQL 发现很慢时,都会下意识地反应是否加了索引,那么大家是否有想过加了索引为啥会使数据查找更快呢,索引的底层一般又是用什么结构...

2020-03-30 21:00:00 321

Python极详细思维导图PDF高清合辑

Python学习路线,各行业薪资调研,Python语言超十图吐血整理合辑,涵盖Python各类学习方向重点及Python语言核心基础讲解! 具体包含语言基础、数据类型、条件&循环、函数&模块、面向对象编程、文件对象、异常处理等等全部高细节内容

2023-03-12

《Python数据结构与算法》教程及代码

Python数据结构与算法教程及代码吐血整理! 算法(Algorithm)是指解题方案的准确而完整的描述,是一系列解决问题的清晰指令,算法代表着用系统的方法描述解决问题的策略机制。也就是说,能够对一定规范的输入,在有限时间内获得所要求的输出。 数据结构(Data Structures):是计算机存储和组织数据的一种方式,可以用来高效地处理数据。 举个例子:二分查找就是一个非常经典的算法,而二分查找经常需要作用在一个有序数组上。这里二分就是一种折半的算法思想, 而数组是我们最常用的一种数据结构,支持根据下标快速访问。很多算法需要特定的数据结构来实现,所以经常把它们放到一块讲。 实际上,在真正的项目开发中,大部分时间都是 从数据库取数据 -> 数据操作和结构化 -> 返回给前端,在数据操作过程中需要合理地抽象, 组织、处理数据,如果选用了错误的数据结构,就会造成代码运行低效。这也是我们需要学习算法和数据结构的原因。 本资源从深层原理入手,包含丰富实例100+,深入浅出展现面试所需知识点及考题和答案,同学们自主选择。

2020-02-26

COURSERA机器学习课笔记

COURSERA机器学习课笔记,非常全面 !可配合coursera视频一起用~特别棒的资料

2018-01-16

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除