- 博客(31)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 mini conda
conda是python领域非常好的环境管理工具，在你需要再多个python环境，python项目之间来回切换的时候非常方便。本文主要记录一下conda从安装到使用过程中的问题，后续会增量收入本人遇到的所有知识点。
2024-04-01 12:01:55
228
原创 职场进阶秘籍：打造逆境中的强大自我
在当前复杂且充满挑战的经济环境下，职场不确定性已成为普遍现象。不仅中年程序员，而是跨越各个行业和年龄层的人们，都可能遭遇职业生涯的不稳定和危机。很多人在日复一日的工作中很少考虑到自己的职业发展规划，更不用说如何构建个人的“反脆弱体系”——一种在面对潜在风险时能够让我们稳定应对的策略。
2024-02-06 15:37:39
377
原创 Mac电脑 Pythorch深度学习开发环境搭建
本文主要关于mac下的环境搭建，因此没有CUDA部分。主要涉及Ancoda安装和配置，Pythorch的安装，以及最后给出深度学习领域的hello word手写数字识别的Case。关于Windows下，Cuda的部分后面会单独出一篇文章讲解。
2024-02-06 15:06:34
408
原创 Hadoop的知识脉络
以上几点可以说涵盖了Hadoop的主要内容和面试考点。需要熟练理解HDFS,YARN,MapReduce等组件的工作机制,并掌握生态项目的基本功能与开发方式。除理论知识,实践项目经验也是Hadoop面试的加分项。
2023-05-25 09:44:46
98
原创 【spark知识大纲梳理】
除了理论知识,掌握一定的实践项目经验也是很有帮助的。总的来说,要熟练掌握RDD,DataFrame,SQL,Streaming以及主要机器学习算法的概念和用法。
2023-05-25 09:32:57
110
原创 从面试角度梳理Go知识脉络
Go 语言在 Web 开发方面也有很好的支持，面试官可能会问到如何使用 Go 语言进行 Web 开发，包括如何使用 Gin、Beego 等常用的 Web框架，以及如何处理 HTTP 请求和响应等。Go 语言在数据库访问方面也有很好的支持，面试官可能会问到如何使用 Go 语言进行数据库访问，包括如何使用 SQL 和 NoSQL 数据库，如何使用 ORM 框架等。Go 语言的性能非常出色，面试官可能会问到如何优化 Go 语言程序的性能，包括如何使用 Go 语言的并发编程、如何避免内存泄漏和竞态条件等。
2023-05-21 14:11:52
95
原创 go语言定时任务
在这个示例中，我们使用`time.NewTicker()`函数创建了一个每隔1秒触发一次的定时器，并使用`ticker.C`通道来接收定时器触发的事件。在`select`语句中，我们使用`case <-ticker.C:`来接收定时器触发事件的通知，然后执行相应的任务。除了`time.NewTicker()`函数，`time`包中还有其他的函数，例如`time.After()`和`time.Sleep()`等，可以用于实现不同的定时任务。在Go语言中，可以使用标准库中的`time`包来实现定时任务。
2023-05-11 23:11:48
757
原创 云原生技术概述
云原生技术是一种用于构建和运行现代化应用程序的技术和方法，它可以提高应用程序的可靠性、弹性和可伸缩性，加速应用程序的开发和部署，降低开发和运维的成本，提高业务的敏捷性和创新性。云原生技术的核心理念包括容器化、微服务架构、DevOps实践、服务网格和Serverless架构等。
2023-05-05 20:15:50
294
原创 Go语言知识脉络
变量和常量：Go语言使用关键字var来声明变量，如var x int，表示声明一个整型变量x。也可以使用:=来进行简短声明，如x := 1，表示声明一个整型变量x并初始化为1。变量的值可以通过赋值语句进行修改，如x = 2。常量使用关键字const来声明，如，表示声明一个常量pi，并赋值为3.14。常量的值不能被修改。数据类型：Go语言的基本数据类型包括整型、浮点型、布尔型、字符串、指针等。可以使用intfloatboolstring等关键字来声明变量的数据类型。
2023-05-05 17:47:49
49
原创 番茄法则平替版-白开水法则
喝水是每天我们都要做的事情，专家建议每天要喝水1.5-2L，喝水不仅能提升一天的新陈代谢，提升大家的精力，他还有个妙用用来时间管理。我有一个800毫升的大水杯，和一个200毫升不到的小水杯，通常会喝1-2小杯水后，10-15分钟后，会想上厕所。刚好从喝水到上厕所这段期间是20-30分钟左右，每次上厕所，都会趁机多走几步，放松一下自己的眼球和心情。通过饮水的方式，分割自己的时间，并且主动休息，这里我并没有刻意的去看表，完全是使用物理或者生理的感受去做这个事情，所以坚持下来很自然。
2023-04-18 15:16:52
160
原创 chat-gpt 的底层原理
在chatgpt中，Softmax通常用于计算每个单词的概率分布，使得该模型能够根据先前的对话，预测当前用户可能的回复。Beam Search：Beam Search是一种搜索算法，用于在生成一个序列的情况下，根据一种权衡内部和外部选择最佳的生成。Fine-tuning：在经过预训练后，chatgpt将进行微调，使得模型在特定任务上能够表现更好的性能。在微调的过程中，chatgpt将会根据具体的任务选择不同的数据集，并将其与预训练模型结合起来。
2023-03-31 16:35:01
2011
原创 golang并发执行的几种方式
假设有一批url，需要并发去抓取，这个时候可能只是请求的地址不同，任务的函数是一致的。使用该方法时候，需要使用线程安全的结构去做数据同步。此外下文的写法最大的弊端是没法做并发度控制，如果请求过多，容易把下游打满，以及启过多协程，浪费资源，只适合小数据集，需要注意的是，我们在并发度通道中使用了一个空结构体{}，因为我们只需要通道来控制并发度，而不需要在通道中传递任何数据。此外，我们还使用了通道的阻塞特性来控制并发度，因为当通道已满时，任何试图向通道中发送数据的操作都会被阻塞，直到有空间可用为止。
2023-03-16 13:56:19
1001
1原创 读“一个老程序员的思考”有感
原文地址 翻译地址 这位老程序员40岁了，做了20年的程序员。原文写的特别好，总结一下可以归纳出三个核心观点： 观点1：IT行业和传统行业不同， 传统行业知识的“有效期长”，而IT行业知识更新的快，需要不断学习。 观点2：不要过度榨取自己，当下有很多岗位给的钱多，但是学不到新的东西，短期内，可以在该岗位上挣不上钱，但是由于坐吃山空，学不到...
2018-02-24 11:16:06
258
原创 comparator接口与Comparable接口的区别
comparator接口与Comparable接口的区别1.Comparator和Comparable相同的地方他们都是java的一个接口,并且是用来对自定义的class比较大小的,什么是自定义class:如publicclassPerson{Stringname;intage}.当我们有这么一个personList,里面包含了person1,pers...
2015-08-25 10:48:43
278
转载 Mongodb常用命令
MongoDB基本命令用成功启动MongoDB后，再打开一个命令行窗口输入mongo，就可以进行数据库的一些操作。输入help可以看到基本操作命令：show dbs:显示数据库列表 show collections：显示当前数据库中的集合（类似关系数据库中的表） show users：显示用户use ：切换当前数据库，这和MS-SQL里面的意思一样 db.help(
2015-08-21 17:01:21
252
转载 基于朴素贝叶斯的文本分类算法
摘要：常用的文本分类方法有支持向量机、K-近邻算法和朴素贝叶斯。其中朴素贝叶斯具有容易实现，运行速度快的特点，被广泛使用。本文详细介绍了朴素贝叶斯的基本原理，讨论了两种常见模型：多项式模型（MM）和伯努利模型（BM），实现了可运行的代码，并进行了一些数据测试。关键字：朴素贝叶斯；文本分类Text Classification Algorithm Based on Nai
2015-07-06 23:32:20
1106
转载 Maven目录结构
maven项目的目录 my-app |-- pom.xml `-- src |-- main | `-- java | `-- com | `-- mycompany | `-- app |
2015-06-25 11:13:29
351
转载 从文件解析json
#json.txt {name:"中国",provinces:[{name:"黑龙江",citys:["佳木斯","大庆","哈尔滨","齐齐哈尔","牡丹江"]},{name:"辽宁",citys:["沈阳","大连","盘锦"]},{name:"吉林",citys:["吉林市","长春市","四平市"]}]}#JSonParser .
2015-06-11 14:18:47
381
转载 hadoop读取GBK编码文件解决之道！
package com.zuidaima.util;import java.io.UnsupportedEncodingException;/** * 转换字符串的编码 */public class ChangeCharset { /** 7位ASCII字符，也叫作ISO646-US、Unicode字符集的基本拉丁块 */ public static final String
2015-06-05 20:39:32
761
转载 Java简单实现Socket非阻塞通信
用java实现socket C/S通信很简单，很多教科书上都有。但是这些通信模型大都是阻塞式的，其弊端也很明显：一方必须要接收的到对方的消息后，才能编辑自己的消息发出。同样对方也要一直等待这条消息收到后才能发送新的消息。用网络通信的知识讲，大概就是半双工通信吧。这就好比聊天的时候，两个人只能一人一句的聊天。不能一个人连着发送多句话。 而要实现非阻塞通信呢，也就是实现全双工通信
2015-06-02 15:40:27
748
原创 hadoop SLF4J错误
SLF4J: Class path contains multiple SLF4J bindings.SLF4J: Found binding in [jar:file:/home/disk3/mapred/repository/1427184862713%23ARCHIVEnj01-nanling-hdfs.dmop.baidu.com.app.dc.deva.system.share.ab
2015-05-26 18:21:02
1368
转载 hbase配置、运行错误总结
一、执行$ hbase hbck 命令时，出现以下提示：Invalid maximum heap size: -Xmx4096mThe specified size exceeds the maximum representable size.Error: Could not create the Java Virtual Machine.Error: A fatal exce
2015-05-26 15:08:28
721
转载 linux的tar命令压缩和解压缩文件
01-.tar格式解包：[＊＊＊＊＊＊＊]$ tar xvf FileName.tar打包：[＊＊＊＊＊＊＊]$ tar cvf FileName.tar DirName（注：tar是打包，不是压缩！）02-.gz格式解压1：[＊＊＊＊＊＊＊]$ gunzip FileName.gz解压2：[＊＊＊＊＊＊＊]$ gzip -d FileName.gz压 缩：[＊＊＊＊＊
2015-05-22 10:36:20
423
原创 hadoop如何杀掉正在执行的job
查看当前正在执行的进程：sh hadoop job -list执行杀死进程的命令：hadoop job -kill job_201212111628_11166如果正确执行，则系统提示：Killed job job_201212111628_11166
2015-05-22 10:26:28
4629
转载 hadoop文件命令
* 文件操作 * 查看目录文件 * $ hadoop dfs -ls /user/cl * * 创建文件目录 * $ hadoop dfs -mkdir /user/cl/temp * * 删除文件 * $ hadoop dfs -rm /user/cl/temp/a.txt * * 删除目录与目录下所有文件 * $ hadoop dfs -rmr /u
2015-05-21 14:21:14
266
转载 java调用Python的方法
有时需求使用JAVA直接调用python脚本，执行一些服务器监控的事情。 本文给出一个java直接调用python脚本的例子复制代码 代码如下:import java.io.BufferedReader;import java.io.InputStreamReader;public class Main {public static void main(
2015-03-14 21:31:57
438
原创 jstl在myeclipse9.0中
jstl在myeclipse9.0中创建web project时候时候javaee5.0以上版本是不能选择的，myeclipse自动导入。但是我在写最简单的c：out时候出现了问题jsp无法加载类，于是我下载了jstl和stand两个包放到webroot下的lib中。问题解决。
2014-03-31 23:20:22
583
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人