- 博客(21)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 创建EKS Cluster的笔记
首先准备好配置cluster的yaml文件，然后运行eksctl create cluster -f xxx.yamleksctl create cluster -f airlfow-eks-cluster.yaml2021-05-28 16:58:28 [ℹ] eksctl version 0.49.02021-05-28 16:58:28 [ℹ] using region ap-southeast-22021-05-28 16:58:29 [✔] using existing V...
2021-05-30 09:50:41
429
原创 【Python】使用PyMySQL向MySQL数据库中插入数据
首先给出我的实例：connection = pymysql.connect(host=db_host_mysql, user=db_username_mysql, password=db_pass_mysql, database=db_schema_MarketData_mysql,
2021-02-23 07:59:27
1520
1
原创 【Python】pandas保存csv到S3的方法
方法一：使用StringIO（当要保存到文件的是binary文件时可以用BytesIO，类似）from io import StringIOimport boto3bucket = 'bucket_name'csv_buffer = StringIO()df.to_csv(csv_buffer)s3_resource = boto3.resource('s3')s3_resource.Object(bucket, 'df.csv').put(Body=csv_buffer.getva
2021-02-21 18:11:27
895
原创 Docker使用笔记2 - 在EC2上安装Docker
在EC2上安装Docker创建一个全新的ec2 instance后，ssh进入。使用如下命令手动安装Docker：$ sudo yum update -y$ sudo amazon-linux-extras install docker$ sudo service docker start$ sudo usermod -a -G docker ec2-user从instance退出并重新登录，然后就应该可以不需要sudo来运行docker命令了。...
2021-02-16 18:25:46
180
原创 Docker使用笔记1 - Docker基本命令小结
Docker基本命令docker build：可以基于Dockerfile来创建image，当我们写好自定义的Dockerfile之后，可以用以下命令来创建image： docker build -f Dockerfile -t repository:tag . 如果在使用-f参数时，需要在后面加上你的Dockerfile的路径，否则必须要在后面加一个点 . 不然会报错。docker build的使用语法为： docker build [PARAMS] PATH 而-f这个参数的使用说
2021-02-16 18:19:22
155
原创 LeetCode - 1. Two Sum
Given an array of integersnumsand an integertarget, returnindices of the two numbers such that they add up totarget.You may assume that each input would haveexactlyone solution, and you may not use thesameelement twice.You can return the answe...
2021-01-07 13:55:58
58
原创 Python进程与线程
对于操作系统来说，一个任务就是一个进程（process）。在一个进程内部同时执行的多个子任务为线程（thread）。由于每个进程至少要干一件事，所以一个进程中至少有一个线程。当我们需要同时执行多个任务，有两种解决方案：启动多个进程，每个进程虽然只有一个线程，但多个进程可以一块执行多个任务 启动一个进程，在一个进程内部启动多个线程，这样，多个线程可以一块执行多个任务...
2019-12-04 14:20:27
73
原创 Python Built-in 函数总结 - 1
Python有一系列自带函数可以使用，非常方便，熟练掌握运用可以大大提高日常编程的效率，所以特此总结复习。abs(x)该函数为绝对值函数，返回所给数字x的绝对值。x可以为整型或浮点型数字。如果x是一个复数，则返回该复数的绝对值（模值/幅值），即该复数与其共轭复数的乘积的正平方根。在Python中，复数的虚数部分用j或J为后缀表示。例如：>>> abs(3-4j...
2019-10-01 20:54:46
294
原创 如何在卸载Citrix Receiver之后清理删除残留文件 【Mac】
忘记为什么在自己的Mac上安装了这个Citrix Receiver的软件，可能是当时上学的时候为了用某些学校的软件吧，但我几乎没有再用过这个Citrix receiver了，之前卸载过，可是一直还是会有开机自动启动项，大概是还有残留文件没有清理干净，于是探索了一下可检查清理如下路径的文件及文件夹，来确保删除干净所有Citrix Receiver的文件。/Library/LaunchAg...
2019-09-08 13:36:40
6541
2
翻译 提取找回未保存但运行过的SQL Query
如果不小心关闭了已经运行过但是没有保存的SQL Query Scripts，以下查询语句可以帮助提取所有已运行SQL Queries的历史记录。Use Master SELECT execquery.last_execution_time AS [Date Time], execsql.text AS [Script] FROM sys.dm_exec_query_stats AS e...
2019-06-20 13:53:03
5476
原创 MATLAB setdbprefs
使用该命令设置数据库中数据返回到MATLAB workspace的格式，例如：setdbprefs('DataReturnFormat','cellarray')使得从数据库中提取的数据以cellarray格式导入MATLAB的工作空间。...
2018-08-21 13:57:44
522
原创 MATLAB使用小结 - 求最小公倍数/判断奇数偶数/判断是否为整数
MATLAB求最小公倍数：L = lcm(A,B)MATLAB判断一个数是奇数还是偶数：% 偶数mod(10,2)ans = 0% 奇数mod(5,2)ans = 1MATLAB判断一个数是否为整数：if x == fix(x) x 为整数endfix为取整函数 ...
2018-07-24 13:31:31
4424
原创 MATLAB浮点数精度问题
最近在使用MATLAB做一个数据分析的项目时，遇到了一个非常隐藏的bug，花了好久终于发现了问题所在——精度的问题导致同样的数字在MATLAB中并不是相等。举一个简单的例子比如：a=1.065000000000000e+05和b=106500，若判断二者是否相等将返回不相等。通常来说，判断完全相等，我们会使用“==”。但在实际的应用中，对于浮点数来说，“完全相等”无法得到我们想要的结果，相比之下，...
2018-07-10 13:52:05
6701
转载 Install Python3.6 on Amazon Linux/EC2 在Amazon Linux实例中安装使用Python3.6
本文转载自 https://gist.github.com/niranjv/f80fc1f488afc49845e2ff3d5df7f83b由于Amazon Linux中预装的Python版本为2.7，该脚本教程很好地解决了在Amazon Linux中安装Python3.6的需求，遂转发记录至此。# install pre-requisitessudo yum -y groupinstall d...
2018-05-28 15:19:21
2822
原创 Git使用小结
安装在Linux系统中安装Git（以Ubuntu为例）sudo apt-get updatesudo apt-get upgradesudo apt-get install git在Mac OS中安装Gitbrew install git在Windows系统中安装Git下载Git并安装https://git-scm.com/download/win配置git config --global ...
2018-04-28 09:54:52
179
原创 日积跬步 - Linux - export/declare命令
在运行Shell时，会有两种Shell变量：1. 局部变量，在脚本或命令中定义，仅在当前Shell实例有效，其他Shell启动的程序不能访问。2. 环境变量，所有的程序包括Shell启动的程序，都能访问环境变量，有些程序需要环境变量来保证其正常运行。必要的时候shell脚本也可以定义环境变量。declare命令declare命令用于声明shell变量。declare -a nodes=(115.1...
2018-04-20 10:01:48
1347
原创 AWS Lambda 安装SAM Local时的问题及解决办法
在使用npm install -g aws-sam-local安装SAM Local时出现以下错误：ip-10-2-201-246:~ zhouweiliang$ sudo npm install -g aws-sam-local> [email protected] postinstall /usr/local/lib/node_modules/aws-sam-local> g...
2018-04-09 14:03:19
1112
原创 Python笔记
python中的strip()函数：用于去除字符串头尾的指定字符，默认为空格。isinstance()函数：用于判断一个对象是否是一个已知的类型。isinstance(object, classinfo)与type()的区别：type()不考虑继承关系，不会认为子类是父类的一种类型，isinstance()考虑继承关系，会认为子类是父类的一种类型。...
2018-04-08 21:17:03
91
转载 日积跬步 - Linux - ln命令
ln命令的功能是为某一个文件在另外一个位置建立一个同步的链接。当需要在不同的目录用到相同的文件时，不需要在每一个需要的目录下都放一个相同的文件，我们只要在某个固定的目录放上该文件，然后在其他的目录下用ln命令链接（link）该文件即可，不必重复地占用磁盘空间。命令格式：ln [params] source_file [target_file]Linux文件系统中的链接（link）可分为两种，硬链接...
2018-03-29 12:04:36
157
原创 ImportError: cannot import name 'process'
在看廖雪峰教程学习多进程时，有如下代码：from multiprocessing import Processimport osdef run_proc(name): print 'Run child process %s (%s)...' % (name, os.getpid())if __name__=='__main__': print 'Parent process %s.' % o...
2018-03-16 11:13:56
1314
翻译 Python List Comprehensions
Python的列表解析特性提供了一种创建新列表的简洁方法。Common applications are to make new lists where each element is the result of some operations applied to each member of another sequence or iterable, or to create a subseq...
2018-02-20 11:55:12
132
数学建模论文
2013-09-13
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人