- 博客(13)
- 收藏
- 关注
原创 用IDEA开发Spark程序(Scala)(三)—— 新建项目
新建项目添加依赖编辑hello-spark/pom.xml,添加: <properties> <spark.version>2.3.4</spark.version> <scala.version>2.11</scala.version> </properties> <dependencies> <dependency>
2020-10-26 16:29:19 183
原创 用IDEA开发Spark程序(Scala)(二)—— 配置IDEA
安装Scala插件配置 JDK&SDK点击download下载需要的scala版本(spark2.3 应选择2.11)完成!
2020-10-26 16:20:46 144
原创 用IDEA开发Spark程序(Scala)(一)—— Maven的安装与配置
Maven安装方法1brew install maven # 会安装openjdk和mavenmvn -v # 验证并查看Maven home添加环境变量export M2_HOME=/usr/local/Cellar/maven/3.6.3_1/libexec方法2安装JDK下载解压maven到安装目录/path/to/apache-maven-x.x.x添加环境变量export M2_HOME=/path/to/apache-maven-x.x.xexport
2020-10-21 14:59:12 210
原创 python批量处理word中的表格
def word_table_formater(): from win32com import client word = client.Dispatch('Word.Application') doc = word.Documents.Open('C:\\Users\\Administrator\\Desktop\\test.docx') i = 1 ...
2019-08-28 10:24:00 934
原创 python用win32com实现从excel复制表格到word
def copy_table_from_excel_to_word(): import time from win32com import client excel = client.Dispatch('Excel.Application') word = client.Dispatch('Word.Application') doc = word.D...
2019-08-28 10:11:12 4994 6
原创 pyspark 往 elasticsearch 中写数据
df.write.format('org.elasticsearch.spark.sql') \ .option('es.nodes', '10.0.0.0') \ .option('es.port', '9200') \ .option('es.resource', 'test/nested_type') \ .option('e...
2019-06-26 15:24:50 2165
原创 八大排序算法的python实现
# -*- coding: utf-8 -*-# 冒泡排序def bubble_sort(nums): i = 1 exchanged = True while i < len(nums) and exchanged: exchanged = False for j in range(len(nums) - i):
2017-10-07 22:12:33 667
原创 sublime设置保存新文件时的默认文件类型(后缀名)
ctrl+shift+P打开控制台,输入set,在出现的候选项里选择set syntax:Python即可~
2017-10-05 16:59:29 9039
原创 python远程连接mysql以及pandas.DataFrame.to_sql写入数据库
1.本机没有安装mysql的话就装一个mysqlconnector (所有系统通用)下载后离线安装 pip install mysql-connector-2.1.6.tar.gz2. 安装sqlalchemy在线安装 pip install sqlalchemy3.mysql的连接与操作import mysql.connectorcnt = mysql.connector.c
2017-08-31 10:39:06 2585
原创 sublimerepl 快捷键设置
网上的方法并不奏效可以试试这个 { "keys": ["f5"], "command": "repl_open", "args":{ "cmd": ["python", "-u", "$file_basename"], "cwd": "$file_path",
2017-07-17 17:43:22 1052
原创 python远程连接oracle配置和语法
1、如果本机没有装Oracle数据库,需要装一个Instant Client下载后解压,然后把文件夹路径添加至系统变量path。2、将解压的文件夹(比如instantclient_11_2)中的 oci.dll, oraocci11.dll,oraociei11.dll 拷贝到python安装目录下的lib/site-packages中。3、用pip 安装 cx_Oracle
2017-07-03 14:27:17 1784 2
原创 感知机 Python代码
#Python 3.6#author: ald#import numpy as np x = np.array([[3, 3],[4, 3],[1, 1],[5,2]])y = np.array([1, 1, -1,-1])Gamma = x.dot(x.T)eta = 1alpha = np.zeros(len(y), np.float)b = 0judge = Fal
2017-03-31 13:37:20 773
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人