- 博客(8)
- 收藏
- 关注
RSS订阅原创 pycharm连接服务器远端调试
pycharm连接服务器远端调试一、配置远端python解释器二、设置远端的目录位置现在直接配置远端的python解释器，配置好了远端的解释器可以再配置远端的代码存储位置，当然也可以先配置远端的代码位置，但是解释器还是需要再添加，会出现两个服务器远端的名字，不如直接在配置好的解释器上加目录方便。一、配置远端python解释器点击pycharm -> preference ->pr...
2019-11-28 15:31:13
257
原创 mac 更换jupyter的默认启动浏览器
mac 更换jupyter的默认启动浏览器在终端中输入jupyter notebook --generate-config创建可修改的配置文件 jupyter_notebook_config.py位置在用户目录下的.jupyter文件夹下，为一个隐藏文件夹，按图示的几个键可以显示隐藏文件找到#c.NotebookApp.browser = ''修改为 c.NotebookApp.br...
2019-08-10 14:49:02
1963
原创 mac终端启动jupyter：command not found
mac终端启动jupyter：command not found原因是未在系统的环境变量中添加 jupyter的路径 /anaconda/bin 添加上即可添加方法有多种，可以在 /etc/profile /etc/paths ~/.bash_profile ~/.bash_login ~/.profile ~/.bashrc 中进行添加配置，这几个的优先级逐渐递减，前两个是一个级别的对所有用...
2019-08-09 11:44:12
4469
原创 通过Python计算经纬度点任意角度任意距离的经纬度点
通过Python计算经纬度点任意角度任意距离的经纬度点# -*- coding: utf-8 -*- # @Time : 2019/6/6 8:13 # @Author : WangPengfrom sympy import *from math import radians, cos, sin, asin, sqrtclass Get_new_gps(): def __i...
2019-06-17 09:05:08
4284
1
原创 pyspark dataframe实现行循环，调用Python 实现大批量小文件处理，对大批量用户实现用户画像
pyspark dataframe实现行循环，调用Python 实现大批量小文件处理，对大批量用户实现用户画像适合应用场景集群处理大批量的小文件，如需要对1000万用户构建用户画像，每个用户的数据不大有几百M（单机Python能处理的程度），可以这么调用，而且之前写的单Python代码直接复制粘贴稍微改动就可以直接用直接上代码# -*- coding: utf-8 -*- # @Time...
2019-06-06 13:19:57
5351
原创 Python根据经纬度坐标点计算该点正东正西正南正北一定距离的坐标点
Python根据经纬度坐标点计算该点正东正西正南正北一定距离的坐标点业务需求需要计算经纬度点正东正西正南正北的一定距离的经纬度点，但没有百度到实现的函数，自己又温习了弧长公式，球的弧长公式计算，推导过程很简单，百度也能找到，最终的公式结果为：假设地球是个完美的球体，半径为R，地球周长2πR，需要计算经纬度的距离为dist。正北和正南距离dist 的经度不变，纬度分别加减 (dist* 360...
2019-06-06 10:33:10
1939
原创 python导入自定义函数
有的时候我们需要从别的目录导入一些py文件的函数例如我想导入 D:\\work\\Pywork\\Pycharm\\functions\\function1\\add.py 文件中的add_number函数，方法如下：import syssys.path.append(r'D:\\work\\Pywork\\Pycharm\\functions\\function1\\')import a...
2019-05-17 11:45:12
3313
原创 通过pyspark提交多个执行文件和文本文档
通过pyspark提交多个执行文件和文本文档直接上代码spark-submit –master yarn-cluster –conf spark.pyspark.python=/opt/Anaconda3/bin/python3 –conf spark.pyspark.driver.python=/opt/Anaconda3/bin/python3 –py-files /home/de...
2018-12-12 17:59:10
4741
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人