qq_28034559的博客

原创 Windows10 Spark单机开发环境的搭建（Python）

之前一直是在单机写Spark程序，写完拿到服务器上跑，但是本地调试程序很不方便。本文旨在方便开发，在本地搭建简单的环境，可以在本地调试。 前提：本文是在windows环境下，假设你电脑没有安装任何开发环境，如有安装过可自行跳过。 需要：jdk1.8+Python3.5+spark-2.1.0-bin-hadoop2.6+hadoop-common-2.2.0-bin-ma...