blablablafish-CSDN博客

原创 (三)hadoop虚拟机环境下安装以及配置

基础文件安装及配置上传jdk, hadoop安装包到linux解压jdk, 配置JAVA_HOME解压hadoop配置HADOOP_HOME（针对全局配置就修改/etc/profile，针对当前用户就修改~/.bashrc）配置$HADOOP_HOME/etc/hadoop/目录下的5个属性文件:hadoop-env.sh 配置JAVA_HOME路径core-site.xml<co

2017-06-22 09:35:03 1278

原创 (二)hadoop配置虚拟机环境

基础环境配置windows环境下，修改vmware的配置（vm安装目录下vmnetcfg.exe管理员打开），指定在192.168.8.*网段。即使用host-only模式，进行主机和虚拟机通信，并且共用VMnet1虚拟网卡。然后，配置本机和虚拟通信的ip地址：安装好虚拟机(用的centos6.8)之后，配置网卡信息:vim /etc/sysconfig/network-scripts/

2017-06-21 16:05:35 1184

原创 (一)hadoop 权威指南---气象数据获取

下载FileZilla FileZilla是一个ftp远程文件下载器，非常好用。链接：https://filezilla-project.org/连接ftp 气象数据来自美国气象局，数据根 ftp://ftp.cdc.noaa.gov/ ，如果要用户名，那就是anonymous。不过里面数据太多，我需要的是 ftp://ftp.ncdc.noaa.gov/pub/data/noaa/ 路径

2017-06-21 14:55:07 2185

转载欢迎使用CSDN-markdown编辑器

欢迎使用Markdown编辑器写博客本Markdown编辑器使用StackEdit修改而来，用它写博客，将会带来全新的体验哦：Markdown和扩展Markdown简洁的语法代码块高亮图片链接和图片上传LaTex数学公式UML序列图和流程图离线写博客导入导出Markdown文件丰富的快捷键快捷键加粗 Ctrl + B 斜体 Ctrl + I 引用 Ctrl

2017-06-21 14:34:45 155

hadoop权威指南---气象数据1901-1930年

hadoop权威指南里面提到的美国气象局数据，是在太多了，而且限制只能传60M，所以共享前30年，学习学习，一个积分意思一下。具体怎么获取的详见：http://blog.csdn.net/u010469490/article/details/73549197

2017-06-21

nutch-1.9 源码

好用的爬虫工具，刚发布不久的新版本 nutch是网络搜索及信息提取中使用得最广泛的网络爬虫工具仅仅使用简单的配置就可以实现强大的爬取信息功能

2014-09-20

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人