想写小说的程序员-CSDN博客

原创 java父类和子类的异常问题

最近在看java的面试题，其中有关于子类和父类的异常问题，题目如下public class MyException { public static void main(String[] args) { try{ throw new ExceptionB(); }catch(ExceptionA a){ System.out.println("catch Exceptio...

2019-01-20 10:39:02 595

原创 Postgresql中对于空间字段的插入操作

postgresql不同于其他关系型数据库的一点就是它支持对空间字段的操作。想要PG库支持空间字段，只需要在安装数据库的时候安装postgis插件即可，创建完数据库使用如下语句：CREATE EXTENSION postgis;空间字段的存储操作所谓空间字段，无非就是点、线和面的数据，下面将分别介绍插入这些字段的具体操作插入点的数据INSERT INTO public....

2018-12-06 15:24:37 5756 2

原创动手编写mapreduce---官方wordwount程序

在学习伪分布式hadoop集群的时候，使用了官方的wordcount程序，当时也只是直接执行官方jar包，不知道其工作原理，用过自己写一遍这个程序，加深对mapreduce工作原理的理解。MapReduce工作原理 input -> map -> shuffle -> reduce -> output基于MapReduce计算模型编写分布式并行程序非常简单，主要编码工作就是实现

2017-11-28 11:04:29 465

原创 hadoop各模块含义及对应的配置

HDFS模块NameNode NameNode是主节点，存储文件的元数据，如文件名，文件目录结构，文件属性，以及每个文件的块列表和块所在的DataNode等。NameNode的元数据中的一部分存放在内存中的，在进程当中，另一部分存放在本地磁盘（fsimage：镜像文件和edits：编辑日志）在core-site.xml中配置<property> <name>fs.defaultFS</

2017-11-23 16:42:41 429

原创使用本地hadoop运行伪分布式程序

这篇文章所使用的配置文件和思路基本都来自于官方的文档，在上一篇文章中已经配置完成了几个配置文件，包括hdfs,mapreduce以及yarn。全都配置在了一台服务器，所以运行的是伪分布式的程序。启动hdfs文件系统配置core-site.xml<configuration> <property> #配置hdfs文件系统的位置和端口，这里使用的是本地 #依据个人

2017-11-22 15:22:24 1395

要想正常使用hadoop系统，主要是配置core-site.xml，hdfs-site.xml以及mapred-site.xml这几个配置文件，如果使用yarn框架的话，还需要配置yarn-site.xml。值得一提的是，这几个配置文件都有对应的xxx-env.xml，这些环境的配置文件需要正确的配置jdk的环境。以下仅为我所使用，并且能在本地正常运行的配置：core-site.xml的配置<con

2017-11-22 10:50:04 394

原创初识hadoop

哟吼~ ~ 美好的一天~从今天开始学习大数据的东西，虽然有一定的java基础，但是对新事物还是充满着恐惧感的，幸而身边有从事大数据工作的朋友，于是决定开始这漫漫长征。话不多说，还是开始学习吧~跟着学习视频，首先去官网下载hadoop2.x的压缩包，解压之后大致了解一下这个包内所包含的主要信息: - hadoop/bin 存放常用命令，如hadoop,hdfs等。 - Hadoop/da

2017-11-22 09:52:44 290

原创 java实现文件的复制

package com.xiaoshi.io;import java.io.File;import java.io.FileInputStream;import java.io.FileNotFoundException;import java.io.FileOutputStream;import java.io.IOException;public class CopyFiles {

2017-07-09 17:29:05 187

原创 java读取本地txt文件

package com.xiaoshi.io;import java.io.BufferedReader;import java.io.File;import java.io.FileInputStream;import java.io.FileNotFoundException;import java.io.IOException;import java.io.InputStream;

2017-07-09 17:08:08 589

想写小说的程序员的博客