自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

零基础大数据

零基础大数据1706-06每日笔记

  • 博客(22)
  • 资源 (1)
  • 收藏
  • 关注

原创 解决docker中的容器无法使用中文的问题

最近的项目中docker容器中生成的日志文件是中文名字,但是文件名是???.txt进入容器内部:docker exec -t -i 容器名 /bin/bash查看容器的语言环境:[root@12ec64254bc4 /]# localeLANG=LC_CTYPE="POSIX"LC_NUMERIC="POSIX"LC_TIME="POSIX"LC_COLLATE="POSIX"...

2019-10-11 15:06:56 1064

原创 Kong入门及docker安装

一.Kong介绍Kong(https://github.com/Kong/kong) 是一个云原生,高效,可扩展的分布式 API 网关。 自 2015 年在 github 开源后,广泛受到关注,目前已收获 1.9w+ 的 star,其核心价值在于高性能和可扩展性。二.安装前准备安装好docker稳定版本会docker 的基本使用了解kong概念和使用(文档地址: https://getk...

2019-06-25 11:15:09 1104

原创 文档管理工具 (Yapi)的docker安装和部署

**使用 Docker 构建 Yapi**1、启动 MongoDBdocker run -d --name mongo-yapi mongo2、获取 Yapi 镜像,版本信息可在 阿里云镜像仓库 查看docker pull registry.cn-hangzhou.aliyuncs.com/anoy/yapi3、初始化 Yapi 数据库索引及管理员账号docker run -i...

2019-06-25 11:06:18 1343

原创 清晰易懂的Numpy入门教程

Numpy是python语言中最基础和最强大的科学计算和数据处理的工具包,如数据分析工具pandas也是基于numpy构建的,机器学习包scikit-learn也大量使用了numpy方法。本文介绍了Numpy的n维数组在数据处理和分析的所有核心应用。目录如何构建numpy数组如何观察数组属性的大小和形状(shape)如何从数组提取特定的项如何从现有的数组定义新数组多...

2019-04-08 13:08:51 755

原创 零基础大数据HADOOP学习-笔记3-安全模式 safemode

【安全模式 safemode】 3种方式方式一:Namenode的一种状态,启动时会自动进入安全模式,在安全模式,文件系统不允许有任何修改,“只读不写”。目的,是在系统启动时检查各个DataNode上数据的有效性。方式二: //手动进入安全模式 bin/hdfs dfsadmin -safemode enter //手动离开安全模式 $ bin/h...

2018-08-09 16:45:07 182

原创 零基础大数据HADOOP学习-笔记2-HDFS深入学习

一、HDFS深入 1、namenode 和 datanode功能【namenode】接收用户操作请求 管理文件与block之间关系,block与datanode之间关系 namenode管理:namenode支持对HDFS中的目录、文件和块做类似文件系统的创建、修改、删除、列表文件和目录等基本操作。 块存储管理 在整个HDFS集群中有且只有唯一一个处于active状态nameno...

2018-08-09 16:39:11 149

原创 零基础大数据HADOOP学习-笔记1

一、大数据的4V特征 Volume 数据量大 TB PB Varity 的数据多种多样文本(.log .txt .sql .xml) Veracity 价值密度低 商业价值高 Velocity 速度快二、Hadoop 的概念Hadoop是一个应用java语言实现的软件框架,可扩展的分布式并行计算框架,它可以让应用程序支持上千个节点和PB级别...

2018-08-09 16:29:37 169

原创 鸢尾花数据SVM分类案列代码讲解

首先导入需要的包import numpy as npimport pandas as pdimport matplotlib as mplimport matplotlib.pyplot as pltimport warningsfrom sklearn import svm #svm导入from sklearn.model_selection import train_tes...

2018-06-21 16:17:51 12044 1

原创 spark-submit 提交参数总结

spark-submit --master yarn-cluster --num-executors 48 --driver-memory 2g --executor-memory 7g --executor-cores 3 /home/hadoop/ZhangZhiHua/spark/sparknew.jar|参数名称| |含义| –master MASTER_URL 可以是spark:

2018-01-03 10:52:17 10651

原创 MySQL与JDBC回顾

WEB08_MySQL与JDBC回顾一、 对数据库的操作1. 创建一个库create database 库名create database 库名 character set编码  创建带有编码的 查看编码:   2. 删除一个库drop database 库名  3. 使用库use 库名  4.查看当前正在操作

2017-08-04 11:44:39 352

原创 day31管家婆项目训练笔记

今日内容介绍 1、管家婆项目01项目训练目标* A: 项目训练目标 * a: 项目目标 * 综合运用前面所学习的知识点 * 熟练View层、Service层、Dao层之间的方法相互调用操作、 * 熟练dbutils操作数据库表完成增删改查 * 了解公司项目开发的流程,充分的掌握项目需求分析、设计与功能的代码实现。提高同学们独立

2017-08-04 11:42:00 773

原创 DBUtils和连接池的笔记和总结

今日内容介绍 1、DBUtils 2、连接池 01DButils工具类的介绍个三个核心类* A: DButils工具类的介绍个三个核心类 * a: 概述 * DBUtils是java编程中的数据库操作实用工具,小巧简单实用。 * DBUtils封装了对JDBC的操作,简化了JDBC操作,可以少写代码。

2017-08-04 11:40:09 1813

原创 mysql数据库中JDBC与DBUtils的笔记和总结

今日内容介绍 1、JDBC 2、DBUtils01JDBC概念和数据库驱动程序* A: JDBC概念和数据库驱动程序 * a: JDBC概述 * JDBC(Java Data Base Connectivity,java数据库连接)是一种用于执行SQL语句的Java API, 可以为多种关系数据库提供统一访问,它由一组用Java语言编写的

2017-08-04 11:36:52 603

原创 MySQL数据库 SQL语句 笔记

今日内容介绍 1.MySQL数据库 2.SQL语句第一节课1(MySQL数据库)数据库概念.avi 5分2(MySQL数据库)常见的数据库.avi 4分3(MySQL数据库)数据库和管理系统.avi 5分4(MySQL数据库)数据表和Java中类的对应关

2017-08-02 16:54:32 765

原创 07-21XML

package com.itcast.demo;import java.io.File;import java.io.FileInputStream;import java.io.InputStream;import javax.xml.parsers.DocumentBuilder;import javax.xml.parsers.DocumentBuilderFactory;import

2017-07-21 11:06:28 217

原创 JAVA中的网络协议,UDP,TCP案例分析及笔记总结

今日内容介绍 1、网络三要素及传输协议 2、实现UDP协议的发送端和接收端 3、实现TCP协议的客户端和服务器 4、TCP上传文件案例=======================第一节课开始=============================================01网络模型*A:网络模型 TCP/IP协议中的四层分别是应用层、传输层、网络层和链路层,每层分别负

2017-07-20 11:30:00 877

原创 JAVA中多线程笔记总结

今日内容介绍 1、多线程 2、线程池=======================第一节课开始=============================================01进程概念*A:进程概念 *a:进程:进程指正在运行的程序。确切的来说,当一个程序进入内存运行, 即变成一个进程,进程是处于运行过程中的程序,并且具有一定独立功能。02线程的概念*A:

2017-07-19 14:46:04 366

原创 IO流面试题

![IO流的图解介绍,IO概念·输入流:把能够读取一个字节序列的对象称为输入流(百度百科)·输出流:把能够写一个字节序列的对象称为输出流(百度百科) 从定义上看可能会让你感到困惑,这里解释一下:输入输出是相对于内存设备而言的,将外设(硬盘,键盘等)中的数据读取到内存设备中叫输入;将内存设备中的数据写入到外设中叫输出,所以有读入,写出的称呼:读入到内存,写出内存。 可以这样比喻:输

2017-07-19 11:30:28 697

原创 JAVA中IO流中的file类输出流和输入流,递归函数笔记总结,附习题

今日内容介绍 1、File 2、递归=======================第一节课开始=============================================01IO技术概述.avi(02:49)* A:IO技术概述 * a: Output * 把内存中的数据存储到持久化设备上这个动作称为输出(写)Output操作 * b: Input

2017-07-19 11:23:46 903

原创 JAVA中 IO流中转换流及缓冲流笔记总结

今日内容介绍 1、转换流 2、缓冲流=======================第一节课开始=============================================01转换流概述* A: 转换流概述 * a: 转换流概述 * OutputStreamWriter 是字符流通向字节流的桥梁:可使用指定的字符编码表,将要写入流中的字符编码成字节

2017-07-19 11:18:39 1004

原创 Java中的IO流,字节流及字符流 的知识点总结

今日内容介绍 1、字节流 2、字符流=======================第一节课开始=============================================01输入和输出* A:输入和输出 * a: 参照物 * 到底是输入还是输出,都是以Java程序为参照 * b: Output * 把内存中的数据存储到持久化设备上这个

2017-07-19 11:06:06 541

原创 JAVA学习IO流File习题一

键盘录入一个文件夹路径,统计该文件夹(包含子文件夹)中每种类型的文件及个数,注意:用文件类型(后缀名,不包含.(点),如:”java”,”txt”)作为key, 用个数作为value,放入到map集合中,并用两种方式遍历map集合 例如: doc 的类型的文件有 3 个 java 的类型的文件有 5 个 txt 的类型的文件有 7 个 pac

2017-07-17 17:36:39 545

IKAnalyzer分词器 下载IKAnalyzer2012FF_u1.jar

IKAnalyzer分词器版本 2012 兼容Lucene3.3以上版本 对solr1.4提供接口实现 使用IK分词器,应为该集群使用到的solr版本为4.10.3-cdh5.7.5,所以使用的 IK 包为IKAnalyzer2012FF_u1.jar,如果是3x的solr,使用IKAnalyzer2012_u6.jar 具体操作如下: 引用 1.在/opt/cloudera/parcels/CDH/lib/solr/webapps/solr/WEB-INF创建classes目录 2.把IKAnalyzer.cfg.xml 和 stopword.dic添加到classes目录 3.把IKAnalyzer2012FF_u1.jar添加到/opt/cloudera/parcels/CDH/lib/solr/webapps/solr/WEB-INF/lib目录 4.修改 /opt/cdhsolr/fuser/conf/schema.xml文件,在其中添加 <!--配置IK分词器--> 引用 <!--索引时候的分词器--> <!--查询时候的分词器-->

2018-01-12

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除