萌新Java程序猿-CSDN博客

原创 Java图书管理系统（初学者必看的小项目）

图书管理系统项目第一天:准备把整个框架顺一遍，第一次独立写这个算是我人生中第一个java小项目，不清楚多少天能完成，我会坚持把自己的心得写在这里，主要是给自己看（不是学文的，文笔很差见谅，争取把注释写详细点），如果能帮助其他初学者更好了一起加油！点击打开链接DriverManager.getConnection(Stringurl,Stringuser,Stringpassw...

2018-01-08 23:41:49 20263 9

记住存在的路径，并在环境变量中进行配置 yum install vim输入Y 上面的路径记得更换为自己的，若是安装步骤进行配置，则无需改变输入i进行比编辑点Esc 输入wq 进行保持处理遇到启动失败问题：解决方案：页面打开失败，确认端口是否开启开启端口指令账号: nacos 密码: nacos由于项目不通，请按照项目中的配置文件进行配置就不一一介绍了配置完成。由于之前 mysql redis mongodb 文件服务器，文件预览服务器等都安装好了后续再

2022-07-07 14:55:13 246 1

原创 Failed to parse multipart servlet request； nested exception is java.lang.RuntimeException: java.nio.

1.造成原因分析：Failed to parse multipart servlet request; nested exception is java.lang.RuntimeException: java.nio.file.NoSuchFileException: /data/tmp/tomcat_upload/undertow4345140605170222984upload上传文件的临时路径找不到2 原因说明在linux系统中，springboot应用服务再启动（java -ja...

2021-12-08 18:12:58 20475 2

原创【项目实战】批量导出excel，并打包zip文件【连载中】

一.需求描述该需求是要在课程模块里的课程任务推送-报表模块，任务推送报表（权限*）导出用户学习总学习记录，若课程任务推送涉及多个课程，则需要生产多个sheet页，每个sheet页的名称按课程名称展示，效果图1.总览2.单个抽时间再更新吧。。。...

2021-11-29 16:39:49 743

原创千万级项目从零开发到上线使用【连载】

5月底正式开发-9月30正式上线写写心得吧主负责代码能外露后续再更新吧提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录系列文章目录前言一、pandas是什么？二、使用步骤 1.引入库 2.读入数据总结前言提示：这里可以添加本文要记录的大概内容：例如：随着人工智能的不断发展，机器学习这门技术也越来越重要，很多人都开启了学习机器学习，本文就介绍了机器学习的基础内容。提示：以下是本篇文章正文内容，下面案例可供...

2021-11-29 16:05:05 158

原创项目部署上线实战操作文档----晚上十点更新

晚上十点更新

2021-03-15 18:25:54 282

原创 Mysql如何快速插入千万条数据实战

一.创建数据库二.创建表1.创建 dept表CREATE TABLE `dept` ( `id` int(11) NOT NULL, `deptno` mediumint(9) DEFAULT NULL, `dname` varchar(20) DEFAULT NULL, `loc` varchar(13) DEFAULT NULL, PRIMARY KEY (`id`)) ENGINE=InnoDB DEFAULT CHARSET=utf8;2.创建emp表

2021-03-02 00:35:20 4474 8

原创 Mysql 索引优化（一）

目录一.创建表二.插入数据三.创建索引四.索引总结一二三四五六七八九十一.创建表CREATE TABLE `staffs` ( `id` int(11) NOT NULL, `name` varchar(10) DEFAULT NULL COMMENT '姓名', `age` int(11) NOT NULL COMMENT '年龄', `pos` varchar(20) DEFAULT NULL COMMENT '职位',...

2021-02-28 23:57:13 232

原创 Mysql SQL优化实战之 EXPLAIN篇（三表查询）

EXPLAINps:本篇博客记录sql优化实战 explain 相关理论知识在其他文章中总结，一些关键字或者知识点就不一一讲解了。表结构在之前博客中有提到https://blog.csdn.net/LiuY521/article/details/114142914?spm=1001.2014.3001.5501数据库一.三表优化1.创建表2.添加数据3.查看三表索引把之前两表创建的索引删除4.三表查询SQL1.Using join buffer 使用连接.

2021-02-26 18:32:04 547

原创 Mysql SQL优化实战之 EXPLAIN篇（两表查询）

目录EXPLAIN一.两表优化1.查询语句2.EXPLAIN解析语句3.创建索引4.再次解析案例二1.创建表2.插入语句3.查询语句4.创建BOOK索引5.再次解析SQL6.删除索引7再次创建索引8.解析SQL9.右连接查询10.删除索引11.创建Class表索引12.解析SQLEXPLAINps:本篇博客记录sql优化实战 explain 相关理论知识在其他文章中总结，一些关键字或者知识点就不一一讲解了。表结构在之前博客中

2021-02-26 18:07:51 369

原创 Mysql SQL优化实战之 EXPLAIN篇

EXPLAINps:本篇博客记录sql优化实战 explain 相关理论知识在其他文章中总结，一些关键字或者知识点就不一一讲解了。一.单表优化1.首先创建一个单表CREATE TABLE `article` ( `id` int(10) NOT NULL, `author_id` int(10) ...

2021-02-26 17:14:54 1259 2

原创 Mysql基础——进阶篇(二)

目录#进阶6：连接查询#进阶7：子查询#进阶8：分页查询#进阶9：联合查询#进阶6：连接查询含义：又称多表查询，当查询的字段来自于多个表时，就会用到连接查询笛卡尔乘积现象：表1 有m行，表2有n行，结果=m*n行发生原因：没有有效的连接条件如何避免：添加有效的连接条件分类：按年代分类： sql92标准:仅仅支持内连接 sql99标准【推荐】：支持内连接+外连接（左外和右外）+交叉连接按功能分类：内连接：...

2021-02-16 13:16:49 311

原创 Mysql基础——进阶篇(一)

进阶1：基础查询语法：select 查询列表 from 表名;类似于：System.out.println(打印东西);特点：1、查询列表可以是：表中的字段、常量值、表达式、函数2、查询的结果是一个虚拟的表格#使用表USE myemployees;#1.查询表中的单个字段SELECT last_name FROM employees;#2.查询表中的多个字段SELECT last_name,salary,email FROM employees;#3.查询...

2021-02-16 12:43:59 276

原创 Easymall项目分布式拆分整合(九）

Easymall项目分布式拆分整合(九）一.购物车系统搭建1.步骤（经典六步）1.1创建一个quickstart的maven工程(src/main/resources)1.2pom继承parent,依赖common1.pom继承parent2.依赖common1.3后台user系统需要的其他依赖...

2020-07-17 14:51:47 330

原创 Hadoop个人心得笔记(一)

Hadoop个人心得笔记(一)Volume：数据量大，包括采集、存储和计算的量都非常大。大数据的起始计量单位至少是T、P（1024个T）、E（100万个T）或Z（10亿个T） Variety：种类和来源多样化。包括结构化、半结构化和非结构化数据，具体表现为网络日志、音频、视频、图片、地理位置信息等等，多类型的数据对数据的处理能力提出...

2020-07-17 14:50:03 6085

原创项目搭建服务器记录

nohup java -Xmx512m -Xms512m -Xmn256m -XX:SurvivorRatio=8 -XX:+UseG1GC -XX:InitiatingHeapOccupancyPercent=70 -XX:MaxGCPauseMillis=200 -XX:MaxTenuringThreshold=14 -XX:ParallelGCThreads=4 -XX:ConcGCThreads=4 -XX:CICompilerCount=6 -XX:+DisableExplicitGC -XX:+

2020-06-30 17:58:53 236

原创探索JVM底层奥秘之ClassLoader

探索JVM底层奥秘之ClassLoaderJVM 运行流程 1.如何跨平台（JVM针对不同的平台生成不同的虚拟机）Java源程序通过 Javac编程生成.class文件，加载到JVM内存的堆中，通过被JVM解析成能被不同平台支持的指令，2. JVM基本结构类加载器 ClassLoader 符合要求负责加载到内存...

2019-07-18 16:45:46 319

原创 Spark单机安装

Spark单机安装目录 Spark单机安装一.下载二.解压三.进入安装目录四.进入conf目录文件五.编辑spark-env.sh文件六.进入BIN目录启动服务七.启动成...

2019-07-16 16:01:43 1166

原创大数据阶段项目之项目实现

大数据阶段项目之项目实现目录大数据阶段项目之项目实现一.启动Hadoop分布式集群（伪分布式）二.创建一个文件夹存储数据三.将文件收集到HDFS1.在Flume的data下创建zebra.conf2.利用flume收集数据，将收集的数据落地到HDFS系统中。3.执行命令，存储HDFS4.查看eclips...

2019-07-12 20:49:09 758

原创大数据阶段项目之项目介绍

项目介绍一、zebra概述如图所示，电信运营商的用户通过连接到互联网中的各种网络设备访问一个网站时，其访问信息会通过基站在网络中传递，基站可以收集所有用户的访问日志数据 zebra是对电信运营商收集的用户上网数据进行分析的一个应用程序。通过分析得到的结果可以展现不同小区的上网详情注：zebra本意为斑马，命名类似had...

2019-07-12 19:46:39 5648

原创 Hive个人心得笔记之Hive优化

Hive个人心得笔记之Hive优化一.Hive的优化Hive的优化小表缓存：将小表的放入内存中，减少对磁盘以及网络消耗在做join查询的时候，如果有附带的查询条件，那么最好先用子查询将符合条件的数据查询出来之后再进行连接查询 - 目的：减少笛卡尔积的数据量如果去重和聚合同时出现，尽量先用子查询进行去重，然后再进行聚合1....

2019-07-09 21:26:04 337

原创 Hive个人心得笔记之JDBC

Hive个人心得笔记之JDBC目录 Hive个人心得笔记之JDBC一.Hive的JDBC一、概述二、实现步骤：1.在服务器端开启HiveServer服务：一.Hive的JDBC一、概述hive实现了jdbc接口，所以可以通过java代码操作 hive的jd...

2019-07-09 20:19:50 931

原创 Hive个人心得笔记之内置函数、UDF

Hive个人心得笔记之内置函数目录 Hive个人心得笔记之内置函数一.内置函数二.运算符一、关系运算符二、算数运算符三、逻辑运算符三.函数一、数学函数二、类型转换函数三、日期函数四、条件函数五、字符串函数六、聚合函数四.explode一、概...

2019-07-09 19:38:24 639

原创 Hive个人心得笔记之表结构，数据类型，join

Hive个人心得笔记之表结构，数据类型，join目录 Hive个人心得笔记之表结构，数据类型，join一.连接-join1.建表：2.查询：3.inner join4.left join5.right join6.Full outer join7.left semi join1.创建...

2019-07-09 19:12:18 421

原创 Hive个人心得笔记之基础指令

Hive个人心得笔记之基础指令一.基础指令desc 表查看表结构没有主键，可以重复提交手动提交效率过低，可以通过文件形式传输 load data local inpath '/home/software/1.txt' into table stu; 通过加载文件数据到指定的表...

2019-07-09 18:42:27 269

原创 HBase之伪分布式安装

HBase之伪分布式安装 1.安装JDK 2.安装Hadoop的伪分布式或者完全分布式集群 3.上传或者下载HBASE的安装包 4.解压安装包：tar -xvf hbase-0.98.17-hadoop2-bin.tar.gz 5.进入HBASE安装目录下的子目录conf：cd hbase...

2019-07-09 18:41:56 249

原创 HBase之完全分布式安装

HBase完全分布式安装目录 HBase完全分布式安装1.下载到服务器2.下载解压3.修改conf/hbase-env.sh4.#修改JAVA_HOME：export JAVA_HOME=xxxx5.#修改Zookeeper和Hbase的协调模式，6.保存，...

2019-07-09 18:40:02 641

原创 Flume个人心得笔记之事务机制

Flume个人心得笔记之事务机制目录 Flume个人心得笔记之事务机制一、概述二、put事务流程三、Take事务一、概述Flume的事务机制与可靠性保证的实现，最核心的组件是Channel（通道）。如果没有Channel组件，而紧靠Source与...

2019-07-06 21:25:53 844

原创 Flume个人心得笔记之Process安装

Flume个人心得笔记之Process安装目录 Flume个人心得笔记之Process安装一.概述二.Default Sink Processor一、概述二、可配置选项说明三.Failover Sink Processor一、概述二、可配置项说明三、示例四.Load Balanci...

2019-07-06 21:09:46 348

原创 Flume个人心得笔记之Interceptor安装

Flume个人心得笔记之Interceptor安装目录 Flume个人心得笔记之Interceptor安装一.概述二.Timestamp Interceptor一、概述二、可配置项说明三、配置示例1.创建文件2.配置第一个节点，2，3默认扇出3.启动4.传输数据5.接收数据 -时间检测7.启动8.传输...

2019-07-06 21:03:49 248

原创 Flume个人心得笔记之Selector安装

Flume个人心得笔记之Selector安装目录 Flume个人心得笔记之Selector安装一.复制模式一、概述二、可配置选项说明三、示例二.多路复用模式一、概述二、可配置选项说明三、示例1.概述2.配置第一个节点配置3.启动4.发送数据5.接收数据一.复制模式...

2019-07-06 20:17:21 380

原创 Hive个人心得笔记之安装

Hive个人心得笔记之安装目录 Hive个人心得笔记之安装一.Hive安装二.Mysql安装一.卸载删除Percona和Mysql相关依赖二.执行命令全部卸载三.下载安装即可四.下载完成五.安装客户端，服务端六.新增mysql用户组，并创建m...

2019-07-06 16:07:21 843

原创 Hive个人心得笔记之数据库和数据仓库

Hive个人心得笔记之数据库和数据仓库一、数据仓库和数据库对比数据库数据仓库为线上系统提供实时数据为离线分析存储历史数据具有完整的增删改查的能力只支持一次写入多次查询，不支持行级别的增删改具有完整的事务能力 ...

2019-07-06 15:11:30 581

原创 Hive个人心得笔记

Hive个人心得笔记一、Hadoop开发存在的问题只能用java语言开发，如果是c语言或其他语言的程序员用Hadoop，存在语言门槛需要对Hadoop底层原理，api比较了解才能做开发开发调试比较麻烦二、Hive概述Hive是基于Hadoop的一个数据仓库工具。可以将结构化的数据文件映射为一张表，并提供完整...

2019-07-06 15:07:08 6333

原创 Flume个人心得笔记之Sink安装

Flume个人心得笔记之Sink安装目录 Flume个人心得笔记之Sink安装一.Logger Sink一、概述二、可配置项说明三、示例二.File_roll Sink一、概述二、可配置选项说明三、示例1.复制文本2.编辑配置3.启动指令启动不了，杀死对应进程重...

2019-07-05 21:23:32 3060

原创 Flume个人心得笔记之Channel安装

Flume个人心得笔记之Channel安装全解目录 Flume个人心得笔记之Channel安装全解一.Memory Channel一、概述二、可配置选项说明三、示例:二.File Channel一、概述二、可配置选项说明三、示例1.复制一份文件2.编辑配置4.确保目录产生5.启动...

2019-07-05 20:22:35 1158

原创 Flume个人心得笔记之Source安装

Flume个人心得笔记之Source安装目录 Flume个人心得笔记之Source安装一.Flume基本案例一.启动命令二.下载文件并解压三、示例：1.创建一个Data文件夹2.编辑一个文件3.进入bin下执行该指令4...

2019-07-05 20:09:05 526

原创 Flume个人心得笔记

一、概述Flume是Apache提供的开源的、分布式的、可靠的日志收集系统能够有效的收集、聚合、传输大量的日志数据 Flume有2个版本：Flume-og（Flume0.9x）和Flume-ng(Flume1.X)。Flume-og和Flume-ng不兼容二.Flume的特性可靠性：事务型的数据传递，保证数据的可靠性。一个日志交给flume来处理，不会出现此日志丢失或未被处理的情况...

2019-07-05 19:23:15 847