qq_42048263-CSDN博客

原创 centos8常见报错处理

解决办法：执行如下命令将昂快更改成使用centos stream 8。

2023-11-09 21:04:04 344

原创如何在mac a1系统下将mysql加入环境变量

mac系统若使用二进制软件包直接安装，默认路径为/usr/local/mysql。最好保存，然后执行source .zprofile即可。

2023-10-08 16:43:30 533

要在mac部署安装powershell，可以使用homebrew来进行部署安装，故其步骤如下：/bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh)" brew install --cask powershellpwshbrew uninstall --cask powershell。

2023-09-19 16:53:17 854

原创 windows系统盘经常被撑满问题

（3）部署安装有docker desktop软件，此时若访问%LOCALAPPDATA%/Docker/wsl目录，可以看到两个文件夹，每个文件夹都会有一个vhdx文件，并且在我自己的环境下，其中docker-desktop-data存放镜像的文件竟然达到34.2GB，docker-desktop用于存放程序的也近600M.（1）安装的软件直接部署到系统盘导致，建议将软件安装到其他盘符。（2）默认下载的软件文本存储目录在系统盘，建议挪到其他盘符。

2023-06-06 06:28:14 229

原创 Amazon Linux2使用kubeadm部署安装K8S集群

在AWS上启动3台Amazon Linux2的服务器，服务器配置为2vcpu 和2GB内存。

2023-04-23 15:39:53 1573 1

原创基于Jenkins实现Docker应用的持续集成与部署

1. 服务器部署安装有docker在docker应用开发中最常见的就是开发Dockerfile文件，可以使用代码仓库来管理它。而在企业私有开发环境中是无法访问公有代码仓库（如Github）的。这时可以搭建私有代码仓库。

2023-04-19 22:36:08 613

原创 Amazon Linux2部署安装Jenkins

不过，您仍然可以使用 jlink 工具来创建一个自定义运行时镜像，其中只包含您需要的 Java 模块。使用 jlink 命令，您可以指定要包含在运行时镜像中的模块，并且可以通过使用。因此，在 JDK 11 及更高版本中，不能直接生成 JRE。这将创建一个包含所需模块的 JRE 镜像，您可以将其部署到目标计算机并使用它来运行您的应用程序。在build steps中选择【增加构建步骤】，然后选择【执行shell】点击构建的任务然后点击【控制台输出】查看日志输出结果。模块包含在运行时镜像中，并将其输出到名为。

2023-04-19 21:39:50 645

原创如何在AWS EKS上部署安装nginx ingress controller

通常是一个负载均衡器，用于将外部流量路由到您的 Kubernetes 集群，并负责 L4-L7 网络服务Ingress controller 仅覆盖 L7 流量，而入口重新路由 HTTP 和 HTTPS 流量。

2023-04-17 11:55:00 702

原创 ubuntu22.04部署安装xtrabackup-24

1. 添加percona的软件仓库。2. 添加percona的公钥。3. 安装xtrabackup。若安装过程中出现如下错误信息。则根据提示执行相应的命令修复。4.验证安装好的版本信息。

2023-04-10 17:59:58 852

原创 ipvsadm源码编译安装

ipvsadm, linux

2023-03-20 15:41:56 545

原创 etcd集群部署安装

在每个节点上创建etcd的system unit文件/usr/lib/systemd/system/etcd.service,注意替换ETCD_NAME和INTERNAL_IP变量的值。注意上面配置 hosts 字段中制定授权使用该证书的 IP 和域名列表，因为现在要生成的证书需要被 etcd 集群各个节点使用，所以这里指定了各个节点的 IP 和 hostname。signing表示此CA证书可以用于签名其他证书，ca.pem中的CA=TRUE。利用cfssl生成etcd所需的相关证书。

2023-03-18 22:34:14 896

原创利用spark将parquet文件转存储为CSV文件

spark读取parquet文件并转存储为CSV文件

2022-08-31 20:26:01 1363

原创利用datafaker批量生成测试数据

一、创建python虚拟运行环境二、安装datafaker等相关模块组件三、部署mysql服务器四、利用datafaker生成测试数据

2022-08-16 18:08:36 644

原创 Setup local enviroment for running aws glue script

本地搭建Glue开发运行环境

2022-04-21 16:55:12 2116

原创使用Python连接Redis集群

1、使用pip search查看可安装的Redis模块版本PS D:\code>pip install pip-search #安装pip-search模块PS D:\code> pip_search redis #利用pip-search查找模块可安装的版本信息 ???? https://pypi.org/search/?q=redis ??

2022-01-28 15:31:34 3926

原创 windows11需要按多次ctrl和C才可以复制的处理方法

Windows11需要按多次ctrl+c才可以正常复制的处理方法：C 盘下的 Windows 目录中的 System32 缺少 clip 文件夹创建该空的文件夹就可以

2022-01-13 17:56:38 8164 7

原创使用VSCODE搭建Java maven项目

若使用mvn的3版本，这可用在控制台中执行如下命令进行快速构建java的maven开发项目，具体流程如下<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-

2022-01-07 16:51:26 2611

原创使用Python调用requests模块时报urllib3 和chardet不匹配的告警信息

使用Python调用requests模块时报urllib3 和chardet不匹配的告警信息，详细异常信息如下所示RequestsDependencyWarning: urllib3 (1.26.7) or chardet (3.0.4) doesn't match a supported version! warnings.warn("urllib3 ({}) or chardet ({}) doesn't match a supported "经过查阅相关资料，其处理方法为协助冲突的u

2021-12-10 09:30:53 20995 3

原创 ssh用户密码正确但是登录时却报被拒绝

问题：有时候，在使用SSH登录到服务器时，明明密码正确，但是登录时候却报被拒绝，这是什么原因呢？解决思路：1、此时我们可以查看Linux服务器的安全日志文件/var/log/secure，若无异常可以看到如下类似报错异常Oct 6 21:44:47 hostname sshd[265919]: input_userauth_request: invalid user admin [preauth]Oct 6 21:44:47 hostname sshd[265919]: Failed..

2021-10-07 07:42:33 35801

原创 mysql导入数据报Unknown command ‘\f‘.异常处理方法

mysql> select * from fruits; 【查看fruits表中的数据】+------+------+------------+---------+| f_id | s_id | f_name | f_price |+------+------+------------+---------+| a1 | 101 | apple | 5.20 || b1 | 101 | blackberry | 10.20 || bs1...

2021-10-01 20:58:38 1224 1

原创 mysql修改系统变量参数

使用set修改操作系统全局变量的值set @@global.sql_mode='NO_ENGINE_SUBSTITUTION';查看修改之后变量值是否生效select @@sql_mode;修改完之后需要断开当前会话重新做连接方可生效。mysql> insert into mysql.user (Host,User,authentication_string) -> values -> ('localhost','customer1',MD5('aa1...

2021-08-02 15:32:05 275

原创如何重置Mariadb的root密码

1、确认mysql的版本号信息[root@mysql ~]# mysql --versionmysql Ver 15.1 Distrib 5.5.56-MariaDB, for Linux (x86_64) using readline 5.12、停止Mariadb服务[root@mysql ~]# systemctl stop mariadb3、以安全的方式启动mariadb[root@mysql ~]# mysqld_safe --skip-grant-tables --ski..

2021-07-21 13:17:12 1559

原创 lvm扩容操作

lvm扩容操作1、查看系统中各个磁盘分区信息[root@idcnbu2 ~]#fdisk -l 【查看磁盘信息】Disk /dev/sdb: 21.5 GB, 21474836480 bytes, 41943040 sectorsUnits = sectors of 1 * 512 = 512 bytesSector size (logical/physical): 512 bytes / 512 bytesI/O size (minimum/optimal): 5...

2021-05-10 08:59:29 249

原创 Ubuntu20.04安装过程

挂载光盘然后启动进入安装如下选择“Install Ubuntu（safe graphics)”带图形方式安装加载中加载完毕之后出现如下界面，直接选择“Continue”进入键盘布局设置，直接选择“Continue”进入软件安装更新设置，此处选择最小化安装，然后点击“Continue”如下选择“Something else”，然后点击“Continue”出现安装类型选择设置，选择“New Partition Tab...

2021-05-07 15:54:42 5145

原创 SQLyog工具安装

1、如下双击软件，然后点击【下一步】2、勾选许可，然后点击【下一步】3、组件选择，直接保持默认，点击【下一步】4、选择安装位置，直接点击【安装】5、继续点击【下一步】6、点击【完成】7、打开管理软件时选择要使用的语言，此处选择【简体中文】，然后点击【确定】8、此处点击【试用】9、如下为SQLyog版本的GUI管理界面10、点击【新建】，然后填写【连接的名称】，接着点击【确定】11、如下填写服务器相关信息，然后点击【测试连接】

2021-04-28 21:56:03 526 1

原创 Oracle手工创建数据库方法和步骤

1、设置ORACLE_SID2、设置ORACL_HOME等环境变量信息3、创建初始化参数文件[oracle@test dbs]$ cat initmydb.oraDB_NAME=mydbDB_BLOCK_SIZE=8192CONTROL_FILES=/opt/oradata/mydb/control01.ora,/opt/oradata/mydb/control02.oraUNDO_TABLESPACE=undotbsUNDO_MANAGEMENT=AUTOSGA_TARGET=1G

2021-04-21 17:22:43 492

原创使用命令脚本创建ORACLE数据库报dba相关表不存在

使用参数文件内容如下：~~~~~~~~~~~~~~~~~~~~~initprod.ora内容如下~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~############################################################################### Copyright (c) 1991, 2001, 2002 by Oracle Corporation##############################

2021-04-21 15:02:34 1251 1

原创 beeline连接Hive

HiveServer2提供了一个新的命令行工具Beeline，它基于SQLLine CLI的JDBC客户端。Beeline工作模式有两种，即本地嵌入模式和远程模式。嵌入模式下，它返回一个嵌入式的Hive（类似于Hive CLI）；而远程模式则是通过Thrift协议与某个单独的HiveServer2进程进程连接通信。权限设置Beeline使用JDBC连接到HiveServer2时，如果显示User: root is not allowed to impersonate hive，是因为远程访问Had

2021-02-26 10:04:40 3271

原创 windows10安装docker之后执行docker ps 报错

在Windows10中安装完Docker之后，可以正常查看docker版本信息，但是执行docker ps报异常，具体报异常信息如下Users\lgb>docker pserror during connect: Get http://%2F%2F.%2Fpipe%2Fdocker_engine/v1.40/containers/json: open //./pipe/docker_engine: The system cannot find the file specified. In...

2020-06-11 16:04:19 1143

原创 ipython转换执行报错异常

jovyan@78c4473e4ac2:~$ jupyter nbconvert --to python lib.ipynb[NbConvertApp] WARNING | pattern 'lib.ipynb' matched no filesThis application is used to convert notebook files (*.ipynb) to various otherformats.WARNING: THE COMMANDLINE INTERFACE MAY CHAN

2020-06-05 20:57:40 1560 2

原创 hive使用mysql初始化

[hadoop@dn2 conf]$ schematool -dbType mysql -initSchema --verbose 【初始化命令】SLF4J: Class path contains multiple SLF4J bindings.SLF4J: Found binding in [jar:file:/usr/local/hive/lib/log4j-slf4j-impl-2.10.0.jar!/org/slf4j/impl/StaticLoggerBinder.class]SLF4..

2020-05-29 09:53:59 1089

原创 Pig在跑作业时报ERROR 1066

student.txt文件内容如下001,Rajiv,Hyderabad002,siddarth,Kolkata003,Rajesh,Delhitest.pig脚本内容如下：student = LOAD 'hdfs://dn1:9000/student.txt' USING PigStorage(',')as(id:int,name:chararray,city:chararray);Dump student;grunt> exec test.pig2020-05-21 21

2020-05-21 21:45:09 649 1

原创 hive初始化过去但是执行hive命令时报异常

执行hive时报如下异常[hadoop@namenode ~]$ hivewhich: no hbase in (/usr/local/bin:/bin:/usr/bin:/usr/local/sbin:/usr/sbin:/home/hadoop/.local/bin:/home/hadoop/bin:/usr//java/jdk-14.0.1/bin:/usr/local/hadoop/bin:/usr/local/hadoop/sbin:/usr/local/hive/bin)SLF4J: C

2020-05-13 14:19:11 5516 4

pyspark.docx

华三模拟器实验操作手册

Linux系统下FTP服务器实现

VMware workstation安装windows2012出现缺少介质驱动程序是啥原因引起的