- 博客(61)
- 资源 (11)
- 收藏
- 关注
原创 ‘protoc-gen-go‘ 不是内部或外部命令,也不是可运行的程序解决方法
'protoc-gen-go' 不是内部或外部命令,也不是可运行的程序解决方法
2022-03-27 12:20:05 10711 2
原创 最新Centos7 + .Net6 + Docker 配置镜像发布详解
今天带给大家一篇文章,想大家介绍下在Centos7下,如何在docker环境部署一个简单的基于.Net6的.NetCore应用,也就是打包项目镜像,并在Linux下使用打包的镜像运行一个容器。
2022-03-07 20:07:07 2175 2
原创 最新Centos7环境使用Dapr1.6实现.Net6微服务调用实战
Dapr(**D**istributed Application Runtime)是一个开源、可移植、事件驱动的运行时。它使开发人员能够轻松地构建运行在云平台和边缘的弹性而微服务化的应用程序,无论是无状态还是有状态。Dapr 让开发人员能够专注于编写业务逻辑,而不是解决分布式系统的挑战,从而显著提高生产力并减少开发时间。此外,Dapr 也降低了大部分中小型企业基于微服务架构构建现代云原生应用的准入门槛。
2022-03-07 10:01:14 971 1
原创 Rancher安装报错 Failed to bring up Etcd Plane: etcd cluster is unhealthy
[etcd] Failed to bring up Etcd Plane: etcd cluster is unhealthy: hosts [192.168.100.666] failed to report healthy. Check etcd container logs on each host for more information
2022-02-23 15:27:59 3865
原创 详解在Centos7.6部署最新版Rancher2并组建K8S集群
Rancher是一个开源的企业级容器管理平台。通过Rancher,企业再也不必自己使用一系列的开源软件去从头搭建容器服务平台。Rancher提供了在生产环境中使用的管理Docker和Kubernetes的全栈化容器部署与管理平台。主要包括服务管理,公有云节点管理,支持第三方用户权限管理,应用商店,api很是灵活,只是文档较少,让你更多的去参考 官方文档。
2022-02-23 14:43:22 1139 1
原创 WPF窗体拖动(设置鼠标拖动区域)
private void Window_MouseLeftButtonDown(object sender, MouseButtonEventArgs e) { base.OnMouseLeftButtonDown(e); //判断窗口大小 var screenWidth = SystemParameters.PrimaryScreenWidth; var mainWidth = MainM..
2021-12-22 13:32:24 766
原创 Mysql5.7.35修改root密码的解决方法
关闭正在运行的MySQL服务。 打开DOS窗口,转到mysql\bin目录。 输入mysqld --skip-grant-tables 回车。--skip-grant-tables 的意思是启动MySQL服务的时候跳过权限表认证。 再开一个DOS窗口(因为刚才那个DOS窗口已经不能动了),输入mysql回车,如果成功,将出现MySQL提示符 >。 连接权限数据库: use mysql; 。 改密码:update user set password=password("root") where
2021-11-11 18:23:50 800
原创 Superset 安装报错: libbz2.so.1.0: cannot open shared object file: No such file or directory
OS : centos 7pbzip2: error while loading shared libraries: libbz2.so.1.0: cannot open shared object file: No such file or directory刚开始,以为此软件没有安装,于是yum install bzip2-libs 。安装之后,依然报错。后来使用find / -name libbz2.so查找文件位置,发现都在/usr/lib64/目录下,然后在此目录中,做一个软链接libbz
2021-11-02 19:54:03 1736
原创 最新版Flink1.14.0集群超详细部署及测试
Flink在9月份发布了最新版Flink1.14.0,新版本中 Flink 一个主要变化是集成的流媒体和批处理体验,此外,在 SQL API、更多连接器支持、检查点和 PyFlink 等方面也带来了许多新功能和改进。更多详细内容,点击1.14.0 发布公告GitHub 地址:https://github.com/apache/flink参考链接:Apache Flink: Apache Flink 1.14.0 Release Announcement 正好我的Flink环境需要重...
2021-10-21 11:25:45 6412 2
原创 大数据分析学习第十八课 CDH6.3.2详细安装配置
yum -y install wget下载文件wget -c http://119.29.179.227/cdh/CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcelcdh6.1.0 离线包:CDH-6.1.0-1.cdh6.1.0.p0.770702-el7.parcelCDH-6.1.0-1.cdh6.1.0.p0.770702-el7.parcel.sha256manifest.json下载: https://archive....
2021-10-21 11:24:05 2765 3
原创 CDH6.3.2安装cloudera-manager-daemons出现JDK版本不兼容问题
如题,今天在测试环境安装CDH6.3.2时,执行rpm -ivh cloudera-manager-daemons-6.3.1-1466458.el7.x86_64.rpm,输出以下错误:warning: cloudera-manager-daemons-6.3.1-1466458.el7.x86_64.rpm: Header V3 RSA/SHA256 Signature, key ID b0b19c9f: NOKEYPreparing...
2021-10-17 20:19:57 2392 1
原创 Spark3.X 编译源码支持hive(亲测可用)
Spark官网提供的编译版本默认是不支持Hive的,今天就给大家介绍采用源码编译方法得到支持Hive的Spark版本
2021-10-13 16:04:13 1618 5
原创 大数据分析学习第十七课 基于Hadoop2.7.5安装Sqoop1.4.7(亲测可用)
关键字:Linux CentOS Sqoop Hadoop Hive Java版本号:CetOS7.6 Sqoop1.4.7 Hadoop2.7.5 Hive2.1.0Sqoop简介 Apache Sqoop是在Hadoop生态体系和RDBMS体系之间传送数据的一种工具。来自于Apache软件基金会提供。Hadoop生态系统包括:HDFS、Hive、Hbase等RDBMS体系包括:Mysql、Oracle、DB2等Sqoop可以理解为:“SQL 到 Hado...
2021-10-12 15:43:27 490
原创 WPF Style 中的 Trigger
wpf的style触发器一般有以下几种:Trigger / DataTrigger 数据变化触发型 MultiTrigger / MultiDataTrigger 多条件触发型 EventTrigger 事件触发型 其中有 Data的,都是基于数据的,没有的则对于控件而言基础 TriggerTrigger 有 Property 和 Value两个属性,Property 是关注的属性名称,Value 是触发条件。Setters 用来设置触发条件满足时做出的反应 . .
2021-09-24 15:37:19 1122
原创 Spark3.0.3版本报““main“ java.lang.NoClassDefFoundError: org/apache/hadoop/fs/FSDataInputStream“
大数据开发环境就是这样,你刚填完一个坑,就掉入了另外一个坑,运行一个spark远程调用示例 SparkConf sparkConf = new SparkConf() .setMaster("spark://ss3:7077") .setAppName("JavaSparkPi"); SparkSession spark = SparkSession .builder() .
2021-09-24 14:01:43 1306
原创 Spark:3.0.3版本报错“java.lang.NoSuchFieldError: JAVA_9“
Exception in thread "main" java.lang.NoSuchFieldError: JAVA_9 at org.apache.spark.storage.StorageUtils$.<init>(StorageUtils.scala:207) at org.apache.spark.storage.StorageUtils$.<clinit>(StorageUtils.scala) at org.apache.spark.storage.BlockM.
2021-09-24 09:38:27 5122 4
原创 Spark3运行模式介绍
#本地模式两线程运行./bin/run-example SparkPi 10 --master local[2] #Spark Standalone集群模式运行./bin/spark-submit --class org.apache.spark.examples.SparkPi --master spark://ss3:7077 examples/jars/spark-examples_2.12-3.0.3.jar 100 #Spark on YARN集群上 yarn...
2021-09-23 19:21:54 228
原创 正则表达式:用户名只允许字母、数字、下划线组成,首位只能为字母(6-16字符)
用户名只允许字母、数字,首位只能为字母(6-16字符)[a-zA-Z]{1}[a-zA-Z0-9]{5,15}$手机号验证
2021-09-02 15:35:58 5144 3
原创 正则表达式:手机号验证
最新手机号段:移动 134,135,136,137,138,139,147,148,150,151,152,157,158, 159,172,178,182,183,184,187,188,195,198 移动虚拟 165,1703,1705,1706 联通 130,131,132,145,146,155,156,166,175,176,185,186,196 联通虚拟 167,1704,1707,1708,1709,...
2021-09-02 15:32:06 110
原创 大数据分析学习第十六课 自建云服务器集群使用Ambari创建配置大数据集群和常用组件(二)
Ambari平台里创建配置大数据集群和常用组件上节课我们介绍了怎么在离线环境下配置安装ambari和hdp,并成功启动了ambari服务这节课登录后,我们点击【LAUNCH INSTALL WIZARD】我们输入一个集群名称选择版本因为我们是离线安装,这里的库我们全部指定tt1服务器的资源,操作系统要选redhat7上面填写的三处地址,其实就是我们配置的离线yum源的地址HDP-3.1: http://xx.xx.xx.xx:8081/hdp/HDP...
2021-08-16 19:14:19 371
原创 大数据分析学习第十五课 自建云服务器集群离线安装Ambari2.7.5和HDP3.1.5(一)
之前了解了很多关于大数据平台一站式部署管理的工具,比如Apache Ambari和CDH,目前最新的CDH已经没有了社区版,也就是说以后使用新版本的Cloudera Manager和CDH都是要收费的,这对于很多小公司来说,可能无法承受。转向Ambari是他们的一个可选项。 Ambari是Apache的一个顶级开源项目,开源是其最大的优势,开源也意味着Ambari可以灵活地进行扩展,集成更多的数据组件,对于需要定制化和二次开发的企业来说,Ambari也极具吸引力。 由于之前学习大...
2021-08-10 19:16:20 939
原创 大数据分析学习第十四课 kafka 2.4.1单机版部署及使用
最近在学习Flink,不可避免的需要用到kafka消息中间件,下面介绍下单机部署流程1.下载2.4.1版本我的Flink版本是1.12,对应的kafka版本要使用2.4.1的 我们下载kafka_2.11-2.4.1这个版本,2.11是scala版本http://kafka.apache.org/downloads同时我们下载kafka eagle监控kafka状态,这里我用的最新版本2.0.6https://codeload.github.com/smartloli/kafka-ea.
2021-08-04 18:18:52 579 1
原创 hiveserver2服务的启动与简单使用技巧
一、hiveserver2简介Hive在生产上是不需要部署集群的,操作Hive只需要通过它提供的客户端即可,Hive提供了大致三类客户端:hive shell:通过hive shell来操作hive,但是至多只能存在一个hive shell,启动第二个会被阻塞,也就是说hive shell不支持并发操作。WebUI: 通过HUE/Zeppelin来对Hive表进行操作。基于JDBC等协议:启动hiveserver2,通过jdbc协议可以访问hive,hiveserver2支持高并发。简而言之,h
2021-08-02 20:14:45 10987 1
原创 Flink1.9.3运行批处理报:TableException: Create BatchTableEnvironment failed
这个主要是引用依赖的版本不对造成的,我贴出正确flink1.9.3的pom <dependencies> <!-- Flink modules --> <!-- CLI dependencies --> <dependency> <groupId>org.apache.flink</groupId> <artifactId>
2021-08-02 20:11:54 232
原创 大数据分析学习第十三课 实战使用Idea创建java程序运行spark的wordcount
开发工具:Intellij IDEAJava版本:JDK1.8以上在pom.xml文件中添加我们需要的jar包:spark-core<!--定义spark版本--><properties> <spark.version>2.2.3</spark.version></properties><!--spark-core核心包--><dependency> <groupId&
2021-07-30 20:02:35 491
原创 spark运行报: Scala module 2.10.0 requires Jackson Databind version >= 2.10.0 and < 2.11.0
这是jackson多版本问题, 我们需要屏蔽所有hadoop 组件中的Jackson ,修改pom文件,之后就不报异常了 <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-common</artifactId> <version>${hadoop.version}.
2021-07-30 11:18:01 4517
原创 idea运行spark程序报错scalac: Error: illegal cyclic inheritance involving trait Iterable
执行一个spark的scala写的类,报错scalac: Error: illegal cyclic inheritance involving trait Iterablescala.reflect.internal.Types$TypeError: illegal cyclic inheritance involving trait Iterable我们打开idea项目的Project Structure选项,找到这里scala的sdk版本我用的最新的,看样子是不兼容造成的,我们最好.
2021-07-30 10:19:05 2943 1
原创 spark3.1.2运行scala报错: Exception in thread “main“ java.lang.ArrayIndexOutOfBoundsException: 28499
在用idea执行scala的类,报以下错误Exception in thread "main" java.lang.ArrayIndexOutOfBoundsException: 28499这个查找资料后,是由于我们没有引用paranamer,我们只要在pom文件中加上引用就可以解决了<dependency> <groupId>com.thoughtworks.paranamer</groupId> <artifactId>par
2021-07-30 10:08:45 1115 4
原创 spark3.1.2版本 运行报Exception in thread “main“ java.lang.NoSuchFieldError: JAVA_9
Exception in thread "main" java.lang.NoSuchFieldError: JAVA_9这是因为项目中没有配置hadoop-common和hadoop-mapreduce-client-core包,我们在pom文件里加上依赖就可以了 <dependency> <groupId>org.apache.hadoop</groupId> <artifactId&g.
2021-07-30 09:09:34 2281
原创 spark程序执行报io.netty.util.concurrent.SingleThreadEventExecutor.<init>
io.netty.util.concurrent.SingleThreadEventExecutor.<init>(Lio/netty/util/concurrent/EventExecutorGroup;Ljava/util/concurrent/Executor;ZLjava/util/Queue;Lio/netty/util/concurrent/RejectedExecutionHandler;)Vnetty版本冲突,我们在idea的Terminal执行mvn depende..
2021-07-29 19:44:45 1353
原创 spark ERROR StatusLogger No log4j2 configuration file found.日志报错
spark ERROR StatusLogger No log4j2 configuration file found.这个错误是因为没有添加配置文件,我们在Idea项目的Resource目录下面创建一个log4j2日志的xml配置文件再执行程序就不报这个错了
2021-07-29 19:00:35 378
原创 大数据分析学习第十二课 Superset 1.2.0最新版在 windows环境下的安装过程
pip install --upgrade apache-superset
2021-07-16 19:16:14 464
原创 springboot项目启动时提示Address already in use: bind
springboot项目启动时提示Address already in use: bindPS:web项目在启动的时候,一般会报Address already in use: bind,常规的处理思路为:删除任务管理器中的javaw.exe进程即可;当删除仍然解决不了时,一般处理思路如下,以windows系统为例。1.查看当前端口被哪个进程占用了(进入到CMD中) netstat -ano|findstr "8091" 输出结果为:C:\Users\wei.su>nets...
2021-07-16 19:12:03 1023
VisualStudio2017企业版
2021-07-15
hive-3.1.1安装包
2021-04-16
xshell6 Linux远程神器
2021-02-02
InstallShield Limited Edition for Visual Studio
2014-09-02
截图抓图工具FSCapture
2014-08-09
NETReflector8
2014-08-09
Managed Spy
2010-05-31
SQL Server2005的好工具——数据库发布向导(Database Publishing Wizard)
2010-05-31
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人