RayBreslin-CSDN博客

一、问题描述Sparksql 读取sql server链接报错：Exception in thread "main" com.microsoft.sqlserver.jdbc.SQLServerException: Invalid object name 'dbo.state'. at com.microsoft.sqlserver.jdbc.SQLServerException.makeFromDatabaseError(SQLServerException.java:258) at com.m

2022-05-20 20:16:59 1544

原创 Flink sql:Table sink doesn‘t support consuming update and delete changes which is produced by node

一、问题描述Flink sql将kafka作为join的输出，报错：Exception in thread "main" org.apache.flink.table.api.TableException: Table sink 'default_catalog.default_database.ods_t' doesn't support consuming update and delete changes which is produced by node Join(joinType=[LeftO

2022-05-05 18:08:37 3733

原创 SQL Server报错：Arithmetic overflow error converting expression to data type int.

一、问题描述sql server（sql dw）查询一张表数据个数，使用count报错select count(*) from test.test_t;然后报错：SQL 错误 [8115] [S0002]: Arithmetic overflow error converting expression to data type int.二、问题原因数据量比较大，直接用count查询结果是int类型，超过int的范围。tinyint：从0到255 之间的整数smallint：从- 21

2022-03-28 12:16:08 4740

原创下载Chrome应用商店中的插件

下载Chrome应用商店中的插件一、实现功能下载chrome插件，方便开发使用。二、具体方法网站：扩展迷分享的这个网站叫做“扩展迷”（[https://www.extfans.com/]），免费下载几乎所有的Chrome应用商店中的插件。...

2022-02-17 18:10:49 1457

原创 Flink报错：org.apache.flink.util.FlinkRuntimeException: Exceeded checkpoint tolerable failure threshold

org.apache.flink.util.FlinkRuntimeException: Exceeded checkpoint tolerable failure threshold一、问题描述flink执行任务报错2022-01-11 15:10:49org.apache.flink.util.FlinkRuntimeException: Exceeded checkpoint tolerable failure threshold. at org.apache.flink.runtime.c

2022-01-14 16:28:07 4497

原创 waterdrop将hive导入clickhouse报错：Too many partitions for single INSERT block (more than 100).

一、问题描述使用waterdrop导入数据进入clickhouse，然后日志报错：Caused by: ru.yandex.clickhouse.except.ClickHouseException: ClickHouse exception, code: 252, host: 10.252.32.26, port: 8123; Code: 252, e.displayText() = DB::Exception: Too many partitions for single INSERT block

2021-12-17 15:31:48 1602

原创 Clickhouse报错：DB::Exception: Cannot lock file /var/lib/clickhouse/status

一、问题描述clickhouse启动后，本身也可以访问没有问题，而且外部也可以访问，但是查看其error日志，发现一直有报错tail -f clickhouse-server/clickhouse-server.err.log结果：2020.10.07 19:05:32.720350 [ 8150 ] {} <Error> Application: DB::Exception: Cannot lock file /var/lib/clickhouse/status. Another se

2021-12-07 19:21:51 5908 2

原创 Exception in thread “main“ java.lang.NoClassDefFoundError: scala/Product$class

一、问题描述Spark任务，通过输入参数配置灵活配置任务运行时间，但是，在一套新代码重报错Exception in thread "main" java.lang.NoClassDefFoundError: scala/Product$class at scopt.OptionParser.<init>(options.scala:175) at com.common.RichOptionParser.<init>(RichOptionParser

2021-12-02 17:26:15 3432

原创 Hive迁移Spark报错org.apache.hadoop.hive.ql.io.orc.OrcStruct cannot be cast to org.apache.hadoop.io.Binar

Hive迁移后，读取报错：org.apache.hadoop.hive.ql.io.orc.OrcStruct cannot be cast to org.apache.hadoop.io.BinaryComparab一、问题描述Hive数据库经过迁移后，spark读取一个表，报错Caused by: java.lang.ClassCastException: org.apache.hadoop.hive.ql.io.orc.OrcStruct cannot be cast to org.apache

2021-11-23 17:47:58 3299

原创 clickhouse报错：Code: 210. DB::NetException: Connection refused (localhost:9000)

一、问题描述clickhouse客户端登录服务器报错# clickhouse-client -mClickHouse client version 20.8.3.18.Connecting to localhost:9000 as user default.Code: 210. DB::NetException: Connection refused (localhost:9000)关键，这个登录命令之前是可以的，但是，现在却一直是失败的。二、问题原因参考其他文章，发现其他人是因为cli

2021-11-19 18:57:27 5727

原创 Flink 侧输出报错：Could not determine TypeInformation for the OutputTag type.

一、问题描述flink侧输出报错 The program finished with the following exception The program finished with the following exception:Could not determine TypeInformation for the OutputTag type. The most common reas

2021-11-09 20:07:15 2216

原创 flink集成hudi执行sql报错：ClassNotFoundException: org.apache.hadoop.fs.FSDataInputStream

一、问题描述flink sql创建hudi表后，执行sql插入数据，结果报错没有hadoop相关包Flink SQL> insert into order_info_hudi select * from order_info;[INFO] Submitting SQL update statement to the cluster...[ERROR] Could not execute SQL statement. Reason:java.lang.ClassNotFoundExceptio

2021-10-25 12:53:12 3569 6

原创 Redis（6）: docker安装redis

Redis（6）: docker安装redis一、实现功能通过docker搭建redis环境，并且依据自定义配置启动docker。二、环境1.Centos7三、具体步骤1.添加配置文件redis.conf修改关键点：#bind 127.0.0.1 #注释掉这部分，这是限制redis只能本地访问protected-mode no #默认yes，开启保护模式，限制为本地访问daemonize no#默认no，改为yes意为以守护进程方式启动，可后台运行，除非kill进程，改为yes会使配

2021-10-19 09:54:55 257

原创 VMware安装Centos7教程（5）：克隆一台虚拟机，搭建集群

VMware安装Centos7教程（5）：克隆一台虚拟机，搭建集群一、实现功能通过一台克隆的虚拟机搭建三个节点的集群，从而实现一些集群功能。核心点主要是网络配置，但是，在配置过程中，因为是由一个虚拟机直接copy的，所以，还是有一些需要注意总结一下。二、环境1.Centos72.Vmware三、解决关键问题虚拟机网络配置问题，因为centos7虚拟机克隆后，网卡是一样的，因为硬件一样。所以，如果，在同一个网段下，那么会有问题，即除了第1台可以联网，其他都不可以联网。解决办法：删除网卡，然后，

2021-10-02 15:47:00 366

原创 maven编译问题：com.sun.org.apache.xerces.internal.impl.io.MalformedByteSequenceException: 1字节的 UTF-8 序列的字

一、问题描述使用maven编译spring boot项目，当执行Test的时候，报错com.sun.org.apache.xerces.internal.impl.io.MalformedByteSequenceException: 1字节的 UTF-8 序列的字节 1 无效二、问题原因该错误是由于一些配置文件如：mybatis-config.xml的编码原因。在配置文件中引入了<?xml version="1.0" encoding="UTF-8"?>，但是在配置文件可能包含有中

2021-09-22 18:48:20 836

原创 vmware配置centos7 NAT网络报错:CentOS7 Failed to start LSB: Bring up/down networking

一、问题描述配置Centos7虚拟机网络后，重启网络结果报错# systemctl restart network报错：CentOS7 Failed to start LSB: Bring up/down networking二、问题原因具体原因，可能修改mac地址可以解决，但是，看到一篇博客，直接关闭NetworkManager，而且亲测可行。瞬间赶紧非常爽快。三、解决办法解决方式：禁用NetworkManagersystemctl stop NetworkManagersys

2021-09-19 12:58:57 475

原创 docker安装报错：docker-ce conflicts with 2:docker-1.13.1-208.git7d71120.el7_9.x86_64

一、问题描述安装docker的时候报错运行:yum -y install docker报错：...---> Package python-syspurpose.x86_64 0:1.24.48-1.el7.centos will be installed---> Package subscription-manager-rhsm.x86_64 0:1.24.48-1.el7.centos will be installed--> Running transaction c

2021-09-17 11:49:00 5171 2

原创 flink报错：Caused by: java.lang.NumberFormatException: Not a version: 9

一、问题描述flink执行CEP的时候，报错Caused by: java.lang.NumberFormatException: Not a version: 9 at scala.util.PropertiesTrait$class.parts$1(Properties.scala:184) at scala.util.PropertiesTrait$class.isJavaAtLeast(Properties.scala:187) at scala.util.Properties$.isJa

2021-09-09 19:42:51 561

原创 flink报错：IllegalStateException: No ExecutorFactory found to execute the application

Flink 报错： No ExecutorFactory found to execute the application一、问题描述执行 Flink 1.12.0 程序报错：SLF4J: Failed to load class "org.slf4j.impl.StaticLoggerBinder".SLF4J: Defaulting to no-operation (NOP) logger implementationSLF4J: See http://www.slf4j.org/codes.

2021-08-29 13:20:06 4247

转载（转）Windows 批处理(bat)语法大全

Windows 批处理(bat)语法大全【转载原因：很详细，经典】本文是学习bat整理的笔记，由于内容较多，建议结合右侧文章大纲查看。%~dp0[获取当前路径]%~dp0 “d”为Drive的缩写，即为驱动器，磁盘、“p”为Path缩写，即为路径，目录cd %~dp0 ：进入批处理所在目录cd %~dp0bin\ ：进入批处理所在目录的bin目录示例这个示例在win10 x64测试正常::作用：以管理员身份安装Apached:cd %~dp0bin\httpd.exe -k inst

2021-08-17 17:39:32 516

原创 flink 1.12.0 提示keyBy警告 Symbol keyBy is deprecated. use [[DataStream.keyBy(KeySelector)]] instead

flink 1.12.0 提示keyBy警告 Symbol keyBy is deprecated. use [[DataStream.keyBy(KeySelector)]] instead一、问题描述flink 1.12相对于1.10个别接口有更新，所以，需要依据代码进行微调。例如keyBy方法[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-HyrtAct5-1627635607595)(tmp.assets/1627635349912.png)]二、问题原因ke

2021-07-30 17:00:31 1284

原创 flink sql on yarn报错： org.codehaus.janino.CompilerFactory cannot be cast to org.codehaus.commons.comp

一、问题描述使用flink on yarn方式提交Flink sql，抛出如下异常org.apache.flink.client.program.ProgramInvocationException: The main method caused an error: Unable to instantiate java compiler at org.apache.flink.client.program.PackagedProgram.callMainMethod(PackagedProgram.j

2021-07-29 13:21:49 1431

原创 flink sql报错：Bang equal ‘!=‘ is not allowed under the current SQL conformance level

一、问题描述flink sql当有过滤条件时，写的sql如下， tableEnv.executeSql( s""" |insert into kafka | select user_id from test_ods where user_id!='uid11' |""".stripMargin)报错Caused by: org.apache.calcite.runtime.CalciteException: Bang equa

2021-07-29 10:43:21 3370

原创 flink报错：No implicits found for parameter evidence$...

一、问题描述flink程序报错No implicits found for parameter evidence$二、问题原因没有加隐式转换，implicit。flink需要手动添加。三、解决办法引入隐式转换import org.apache.flink.api.scala._/

2021-06-26 17:55:35 973 4

原创 Spark sql报错：Caused by: java.util.regex.PatternSyntaxException: Illegal repetition near index 1

Spark sql报错：Caused by: java.util.regex.PatternSyntaxException: Illegal repetition near index 1一、问题描述Spark执行sql去解析hive中json形式的string，结果如下执行语句spark.sql("SELECT split(regexp_replace(regexp_replace(data,'\\[\\]',''),'\\}\\,\\{','\\}\\;\\{'),';') from tt").s

2021-06-17 10:13:06 4003

TA关注的人

Postgresql存储过程.docx

前后端分离-资料.rar

IKAnalyzer2012FF_u1中文分词器

hadoop的wordcount简单实例

Pyhon数据结构

virtual PC 虚拟机独立更新安装包

串口调试软件

HDTune 5.0.rar

火狐电子书阅览器EPUBReader

文件管理器EF_Commander_10.45_64.exe

c#report view控件报表