自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(19)
  • 资源 (2)
  • 收藏
  • 关注

原创 Mac配置SSH免密登陆远程服务器

从OpenSSH 7.x开始,DSA密钥算法组件默认被禁用。Mac采用SSH连接远程服务器

2023-06-10 17:22:23 403

原创 Flink1.10.1集成Hadoop3.0.0源码编译实战

前言flink1.8以后不再提供对hadoop的支持,对比flink1.7与flink1.8官方仅提供几个hadoop版本对应的包,如果没有您需要版本,需自行编译编译下载另一个项目flink-shadedgit clone -b release-9.0 https://github.com/apache/flink-shaded.git注意:这里一定要使用9.0,因为flink-1.10.1项目中依赖的为9.0mvn clean install -Dhadoop.ver.

2022-01-17 15:04:02 1498

原创 hadoop配置lzo支持

hadoop配置lzo支持

2022-01-13 14:11:58 1084

原创 Linux下编译hadoop-lzo-0.4.21-SNAPSHOT.jar

Linux下编译hadoop-lzo-0.4.21-SNAPSHOT.jar

2022-01-13 12:14:28 462

原创 linux下安装maven并配置阿里云镜像

linux下安装maven并配置阿里云镜像

2022-01-13 10:47:50 1414

原创 hadoop任务启动报错整理

错误一、找不到或无法加载主类 org.apache.hadoop.mapreduce.v2.app.MRAppMaster2022-01-12 16:15:02,559 INFO impl.YarnClientImpl: Submitted application application_1641975214047_00012022-01-12 16:15:02,604 INFO mapreduce.Job: The url to track the job: http://node04:8088/

2022-01-12 16:29:29 3902

原创 linux密码登录

1、修改sshd_configsudo vi /etc/ssh/sshd_config PasswordAuthentication yessudo systemctl restart sshd//因为修改了配置文件sudo passwd //设置密码

2021-06-14 15:20:44 528

原创 HDFS角色功能与副本放置策略

nameNode1、完全基于内存存储文件元数据、目录结构、文件block的映射2、需要持久化方案保证可靠性3、提供副本fang zhi

2021-06-14 15:14:01 132

原创 HDFS架构设计

1、HDFS是主从(master/slaves)架构2、由一个NameNode和一些DataNode组成3、面向wen

2021-06-14 14:19:24 150

原创 HDFS存储模型

1、文件线性按字节切割成块(block),具有offset、id

2021-06-14 12:05:39 210

原创 Linux时间同步不生效(ntpdate ntp1.aliyun.com)

yum install ntpdatentpdate ntp1.aliyun.com以上操作时间未同步

2021-06-09 16:47:58 4294 2

原创 hadoop中ha模式下,active与standby不能实现自由切换

错误详情:解决方案:hdfs-site.xml<property> <name>dfs.ha.fencing.methods</name> <value>sshfence</value></property>由于dfs.ha.fencing.methods参数的value是sshfence,需要使用的fuser命令yum -y install psmisc...

2021-06-03 11:50:14 278

原创 docker部署高可用rabbitmq集群

三台服务器192.168.3.103 rabbitmq1 192.168.3.104 rabbitmq2 192.168.3.105 rabbitmq3 docker run -d \ -h rabbitmq1 \ --name=rabbitmq1 \ --add-host rabbitmq2:192.168.3.104\ --add-host rabbitmq3:192.168.3.105 \ -p 4369:4369 \ -p 5671-5672:5671

2020-12-31 16:47:09 351

原创 docker搭建rabbitMq集群

1、拉取镜像docker pull rabbitmq:3.7.17-managementdocker tag rabbitmq:3.7.17-management rabbitmq2、建立网络docker network create rabbitmqnet3、创建容器docker run -d \ --name=rabbitmq1 \ -p 5673:5672 \ -p 15673:15672 \ -e RABBITMQ_NODENAME=rabbitmq1 \ -.

2020-12-31 11:15:13 147

原创 RabbitMq如何保证传递可靠性(事务模式\确认模式)

rabbitmq模型图1、生产者与MQ服务器之间(事务模式\确认模式)1、事务模式设置rabbitTemplate.setChannelTransacted(true); 启动事务模式 @Bean("rabbitTransactionManager") public RabbitTransactionManager rabbitTransactionManager(CachingConnectionFactory connectionFactory) { ...

2020-12-30 16:21:00 557

原创 windows下安装RabbitMq

1、安装Erlanghttps://www.erlang.org/downloads/23.0配置环境变量2、安装RabbitMqhttps://www.rabbitmq.com/news.htmlerlang与rabbitmq匹配版本https://www.rabbitmq.com/which-erlang.html下载后傻瓜式安装安装可视化插件"D:\RabbitMQ Server\rabbitmq_server-3.8.9\sbin\ra.

2020-12-22 22:34:51 1692 1

原创 SpringBoot整合RabbitMq实现订单超时关闭

RabbitMq实现订单超时取消 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-amqp</artifactId> </dependency>1、配置RabbitMqspring: rabbitmq:

2020-12-21 15:37:58 974

原创 基于Docker安装RabbitMq

第一步:拉去镜像docker pull rabbitmq第二步:启动容器docker run -dit --name MyRabbitmq -e RABBITMQ_DEFAULT_USER=admin -e RABBITMQ_DEFAULT_PASS=admin -p 15672:15672 -p 5672:5672 rabbitmq第三步:进入容器,设置页面访问docker exec -it MyRabbitmq /bin/bashrabbitmq-plugins ena.

2020-10-19 15:05:57 133 1

原创 安卓微信内置浏览器 input type=file 选择文件未响应

微信内置浏览器采用以下形式选择图片不响应<input type="file" accept="image/*"/>解决思路步骤一、调微信接口得到serverId步骤二、通过serverId上传至osswx.chooseImage({ count: 1, //一次性可以选择多少张图片,默认9 sizeType: ['original', 'compr...

2019-10-11 16:01:52 2319

flink-shaded-hadoop-2-uber-3.0.0-9.0.jar

flink-shaded-hadoop-2-uber-3.0.0-9.0.jar

2021-11-20

crontab离线安装

yum不可用采用离线安装 rpm -ivh vixie-cron-3.0.1-39.i386.rpm rpm -ivh crontabs-1.11-2.20101115git.fc15.noarch.rpm

2018-03-16

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除