- 博客(27)
- 资源 (2)
- 收藏
- 关注
RSS订阅转载 一次kafka producer没有close引发的思考
这个问题研究了两天，最后被一句话点醒。在此记录一下整个问题的思考过程。 在上一篇博客中实现了一个Avro序列化器https://blog.csdn.net/QYHuiiQ/article/details/88723584，但是在实现的过程中producer里使用send(record)这种最简单的方式发送消息时一直没有在topic中读取到这条消息（现在依旧可以看到上一篇中producer是没有close的）。也就是说我刚开始使用send(record)并且没有producer.close(...
2020-12-16 10:10:21
866
1
转载 ssh免密登陆
1、确认本机sshd的配置文件vim /etc/ssh/sshd_config找到以下内容，并去掉注释符”#“RSAAuthentication yesPubkeyAuthentication yesAuthorizedKeysFile .ssh/authorized_keys2、修改了配置文件需要重启sshd服务service sshd restart3.生成公钥和私钥ssh-keygen -t rsa默认在 ~/.ssh目录生成两个文件：id_rsa ...
2020-10-29 11:10:31
154
原创 mysql5.7.20使用mysqlFront 连接异常:INFORMATION_SCHEMA.SESSION_VARIABLES
提示：The'INFORMATION_SCHEMA.SESSION_VARIABLES' feature is disabled; see thedocumentation for 'show_compatibility_56'以下转自：http://blog.csdn.net/rudygao/article/details/50403107--从mysql5.7.6开始information_schema.global_status已经开始被舍弃，为了兼容性，此时需要打开show_co..
2020-06-24 20:17:49
633
原创 java.io.IOException: Premature EOF
http访问第三方系统的接口时，小概率抛出下面的异常：java.io.IOException: Premature EOFpublic static String getHttpsContent(HttpsURLConnection conn, String characterCode) throws IOException { InputStream input...
2020-03-16 17:25:54
3793
转载 Kafka Eagle安装及使用简介（详细教程）
原文链接：https://blog.csdn.net/qq_19524879/article/details/828487971.kafka-eagle-bin-1.2.4.tar.gz 安装包下载，官网 或者在我百度网盘中下载。点击下载2.我们直接按照步骤详细说明下安装步骤，JDK一定要安装必须知道JDK的安装路径21.安装包拷贝至服务器解压安装包tar -zxf kafka-e...
2020-03-13 14:41:30
1638
原创 MongoDB 索引技巧 : 太多字段要索引怎么办？使用通用索引
问题当你的文档包含很多不同的字段，并且你需要根据这些字段进行高效的检索。例如下面一个文档描述了一个人：{ _id: 123, firstName: "John", lastName: "Smith", age: 25, height: 6.0, dob: Date, eyes: "blue", sign: "Capricor...
2019-08-20 10:31:10
2085
原创 mongodb分布式搭建
搭建之前先了解一下MongoDB分片群集主要有如下三个组件：Shard：分片服务器，用于存储实际的数据块，实际生产环境中一个shard server 角色可以由几台服务器组成一个Peplica Set 承担，防止主机单点故障。Config Server：配置服务器，存储了整个分片群集的配置信息，其中包括chunk信息。Routers：前端路由，客户端由此接入，且让整个群集看上去像单一数据库...
2019-08-13 16:51:46
422
转载 Mongodb常见错误 - child process failed, exited with error number
child process failed, exited with error number 1child process failed, exited with error number 48child process failed, exited with error number 100
2019-07-25 09:44:04
387
转载 linux登录后出现-bash-4.1$，解决办法以及造成这样的原因
linux登录后有时候会出现-bash-4.1$造成这样的原因： 与这个用户有关环境变量没了，有关的文件被删除。也就是用户的家目录下面 .bash_profile .bashrc 被删除。解决办法:##首先切换到故障用户su - test##复制对应的文件（不要用root直接复制，否则复制过去的东西属主，数组都是root的）-bash-4.1$ cp /etc/skel/.bash* ~ ...
2018-06-20 16:10:03
512
原创 使用grafana监控mongodb
说先说一下结构,由于grafana本身数据源没有mongodb,所以需要在中间加上Prometheus来对mongodb监控.服务器端组件：prometheus #服务端alertmanager #预警Grafana #前端展示，客户端组件：node_exportermongodb_exporter
2018-04-22 19:46:09
10103
9
转载 The constructor Date() is undefined
The constructor Date() is undefined 转载▼ 今天改一个程序，需要把一个Date型的字段转为String型的，代码如下： DateFormat format = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss"); Date date = new Date(); //错误提示The construc...
2018-03-10 14:09:12
1462
原创 centos6安装python3
1、下载Python安装包，可将下载的压缩包放在桌面或其他位置，在这里提供下下载链接，方便大家下载：https://www.python.org/ftp/python/3.6.0/Python-3.6.0.tgz 2、以root权限打开终端，进入安装包的存放路径，解压安装包： tar -xzvf Python-3.6.0.tgz 13、进入解压好的安装包路径： cd Python-
2018-01-19 16:58:31
929
原创 python安装完毕后，提示找不到ssl模块的解决步骤
python安装完毕后，提示找不到ssl模块：[root@localhost ~]# python2.7.5Python 2.7.5 (default, Jun 3 2013, 11:08:43)[GCC 4.1.2 20080704 (Red Hat 4.1.2-54)] on linux2Type "help", "copyright", "credits" or "lice
2018-01-10 15:11:47
1481
转载 Linux Crontab 安装使用详细说明
crontab命令常见于Unix和Linux的操作系统之中，用于设置周期性被执行的指令。该命令从标准输入设备读取指令，并将其存放于“crontab”文件中，以供之后读取和执行。通常，crontab储存的指令被守护进程激活。crond 常常在后台运行，每一分钟检查是否有预定的作业需要执行。这类作业一般称为cron jobs。 一、安装yum -y install vixie-
2018-01-05 15:34:23
312
转载 Hadoop2.7.3+Spark2.1.0 完全分布式环境
一、修改hosts文件在主节点，就是第一台主机的命令行下;vim /etc/hosts我的是三台云主机：在原文件的基础上加上;ip1 master worker0 namenodeip2 worker1 datanode1ip3 worker2 datanode2其中的ipN代表一个可用的集群IP，ip1为master的主节点，ip2和iip3为从节点。二、ss...
2017-12-25 20:37:42
225
转载 Hadoop格式化HDFS报错java.net.UnknownHostException: localhost.localdomain: localhost.localdomain
异常描述在对HDFS格式化，执行hadoop namenode -format命令时，出现未知的主机名的问题，异常信息如下所示：[plain] view plain copy [shirdrn@localhost bin]$ hadoop namenode -format 11/06/22 07:33:31 INFO
2017-12-25 14:29:55
473
转载 CentOs6.7 python2.6升级到2.7.11
1、查看当前python的版本#python -V Python 2.6.6 2、下载Python-2.7.11wget https://www.python.org/ftp/python/2.7.11/Python-2.7.11.tgz3、解压并进入目录tar zxvf Python-2.7.11.tgzcd Python-2.7.11
2017-12-24 16:15:05
255
原创 centos6安装vim7
系统本身会带Vim7.2都版本，其实也够用，强迫症患者可以按以下操作升级成Vim7.4:（1）切换到root权限（2）卸载 rpm -qa | grep vim yum remove vim vim-enhanced vim-common vim-minimal 卸载都同时会把一些依赖包也删除掉，要注意，特别是会删除安装都Chrome浏览器。
2017-12-22 16:07:20
240
原创 centos6安装wget
今天给服务器安装新LNMP环境时，wget 时提示 -bash:wget command not found,很明显没有安装wget软件包。一般linux最小化安装时，wget不会默认被安装。可以通过以下两种方法来安装：1、rpm 安装rpm 下载源地址：http://mirrors.163.com/centos/6.2/os/x86_64/Packages/下载w
2017-12-22 15:48:01
15629
转载 spark pyspark无法运行
spark 版本 spark-2.2.0-bin-hadoop2.7java:1.8在运行 ./bin/pyspark 报错Traceback (most recent call last): File "/Users/comp_name/Downloads/spark-0.9.1/python/pyspark/shell.py", line 32, in sc = Sp
2017-12-02 22:20:42
9766
3
转载 java jdk安装
1) 检查当前环境中java&jdk的安装情况 $ rpm -qa|grep jdk $ rpm -qa|grep java 2) 将上述2条命令执行后产生的列表中的项全部卸载 $ rpm -e --nodeps XXX (XXX为上面2条命令执行后的列表项，以空格做间隔) 3) 准备jdk-7u45-linux-x64.rpm 安装包（
2017-11-30 12:44:55
268
转载 zabbix客户端
5.配置Zabbix客户端linux 服务器客户端的安装由于 zabbix_server 这台机器我们已经安装好了 zabbix_agentd，所以无需再次安装了。 那么其他需要监控的 linux 机器是如何安装的呢 在安装客户端的时候，软件包和服务器是同一个，只是 configure 的配置参数不同而已。 当然，源码安装，什么 GCC，make 这些命令都得安装，所以客户端不建议源码安装，由于
2017-11-23 15:34:58
523
原创 zabbix安装
前期安装:mysql:http://blog.csdn.net/locky_lll/article/details/78529363apapche:http://blog.csdn.net/locky_lll/article/details/78537950php7:http://blog.csdn.net/locky_lll/article/details/78548704
2017-11-22 16:32:06
5735
原创 在mysql,apache下安装php7
首先如果没有libxml2,需要先安装.在百度上可以找到.tar zxvf libxml2-2.6.32.tar.gzcd libxml2-2.6.32./configure --prefix=/usr/local/libxml2makemake install然后,到官网下载php7:http://php.net/downloads.php# tar -z
2017-11-16 10:55:13
463
转载 centos6安装,配置,启动apache
原文地址:http://blog.csdn.net/wy3552128/article/details/8143875对文章进行了一点小的改动,在后面加了一点自己遇到的问题和解决办法.平台：VMware上虚拟的centos6宿主机：windows安装Apache前准备：1、检查该环境中是否已经存在httpd服务的配置文件，默认存储路径：/etc/http
2017-11-15 10:17:24
3805
原创 使用rpm 安装mysql5.7.20
首先下载安装包mysql-community-client-5.7.20-1.el6.x86_64.rpmmysql-community-devel-5.7.20-1.el6.x86_64.rpmmysql-community-libs-5.7.20-1.el6.x86_64.rpmmysql-community-server-5.7.20-1.el6.x86_64.r
2017-11-14 12:49:59
1295
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人