yanminghaop-CSDN博客

原创 kafka zookeeper 常用命令以及排错分析

Kafka查看所有Topicbin/kafka-topics.sh --zookeeper localhost:2181 --list查看Topic详情bin/kafka-topics.sh --zookeeper localhost:2181 --topic test --describe手动创建Topicbin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 3 --partition

2021-05-11 11:40:04 585

原创 Python3 分享自定义Logger实现的一种方式

代码运行的时候会将每一个py文件的log打印出来，利于排错，此封装在每个py中调用getLogger传入__name__即可#!/usr/bin/env python# -*- coding: utf-8 -*-# @Time : 2021/5/10 10:40# @Author : YanMingHao# @Site : # @File : Logger.py# @Software: PyCharm# @notice : 致亲爱的未来的我自己,请原谅我,我有着难以表达

2021-05-10 13:24:44 440

原创 Python3中的枚举类小记

枚举类的创建from enum import Enum, unique@uniqueclass OperationType(Enum): inVx = "insertVertex" inVxEg = "insertVertexEdge" upVxPro = "updProperties" delVxPro = "delProperties" delVx = "delVertex" inVxEgSearch = "mapSearch" off =

2021-05-07 10:33:29 171

原创 docker打包Python代码服务的一种方式

FROM python:3.7-alpineWORKDIR /opt/ADD supervisor.tar.gz /root/ADD requirements.txt /root/ADD xxx-master.tar /root/ADD path.pth /usr/local/lib/python3.7/site-packages/RUN apk add --no-cache vim supervisor postgresql-dev musl-dev gcc tzdata \ &amp

2021-05-07 10:22:24 157

原创 Python3装饰器修饰、屏蔽、调用汇总

def authApplyOperation(func): """ * 自动应用更改 :return: """ @functools.wraps(func) def decorate(*args, **kwargs): """ * 应用更改装饰器 * 其中顶点操作的增加属性、修改属性、删除属性只要记录最终返回值即可 :return: """ # 省略逻辑代码

2021-05-07 10:06:14 378

原创 Linux常用命令记载

目录文章目录永久修改主机名:查看端口占用删除yum源查看数据库连接句柄数量linux批量删除redis密码dockerVscode乱码解决SELinux永久修改主机名:hostnamectl set-hostname [name]查看端口占用netstat -lnp|grep port删除yum源cd /etc/yum.repos.d/ #选择性删除查看数据库连接句柄数量netstat -antp | wc -llinux批量删除find . -name "*.log"

2020-08-31 19:20:33 78

原创 Kafka遇到无法消费的问题记录

Kafka服务部署情况节点服务masterkafkaslave1kafkaslave2kafkaslave3kafkaslave4kafka无法消费情况可以生产但无法消费尝试在kafka的shell中自产自消生产者./kafka-console-producer.sh --broker-list ip:9092 --topic ymh消费者./kafka-console-consumer.sh --bootstrap-serv

2020-08-31 19:19:05 2649 1

原创 Supervisor服务的安装与配置

Supervisor使用文档目录文章目录Supervisor使用文档一、安装Supervisor二、配置 Supervisor启动 Supervisor启动服务查看是否启动相关管理supervisor服务supervisor服务无法启动时三、. 应用配置单个程序配置文件示例一些命令解释supervisor：要安装的软件的名称。 supervisord：装好supervisor软件后，supervisord用于启动supervisor服务。 supervisorctl：用于管理supervi

2020-08-27 14:39:03 969

原创 Hugegraph配置文档

HugeGraph开发文档studio新建并切换图库修改gremlin-server.yaml添加hugegraph/conf/gremlin-server.yaml graphs: { hugegraph: conf/hugegraph.properties, hugegraphfile: conf/hugegraphfile.properties, 新图库名字: conf/新图库名字.properties }修改rest-server.properties graph

2020-08-27 14:37:14 417

原创 Ambari离线部署问题汇总

文章目录ambari-agent手动安装ambari搭建分布式kafka集群部署服务ambari集群部署错误总结依赖包版本错误常见问题RegionServer decommission启动失败问题ambari-agent手动安装在每个节点手动安装ambari-agent修改配置文件/etc/ambari-agent/conf/ambari-agent.ini[server]下的hostname修改为master的IP地址ambari-agent restartambari搭建分布式kafka集

2020-08-27 14:15:20 282

原创 docker run 指定配置常用命令记录

文章目录docker命令笔记dockerfile编译镜像docker网络bridge模式none模式host模式docker命令笔记dockerfile编译镜像docker build -t dockerfile . 这个名字就是镜像名docker网络bridge模式bridge：桥接网络默认情况下启动的Docker容器，都是使用 bridge，Docker安装时创建的桥接网络，每次Docker容器重启时，会按照顺序获取对应的IP地址，这个就导致重启下

2020-08-27 13:51:15 189

原创 Beanstalkd生产以及消费

文章目录生产者代码消费者代码API参考生产者代码import greenstalkwith greenstalk.Client(host='10.255.175.79',port = 11300) as queue: num = 0 while True: num +=1 text = "第%s个消息"%num queue.use('t3') #生产者选择tube queue.put(text)#向tube内打数据

2020-08-27 13:46:33 152

原创 Flask+Celery实现动态添加定时任务

文章目录写在前面启动命令存储建议常见问题解决Unable to load celery application.The module bin was not found.解决not enough values to unpack (expected 3, got 0)问题Celery指定定时任务目录结构总结主要代码routeFunc.pyconfig.pyMakeCelery.pytasks.pyceleryWorker.py(重要)__init__.py写在前面通过flask的web接口请求去下发ce

2020-08-27 13:44:02 2382 1

yanminghaop的博客