- 博客(185)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 饥荒双服务器部署
防火墙开放#服务器_masterfirewall-cmd --zone=public --add-port=10889/tcp --permanentfirewall-cmd --reload#服务器_caveiptables -I INPUT -p tcp --dport 10889 -j ACCEPTiptables -I INPUT -p tcp --dport 11000 -j ACCEPTiptables-save#持久配置防火墙apt-get install iptables
2022-05-25 21:31:31
441
原创 java项目maven package自动打包镜像推送到docker
mavenpackage自动打包镜像推送到dockerpom.xml <plugin> <groupId>com.google.cloud.tools</groupId> <artifactId>jib-maven-plugin</artifactId> <configuration>
2022-05-25 01:49:31
311
原创 Elasticsearch压测工具esrally
Elasticsearch压测工具esrally配置参数配置值GIT_HOME/opt/gitPYENV_HOME/opt/pyenv环境要求python3.8 pip3jdk8(可选)git 1.9+环境变量信息# 系统环境变量cat << EOF >> /etc/profile.d/01-esrally.shexport GIT_HOME=/opt/gitexport PYENV_HOME=/opt/pyenvEOFg
2022-05-25 01:44:45
254
原创 Logstash监控接入Kibana
Logstash监控接入Kibanacurl -L -O https://artifacts.elastic.co/downloads/beats/metricbeat/metricbeat-6.8.20-linux-x86_64.tar.gztar xzvf metricbeat-6.8.9-darwin-x86_64.tar.gzcd metricbeat-6.8.9-darwin-x86_64/vim metricbeat.ymloutput.elasticsearch: hosts:
2022-05-25 01:43:51
435
原创 k8s v1.16&es&zk&kafka&MySQL部署
k8s&Docker安装# 将 SELinux 设置为 permissive 模式（相当于将其禁用）sudo setenforce 0sudo sed -i 's/^SELINUX=enforcing$/SELINUX=permissive/' /etc/selinux/config#关闭防火墙systemctl stop firewalldsystemctl disable firewalld# 关闭swapswapoff -ased -i 's/.*swap.*/#&/
2022-05-02 01:57:43
1504
原创 K8S 1.23.1部署 及 ElasticSearch/Kafka/MySQL部署
k8s&Docker安装# 将 SELinux 设置为 permissive 模式（相当于将其禁用）sudo setenforce 0sudo sed -i 's/^SELINUX=enforcing$/SELINUX=permissive/' /etc/selinux/config#关闭防火墙systemctl stop firewalldsystemctl disable firewalld# 关闭swapswapoff -ased -i 's/.*swap.*/#&/
2022-01-27 22:30:29
4497
原创 上海翼长宽(长城-电信合作宽带)更改桥接pppoe拨号
由于md文件丢失，就简述一下了随然是长城宽带提供服务，联系长城客服还是可以申请公网ip的，安装人员给的是sdn光猫，这个必须更换,我自己换的F450G,重置后通过telnet连接后固化ssh以及超管密钥,拨号账户可以在sdn光猫上看到密码管理 (189.cn)通过此处获取宽带拨号账户密码后，光猫新建桥接端口，路由连接后拨号即可...
2021-09-17 11:05:52
2800
6
原创 JQ命令使用说明
#安装https://centos.pkgs.org/7/epel-x86_64/jq-1.6-2.el7.x86_64.rpm.htmlhttps://centos.pkgs.org/7/epel-x86_64/oniguruma-6.8.2-1.el7.x86_64.rpm.htmlyum install oniguruma-6.8.2-1.el7.x86_64.rpm jq-1.6-2.el7.x86_64.rpm#测试echo '{"fruit":{"name":"apple","col
2021-09-15 15:43:32
521
原创 Pandas避免遇到SettingwithCopyWarning 问题
Pandas避免遇到SettingwithCopyWarning 问题SettingWithCopyWarning: A value is trying to be set on a copy of a slice from aDataFrame.Try using .loc[row_indexer,col_indexer] = value insteadSee the caveats in the documentation:http://Pandas.pydata.org/Pandas-docs
2021-07-25 21:24:56
249
原创 HiveSQL 系统内存分配问题处理
HiveSQL 系统内存分配问题处理[INFO] 2021-04-26 18:18:52.147 - [taskAppld=TASK-51-2469-19327]:[127] - -> Ended Job = job 1619390628176 0017 with errorsError during job, obtaining debugging information.Examining task ID: task 1619390628176_0017_m_000008(and more)
2021-07-25 21:04:11
718
转载 Samba配置文件常用参数详解
Samba配置文件常用参数详解Samba的主配置文件叫smb.conf，默认在/etc/samba/目录下。smb.conf含有多个段，每个段由段名开始，直到下个段名。每个段名放在方括号中间。每段的参数的格式是：名称=指。配置文件中一行一个段名和参数，段名和参数名不分大小写。除了[global]段外，所有的段都可以看作是一个共享资源。段名是该共享资源的名字，段里的参数是该共享资源的属性。Samba安装好后，使用testparm命令可以测试smb.conf配置是否正确。使用testparm –v命令可
2021-04-22 23:25:17
539
原创 Kafka集群的安全认证机构 SASL_SCRAM
Kafka集群的安全认证机构 SASL_SCRAMKafka集群的安全认证机构 Kafka加密认证机制中的SASL主要包括SASL_PLAINTEXT、SASL_GSSAPI、SASL_SCRAM，这里主要记录Kafka配置SASL_SCRAM认证环境#config/server-sasl.properties文件修改#node01#安全认证监控服务z...
2021-02-23 09:31:06
971
原创 Minecraft 服务端插件 Multiverse-Core
Github:https://github.com/Multiverse/Multiverse-Core具体操作参考:https://www.mcbbs.net/forum.php?mod=viewthread&tid=703794worlds.yml world: ==: MVWorld #是否隐藏世界前缀，fa...
2021-02-14 10:57:29
2463
原创 Minecraft 服务端插件 WorldMania
下载地址:https://www.spigotmc.org/resources/worldmania-worldmanagment-gui-based-1-8-8-1-16x.83764/使用WorldMania可通过图形化的GUI替代Multiverse-Core2 的命令行执行<> 为必填选项 []为选填项/wmtp#打开传送界面/wmtp...
2021-02-14 00:08:41
349
原创 RabbitMQ高级特性-死信队列
死信队列死信队列，英文缩写：DLX 。Dead Letter Exchange(死信交换机)，当消息成为Dead message后，可以被重新发送到另一个交换机，这个交换机就是DLX。死信交换机和死信队列和普通的没有区别，当消息成为死信后，如果该队列绑定了死信交换机，则消息会被死信交换机重新路由到死信队列消息成为死信的三种情况：①队列消息长度到达限制；②...
2020-12-06 19:25:31
83
原创 RabbitMQ学习记录
什么是MQ消息中间件MQ全称为Message Queue，消息队列是应用程序和应用程序之间的通信方法。在项目中，可将一些无需即时返回且耗时的操作提取出来，进行异步处理，而通过这种异步处理的方式可大量节省服务器请求响应时间，从而提高系统的吞吐量。具体应用场景如下：①任务异步处理将不需要同步处理的并且耗时较长的操作由消息队列通知消息接收方进行异步处理。提高了应...
2020-12-06 07:08:05
68
原创 RabbitMQ集群部署過程記錄
安装版本rabbitmq 3.7.6erlang 20.3安装过程erlang安装wget --content-disposition https://packagecloud.io/rabbitmq/erlang/packages/el/7/erlang-20.3-1.el7.centos.x86_64.rpm/download.rpm...
2020-12-02 20:46:59
37
原创 微服务Spring Cloud 简介&实现
我的个人博客:https://www.blog.kamisamak.com/https://www.blog.kamisamak.com/index.php/2020/08/16/spring-cloud-入门/[infobox title=“微服务简介”]微服务架构是一种架构模式或者说是一种架构风格。将单一应用程序划分成一组小的服务，每个服务运行独立的自己的进程中，服务之间互相协调、互相配合，为用户提供最终价值。[collapse title=“特点”]单一职责：微服务中每一个服务都对应唯一的业
2020-09-17 14:23:16
375
原创 基于Ambari的大数据平台搭建(HDP)
我的个人博客:https://www.blog.kamisamak.com/[infobox title=“简介”]Apache Ambari 支持HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sqoop和Hcatalog等的集中管理，类似于CDH，是一个集中部署、管理、监控 Hadoop 分布式集群的工具，主要由Ambari Server 和 Ambari Agent构成，支持Kerberos安全管理。官网:http://ambari.apache.org/[/in
2020-09-17 14:19:07
1242
原创 Flink的基础代码示例（更新中）
分组聚合&分流操作import org.apache.flink.api.common.functions.{FilterFunction, MapFunction, ReduceFunction, RichMapFunction}import org.apache.flink.configuration.Configurationimport...
2020-09-17 11:38:19
829
原创 Python构建随机请求头headers
我的个人博客:https://www.blog.kamisamak.com/layout: posttitle: Python构建随机请求头headersdate: 2020-06-19tags: [“Python”,“爬虫”][外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-n2wZsw9S-1599705264908)(timg.jpg)]通过User-Agent构建请求头headers能够将爬虫伪装，但是有的网站会去检查请求头，所以在每次提交网站请求时可以使用
2020-09-10 10:34:54
7156
原创 yum故障undefined symbol: rpmpkgVerifySigs问题的踩坑之旅
我的个人博客:https://www.blog.kamisamak.com/There was a problem importing one of the Python modulesrequired to run yum. The error leading to this problem was: /usr/lib64/python2.7/site-packages/rpm/_rpm.so: undefined symbol: rpmpkgVerifySigsPlease instal
2020-09-10 10:32:49
7609
3
原创 将WordPress中文章导出为MarkDown文件
Node.js安装https://www.blog.kamisamak.com/index.php/2020/08/06/mcserver-管理面板安装/NodeJs安装过程可参考这篇导出插件安装过程导出需要使用到wordpress-to-markdown工具git clone https://github.com/ytechie/wor...
2020-09-09 09:28:57
949
原创 LeetCode算法题目011 : 盛最多水的容器
给你 n 个非负整数 a1，a2，...，an，每个数代表坐标中的一个点(i,ai) 。在坐标内画 n 条垂直线，垂直线 i的两个端点分别为(i,ai) 和 (i, 0)。找出其中的两条线，使得它们与x轴共同构成的容器可以容纳最多的水。说明：你不能倾斜容器，且n的值至少为 2。图中垂直线代表输入数组 [1,8,6,2,5,4,8,3,7]。在此情况下...
2020-08-17 17:05:23
60
原创 Spring Cloud 入门 ①
微服务简介微服务架构是一种架构模式或者说是一种架构风格。将单一应用程序划分成一组小的服务，每个服务运行独立的自己的进程中，服务之间互相协调、互相配合，为用户提供最终价值。特点单一职责：微服务中每一个服务都对应唯一的业务能力，做到单一职责微服务的服务拆分粒度很小，例如一个用户管理就可以作为一个服务。服务间互相独立，互不干扰团队独立：每个服务都是...
2020-08-16 22:01:04
56
原创 pyppeteerのUnable to remove Temporary User Data报错问题
Error in atexit._run_exitfuncs:Traceback (most recent call last): File "C:\Users\Toenc\Anaconda3\envs\tensorflow\lib\site-packages\pyppeteer\launcher.py", line 217, in killChrome ...
2020-08-05 14:49:21
687
原创 获取元素src为blob:http的数据
<video class="mudu-video" preload="auto" x5-video-player-type="h5-page" webkit-playsinline="true" playsinline="" x-webkit-airplay="allow" mtt-playsinline="true" loop="false" src="blob...
2020-08-04 22:40:58
1293
原创 解决'chromedriver' executable needs to be in PATH 问题
http://npm.taobao.org/mirrors/chromedriver/下载对应版本的Chromedriver文件，将其放置在chrome目录以及python目录下，并为chrome添加环境变量到Path ...
2020-08-03 05:43:42
79
原创 神经网络入门 - 《Deep Learning with Python》
神经网络剖析训练神经网络主要围绕以下四个方面。 层，多个层组合成网络(或模型)。 输入数据和相应的目标。 损失函数，即用于学习的反馈信号。 优化器，决定学习过程如何进行。将这四者的关系可视化，如下图所示：多个层链接在一起组成了网络，将输入数据映射为预测值。然后损失函数将这些预测值与目标进行比较，得到损失值，用于衡量网络预测值与预期结果的匹配程度...
2020-07-14 01:24:07
421
原创 Apache Flink 集群搭建与部署
Flink 的种安装模式1.local(本地)——单机模式2.standalone ——独立模式，Flink 自带集群，开发测试环境使用3.yarn——计算资源统一由 Hadoop YARN 管理，生产环境测试standalone 集群环境前置需求1. jdk1.8 及以上 配置JAVA_HOME 环境变量2. ssh 免密码登录...
2020-07-09 12:56:50
424
原创 vSphere7.0添加第三方驱动
由于打算更新虚拟化集群系统6.7u3至7.0，但无奈7.0网上并未寻找到有封装好的镜像，只能自己手动操作进行封装官方建议使用vSphere ESXI Image Builder,但使用过于复杂，不过有第三方封装工具：ESXi-Customizer，github地址驱动程序下载地址:https://vibsdepot.v-front.de/wiki/index.php/...
2020-07-06 13:58:51
5051
3
原创 通过K-means对iris数据集进行处理 Kmeans聚类算法实例
Pythonfrom sklearn import datasetsimport matplotlib.pyplot as pltfrom sklearn.cluster import KMeans# 加载数据集，是一个字典类似Java中的maplris_df = datasets.load_iris()# 挑选出前两个维度作为x...
2020-07-02 06:09:21
7375
原创 Windows上通过Anaconda部署Tensorflow -c环境
通过anaconda prompt执行conda create -n tensorflow python=3.7 -c https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main/创建环境成功后激活该环境,conda activate tensorflow,进行安装conda install tensorflow -c...
2020-07-01 04:03:19
47
原创 蓝宝石RX550 4G 640SP开核768SP
VBIOS：https://www.techpowerup.com/vgabios/192320/sapphire-rx560-4096-170419工具：https://www.techpowerup.com/download/ati-atiflash/PS:原本是打算弄一张上ESXI 6.7直通给macos使用的，结果还是能识别但无法驱动，只能上kvm虚拟机直通试...
2020-06-27 12:20:03
1739
原创 通过python爬虫爬取豆瓣图书Top250
我的个人博客:https://www.blog.kamisamak.com/robot信息查询from urllib.robotparser import RobotFileParserUrlRobots = 'https://book.douban.com/robots.txt'def GetRobotsTxt(url) : rp = RobotFileParser() rp.set_url(url) rp.read() print(rp.can_fetch('
2020-06-23 09:22:38
6375
TPC-H 2.18.0
2020-12-16
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人