- 博客(7)
- 资源 (5)
- 收藏
- 关注
原创 ES按照时间删除索引上的数据
被删除的文档在segment合并时,才会被真正删除掉。在某些特定情况下,我们需要强制Elasticsearch进行segment merging,已释放其占用的大量系统、磁盘等资源。执行的期间你会发现,磁盘空间会有一个反复变化的过程,磁盘使用率会先增长,然后在删除释放空间这样一个过程。集群的索引没有预先规划大小,导致索引特别大,删除数据删除索引的形式进行,只能在原来的索引上进行数据删除操作。删除索引时采用最经典的方式,即按照时间戳进行删除,比如删除90天以前的历史数据,保留最新的。
2023-04-23 17:32:26 2181
转载 HDFS 删除大量文件后不可访问问题处理
一、问题现象由于前一段时间ORC delta文件合并失败,HDFS中存在了大量delta文件,最终导致访问该数据表失败。通过想办法把数据搬移到新表后,我们drop掉了这个旧表。没想到一会儿使用人员报告整个HDFS不可访问。简单重启HDFS后,系统恢复正常了。但一个小时后,整个HDFS又不正常了。二、问题查找检查namenode日志发现以下异常:1. 大量数据块不属于任何文件......2018-04-...
2021-04-12 09:30:18 746
转载 python中文编码与处理详解(个人认为比较全面详细了)
注意:本文只是针对 python 2,在 python 3 中,编码方式与处理技巧有些许变化,具体请参考:Python 2 与 Python 3 的差异对比:http://my.oschina.net/leejun2005/blog/173553一、使用中文字符在python源码中如果使用了中文字符,运行时会有错误,解决的办法是在源码的开头部分加入字符编码的声明,下面是一个例子:...
2019-05-10 06:42:33 972
转载 来至JavaEye:liujunsong的评论——中国软件
软件行业的情况,就是中国这个新兴经济体在世界经济中地位的一个缩影. 用郎咸平的话讲,就是在整个产业链里面,并不是只有在生产制造这个环节创造价值,创造利润,而是在产品的策划,推广,品牌,形象等各方面,都在创造着价值. 而中国人的总体思维,目前尚未认识到这一点. 每个人从小接受的教育,都是劳动最光荣,而对于思考这种事情,是避之惟恐不及.生怕有点新想法不合规矩,给自己带来麻烦.这种思想上的长期浸染,已经
2009-04-09 14:26:00 211
nmon16h.tar.gz
2020-07-03
grafanarel.s3.amazonaws.com-grafana-2.6.0-linux64.tgz
2019-05-08
rpmrebuild工具包(亲测可用)
2019-03-05
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人