- 博客(36)
- 资源 (41)
- 收藏
- 关注
RSS订阅原创 js es定位
$(function(){ var x=document.getElementById("demo"); function getLocation(){ if (navigator.geolocation){ navigator.geolocation.getCurrentPosition(showPo
2017-09-14 10:44:22
656
原创 05－doc-values－es控制聚合内存使用-elasticsearch权威指南翻译
在内存中的doc values是被heap限制的，横向进行扩展可以一定情况下解决这个问题，但你会发现你即使扩充节点后，重重的agg会在其他节点没有充分利用的时候花光你的HEAP空间。默认fielddata会写入内存中，但这不是唯一的选择，也可以写入到硬盘中，同时能达到同样的功能，但不是内存中的fielddata而是硬盘上的docvalue了。doc value在1.0被加入进去，直到最近，
2015-10-23 23:41:22
2834
原创 04-fielddata-filtering－es控制聚合内存使用-elasticsearch权威指南翻译
04-fielddata-filtering这个filter主要用于设置，什么样的term能被加入到fielddata中，例如动态设置PUT /music/_mapping/song{ "properties": { "tag": { "type": "string", "fielddata": { "filter": {
2015-10-23 23:40:24
756
原创 03－limit－memory－usage-es控制聚合内存使用-elasticsearch权威指南翻译
为了让类似agg这种需要获取field value的操作是需要返回请求迅速的，这是为什么会把fielddata加载到内存中的原因，但是大量的fielddata会导致内存回收慢，甚至内存异常。也许你惊奇的会发现es不仅把匹配你查询的文档的值放到了fielddata中，竟然把所有文档的值放在了内存中，甚至包括type。逻辑是，你查询前面的可能会查询后面的，一次把所有数据加载进来并保存到内存中会
2015-10-23 23:38:33
1343
原创 02-aggregation-and-analysis－es控制聚合内存使用-elasticsearch权威指南翻译
在采用es的bucket agg的时候，我们会经常操作string类型的字段，一个string字段设置为analyzed和not_analyzed对聚合有什么样的影响呢？结论是影响非常大。下面是一个例子，先bulk进一批数据POST /agg_analysis/data/_bulk{ "index": {}}{ "state" : "New York" }{ "index":
2015-10-23 23:35:50
1237
原创 field data-es控制聚合内存使用-elasticsearch权威指南翻译
#(主要是聚合使用，索引会从这里面获取term数据)聚合通常通过一个叫fielddata的结构进行工作，fielddata经常会吃集群大量的内存，所以理解它咋工作的是非常重要的。fileddata能飞快的加载到内存中，or built at index time and stored on disk。后面我们会谈论到在硬盘上的fileddata-doc values,现在我们要谈的是内存中
2015-10-23 23:33:34
3221
原创 14-scale is not infinite（扩展不是无限的）
14-scale is not infinite（扩展不是无限的）虽然这这整个章节都在说scale的方法，但多数的scale问题都可以通过加入多个node解决，但是有个资源是非常有限的，必须慎重考虑：the cluster statethe cluster state 是一个数据结构，保存了如下信息：集群的设置信息每个node的信息indices，mappings analyz
2015-10-11 23:35:40
693
原创 13-one-big-user-这里阐述了如何在已经有数据的情况转移数据了
13 One Big User（这里阐述了如何在已经有数据的情况转移数据了）数据量大，访问量大的index都是从小的开始的，一天，我们有个index非常大了，现在也许它需要自己的shard了aliase可以使得我们在应用透明的情况下悄无声息的把数据转移到单独的一个index中。（1）创建一个单独的index，设置主分片，根据数据情况设置PUT /baking_v1{ "s
2015-10-11 23:34:36
437
原创 12faking index per user with Aliases-采用别名优化
12faking index per user with Aliases为了保持我们的设计简单而且干净，我们更想让我们的应用相信我们给每个用户一个index，即使我们其实真的仅仅使用了一个index，我们需要一种办法隐藏routing和forum_idaliase可以做这件事PUT /forums/_alias/baking{ "routing": "baking",
2015-10-11 23:33:33
369
原创 11-shared-index-routing开始
shared index我们可以考虑采用一个大的集群来放这些数据，然后通过一个标记来filter这些数据PUT /forums{ "settings": { "number_of_shards": 10 }, "mappings": { "post": { "properties": { "forum_id": {
2015-10-11 23:31:49
554
原创 10-user-based-data
User-Based Data人们开始使用es的原因一般都是因为现有应用需要加入全文检索了，然后他们创建了一个index来放他们的所有文档，逐渐的，公司的其他人也认识到了es的好处，他们也把他们的数据加了进来。幸运的是es支持多租户的操作，所以新的用户可以在cluster中拥有自己的index，有时候，有些用户需要对所有用户数据搜索，他们可以通过所有index搜索，但通常他们只对自己的in
2015-10-11 23:30:30
419
原创 09-Retiring Data-关闭旧数据（time-based）
Retiring Data在time-based中，数据关联性很小，maybe我们只关心我们现在的数据。最近3天 1周 1个月。。。你可以选择的办法是直接删除掉旧的index。。。DELETE /logs_2013*删除整个index会比删除一条条doc快很多也爽很多，但明显SB才这样做。。。所以下面的办法才是官方建议的migrate old indices 转移旧inde
2015-10-11 23:28:52
457
原创 08-索引模版--Index Templates--es横向扩展设计
Index Templates这节就说了index模版的使用，因为我们会因为数据量增大，新加index，虽然es会自动设置mapping，但我们总有一些定制化的东西，定义模版就能为后面的index服务。我们定义好一个模版然后使用即可，官方的例子PUT /_template/my_logs { "template": "logstash-*", "order": 1,
2015-09-20 20:58:57
831
原创 07-多索引操作--Multiple Indices--es横向扩展设计
多索引查询，理论的最后一节了，下节开始实例啦es没有规定说你只能用一个index的，其实在我们请求一个index的时候，es把请求重定向到了这个cluster中的所有shard和replicas中，当我们把请求发送给多个index道理其实也一样。可以这样说，查询一个有50个shard的索引和查询50个只有一个shard的索引的情况是一样的。这个性质的一个用处就是，如果哪天你觉得你的in
2015-09-20 20:56:45
1504
原创 06-从分片--Replica Shards--es横向扩展设计
直到现在我们一直都在说shard的事情，不是还有replicas吗？现在开始讨论，replicas的作用是提高可用性，也就是做数据备份，防止丢失，如果有个shard挂掉了，它的replica就会顶替他的位置。在index过程中，replica和shard做了基本一样的事情，新文档进来先index进入shard，然后该shard的replica自动把数据备份到自己的索引中，记住：增加replic
2015-09-20 20:54:52
1582
原创 自己去设计es的分片数量安排的方法--Capacity Planning--es横向扩展设计
容量计划1个太少，1000太多，咋办呢？作者回答是：i don’t know其实是由很多因素决定的，你使用的硬件，文档大小和复杂度，索引的方式，查询的方式，聚合的要求等等可以采用下面这种办法自己去计算一下吧：（1）创建一个cluster就一个机器，而且这个机器必须和生产用的配置相同（2）创建一个index，设置和分析器等都和生产相同，而且是1shard 0replicas（
2015-09-20 17:17:07
3096
原创 上千个主分片--Kagillion Shards--es横向扩展设计
这节开始抠我等的伤疤。。。这是所有刚用ES的user都头疼的问题：TMD，我该用几个shard好，，，、有土豪竟然想先建1000个shard在一台计算机上，你Y是银河N代吧多一个shard是有代价的一个shard是一个lucene的index，所以会消耗memory cpu and so on每个请求都会发送到每个shard上，你让一堆shard去找一个奶吃，可能吗？聚合方
2015-09-20 17:14:02
1568
1
原创 主分片平衡--Shard Overallocation--es横向扩展设计
Shard Overallocation这节讲shard间的平衡问题，先假设你建了一个indexPUT /my_index{ "settings": { "number_of_shards": 2, "number_of_replicas": 0 }}这个index有两个shard 0个replicas官方把2 shard放 1 nod
2015-09-20 17:11:40
1492
原创 横向扩展单元--the unit of scale--es横向扩展设计
在Dynamically Updatable Indices 这节，我们说了在es中一个shard其实是lucene中的一个索引，所以在es中你们创建了一个索引其实是一堆shard的集合。你请求es，es则把请求交给相应的shard去处理。the unit of scale is shard,小规模数据其实一个shard就够，而且能放很多数据，但限制scale的能力假设创建一个这样的clu
2015-09-20 17:07:20
603
原创 es横向扩展设计的引言
前言总的来讲，这一章主要就是来给讲述es横向扩展方面的问题也就是scale out，对于需要了解es集群方面非常有帮助关注点： es在横向扩展方面基本是可以平滑过度的painless 但当你从一个大点的集群到一个非常大的集群的时候，需要计划和设计，但相对而言是平滑过度的 es也有很多限制和要求，好刀用在刀刃上就好，否则也有很多问题 默认设置是可以让你
2015-09-20 17:04:08
582
原创 lucene4之后的近实时搜索实现
好久没干这块东西了，近几天需要做这个，所以重新学了一下，首先非常感谢孔浩老师，没孔浩老师的视频我也不会进入lucene的殿堂。老师当时讲的实时搜索还是NRTManager,现在已经都变了，这个类已经不存在了，在4.0之后消失的，到我现在使用的5.2.1都是下面的方法：首先罗列会使用的特殊类（常用的不再赘述）:TrackingIndexWriter 追踪writer，在api中有介绍，
2015-07-22 23:35:19
1842
原创 smack 4.1.2+openfire 3.10.2i
openfire 和以往版本配置没有多大区别就不详细介绍了，网上搜会有一大堆的图解下面主要说一下smack 4.1.2 的开发使用，在网上看了好多文章包括stackoverflow的都没有4.1以上的使用说明，同时我发现官方的一些说明好像和这个版本不对应，例如UseConnectionConfiguration#setReconnectionAllowed(boolean) to turn
2015-07-15 21:40:48
809
1
原创 virsualbox设置全屏
安装增强功能,桌面多了个镜像，这是虚拟机系统用的驱动，点击打开点击运行输入root用户的密码，我的是why123，我当时设置root用户和普通用户密码相同按回车关闭，在左上角系统->首选项->显示此时选择合适分辨率确定关闭然后点击左上角视图，选择全屏模式，ok
2013-01-06 18:27:35
643
原创 virsual box 安装centos6.3详细图解
由于图片太多，就不直接发博文了，图片得一张张上传，有40多张放在一个163邮箱中[email protected]网盘中，密码why123456
2013-01-06 11:05:44
735
原创 your first iOS app（一）
记得顺民哥在教j2ee的时候说过，我们学习的时候不仅要从细小的知识学起，而且要在适当的时候看看宏观的程序，以此来给自己在乏味的学习中增加点学习动力，所以呢，why这两天开始看your first iOS app，现在和大家分享一下。这里的介绍主要是参考https://developer.apple.com的第一个ios程序，网址是https://developer.apple.com/libr
2013-01-01 22:15:09
1984
原创 objective-c(八)－面向对象之继承
依稀还记得在学java的时候，面向对象的三大特性：封装性，多态性，还有继承性，上节课主要说的是多态性，这节课来说说继承性。继承从属性继承和方法继承来说：原先我们在一个类中定义的属性要么是在implemetion的kaitou｛｝中定义，要么通过@property定义，这些方法属性都是private的，子类是无法继承到的，下面的例子就可以让子类继承到：大家先看：一看就懂了，就是在
2012-12-31 17:40:06
716
原创 objective-c(七)-id数据类型及多态
今天来说说objective－c的一个非常重要的数据类型id。 前面在说objective－c的数据类型的时候我们说过有id这种数据类型，但是当时只是说有，没细讲，今天具体来说一下。 说到id必须说说objective－c的多态，学过其他语言的程序员一定听过甚至用过，多态，例如java，这是why比较熟悉的一门语言，java中多态基本可以分为两种覆写和重载，想了解的可以去看看，
2012-12-30 17:46:34
983
原创 objective-c(六)文件分离，合成存取方法，方法多参数，局部变量，self使用
今天我们开始学习objective-c面向对象的第二个基础部分，类的一些基本操作，上篇中演示的程序，主函数以及调用的类接口以及实现部分都在同一个文件中，假如类多了之后这绝对不是一个好的解决办法，这篇我们就来说说如何分离：我建了如图一个文件，当前显示的编辑窗口是主函数窗口，现在我们去建专门放类的文件，点击菜单栏的file，进去点new，选择file就进入下面这个界面：选择objective-
2012-12-27 11:22:23
708
原创 objective-c(五)-面向对象之初见
今天下午没什么事，不上班了，课程设计也不急，本来叫人去逛街的，但现在也不想动，算了，那就不去了，那就来为大家说说objective-c面向对象吧。我也是初步学objective-c，开这个博客，一方面是为我学习过程记录一下，以后需要回顾的时候好找，另外是想为像我这样已经有一些其他语言开发经验的人提供方便，让大家学起来更加容易，我计划等我把这块学完为这个开个专栏，名字就叫“不从零开始学objec
2012-12-25 17:33:12
606
原创 objective-c(四)-基本数据类型以及循环和选择结构
这部分知识，对于没学过编程的人来说得好好去看看，但对于以及有c或者c++还有java等的开发经验的人来说，只需要略略的看看，找到与其他语言的不同即可，这里我就不短话长说了。 其实这部分知识真的和c语言差不多，先前就提过objective-c在why看来就是在c基础之上加了一层面向对象，所以对于这些与面向对象无关紧要的基本数据结构就没有太大变化，下面用个例子说明一下。 从上面的
2012-12-25 07:37:58
533
原创 objective-c(三)
这篇来讲我们上篇说的第一个例子：#import int main(int argc, const char * argv[]){ @autoreleasepool { NSLog(@"hello world!"); } return 0;}第一个例子可以总结出下面几点：（1）objective-c注释有两种
2012-12-24 22:52:59
428
原创 objective-c(二)
这篇，我们进行第一个程序的开发，相信大家对于“hello world”一定不陌生，我们这篇的任务就是输出hello world，让我们现在打开xcode，第一个界面就是让我们点击左边的create a new xcode project，进入第二个界面让我们如图选择工具（这是开始学习的时候选择的方式，后面会发生改变）填上项目名，组织名，公司名，type选成function，AR
2012-12-24 22:20:22
401
原创 objective-c（一）
学习ios开发，首先得学习一下开发ios的语言objective-c，这门语言历史啥的就不细说了，我了解的大致就是在iphone盛行之前，它位于13门开发语言的末位，但现在好像升到第4了，到底第几，读者感兴趣自己去看吧，我就不查了。其实，原先objective-c是属于NeXT公司的，但96年苹果收购了该公司，objective-c也就成为了苹果开发的主要语言，其实我们不搭建mac环境也是可以开发
2012-12-24 22:04:32
429
原创 oraclevm 安装mac os x 10.8
这个有一篇比较全的文章给大家推荐一下http://bbs.weiphone.com/read-htm-tid-5329046.html，我安装过了，挺好的，大家有什么安装问题可以交流一下
2012-12-22 21:44:51
1737
原创 vm安装mac os x 10.7 lion
在四级的前一天突然来了兴致，想开始ios的开发了，所以，就得安os x了。 当然why建议有闲钱的话还是买一台mac book吧，毕竟os x就是为mac开发的，兼容性会更好，就好比为什么iphone运行就比android更好一样，毕竟ios是针对那一台机子开发的，而android是要让各大手机厂商都使用的。 why既然没闲钱买mac就只能在自己的windows下装os x了，
2012-12-21 08:53:58
677
原创 CKEditor 4使用方法，来自http://docs.ckeditor.com/#!/guide/dev_ckeditor_js_load官网地址
CKEditor是一个javascript应用，要去加载它，需要在你们页面加一段引用，如果你已经在你的web根目录安装了CKEditor，你需要插入以下的代码在你的页面标签之间然后，我们使用常用的方法来使用此编辑器，其实CKEditor就是个textarea，所以我们完全可以把CKEditor当textarea使用，，所以代码中得有这么一句<p>why</p>，
2012-12-09 22:54:24
2841
connectify破解版
2013-02-03
linux 下使用rpm安装gcc
2013-01-15
virsualbox设置全屏图解
2013-01-06
centos6.3安装图解，包含相关程序下载地址
2013-01-06
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人