- 博客(23)
- 资源 (1)
- 收藏
- 关注
RSS订阅转载 lucene索引文件大小优化小结
http://www.cnblogs.com/LBSer/p/4068864.html 随着业务快速发展，基于lucene的索引文件zip压缩后也接近了GB量级，而保持索引文件大小为一个可以接受的范围非常有必要，不仅可以提高索引传输、读取速度，还能提高索引cache效率（lucene打开索引文件的时候往往会进行缓存，比如MMapDirectory通过内存映射方式进行缓存）。 如...
2018-03-01 20:03:36
1253
1
转载 排序学习实践
排序学习实践---ranknet方法http://www.cnblogs.com/LBSer/p/4439542.html1 背景 随着移动互联网的崛起，越来越多的用户开始习惯于从手机完成吃、喝、玩、乐、衣、食、住、行等各个方面的需求。打开手机，点开手淘、美团等APP，商品玲玲满目，而让用户将所有商品一页页看完已经不现实，通常情况下用户也就查看前几页，如果找不到满意的商品则退出，从而造成流...
2018-03-01 20:02:26
344
转载 一个故事讲清楚NIO
转载请引用：一个故事讲清楚NIO 假设某银行只有10个职员。该银行的业务流程分为以下4个步骤：1） 顾客填申请表（5分钟）；2） 职员审核（1分钟）；3） 职员叫保安去金库取钱（3分钟）；4） 职员打印票据，并将钱和票据返回给顾客（1分钟）。 我们看看银行不同的工作方式对其工作效率到底有何影响。1 BIO方式 每来一个顾客，马上由一位职员来接待处理，并且这个职员需要负责以上4个完整流程。当超...
2018-03-01 20:00:53
125
转载 如何用消息系统避免分布式事务？
http://www.cnblogs.com/LBSer/p/4715395.html 前阵子从支付宝转账1万块钱到余额宝，这是日常生活的一件普通小事，但作为互联网研发人员的职业病，我就思考支付宝扣除1万之后，如果系统挂掉怎么办，这时余额宝账户并没有增加1万，数据就会出现不一致状况了。 上述场景在各个类型的系统中都能找到相似影子，比如在电商系统中，当有用户下单后，除了在订单表插入一条记录外，...
2018-03-01 19:59:57
137
1
转载 如何健壮你的后端服务？
对每一个程序员而言，故障都是悬在头上的达摩克利斯之剑，都唯恐避之不及，如何避免故障是每一个程序员都在苦苦追寻希望解决的问题。对于这一问题，大家都可以从需求分析、架构设计 、代码编写、测试、code review、上线、线上服务运维等各个视角给出自己的答案。本人结合自己两年有限的互联网后端工作经验，从某几个视角谈谈自己对这一问题的理解，不足之处，望大家多多指出。 我们大部分服务都是如下的结构，既要...
2018-03-01 19:58:38
114
转载 你应该知道的RPC原理
你应该知道的RPC原理 在学校期间大家都写过不少程序，比如写个hello world服务类，然后本地调用下，如下所示。这些程序的特点是服务消费方和服务提供方是本地调用关系。 而一旦踏入公司尤其是大型互联网公司就会发现，公司的系统都由成千上万大大小小的服务组成，各服务部署在不同的机器上，由不同的团队负责。这时就会遇到两个问题：1）要搭建一个新服务，免不了需要依赖他人的服务，而现在他人的服务都在远...
2018-03-01 19:56:37
143
转载 mysql死锁问题分析
线上某服务时不时报出如下异常（大约一天二十多次）：“Deadlock found when trying to get lock;”。 Oh, My God! 是死锁问题。尽管报错不多，对性能目前看来也无太大影响，但还是需要解决，保不齐哪天成为性能瓶颈。 为了更系统的分析问题，本文将从死锁检测、索引隔离级别与锁的关系、死锁成因、问题定位这五个方面来展开讨论。 图1 应用日志1 ...
2018-03-01 19:55:39
115
转载 一个复杂系统的拆分改造实践
1 为什么要拆分？先看一段对话。从上面对话可以看出拆分的理由：1） 应用间耦合严重。系统内各个应用之间不通，同样一个功能在各个应用中都有实现，后果就是改一处功能，需要同时改系统中的所有应用。这种情况多存在于历史较长的系统，因各种原因，系统内的各个应用都形成了自己的业务小闭环；2） 业务扩展性差。数据模型从设计之初就只支持某一类的业务，来了新类型的业务后又得重新写代码实现，结果就是项目延期，大大...
2018-03-01 19:54:17
333
转载 ZooKeeper学习第一期---Zookeeper简单介绍
一、分布式协调技术在给大家介绍ZooKeeper之前先来给大家介绍一种技术——分布式协调技术。那么什么是分布式协调技术？那么我来告诉大家，其实分布式协调技术主要用来解决分布式环境当中多个进程之间的同步控制，让他们有序的去访问某种临界资源，防止造成"脏数据"的后果。这时，有人可能会说这个简单，写一个调度算法就轻松解决了。说这句话的人，可能对分布式系统不是很了解，所以才会出现这种误解。如果这些进程全部...
2018-02-26 11:08:02
109
转载 Java原子操作类汇总
前篇： atomic这个包里面提供了一组原子变量类。其基本的特性就是在多线程环境下，当有多个线程同时执行这些类的实例包含的方法时，具有排他性，即当某个线程进入方法，执行其中的指令时，不会被其他线程打断，而别的线程就像自旋锁一样，一直等到该方法执行完成，才由JVM从等待队列中选择一个另一个线程进入，这只是一种逻辑上的理解。实际上是借助硬件的相关指令来实现的，不会阻塞线程(或者说只是在硬件级别...
2018-02-13 14:04:40
169
转载 数据库索引到底是什么，是怎样工作的？
我们通过一个简单的例子来开始教程，解释为什么我们需要数据库索引。假设我们有一个数据库表 Employee， 这个表有三个字段（列）分别是 Employee_Name、Employee_Age 和Employee_Address。假设表Employee 有上千行数据。现在假设我们要从这个表中查找出所有名字是‘Jesus’的雇员信息。我们决定使用下面的查询语句：SELECT * FROM Employ...
2018-02-08 13:58:30
145
转载 Java编程提高性能时需注意的地方
Java编程提高性能时需注意的地方最近的机器内存又爆满了，出了新增机器内存外，还应该好好review一下我们的代码，有很多代码编写过于随意化，这些不好的习惯或对程序语言的不了解是应该好好打压打压了。下面是参考网络资源和总结一些在java编程中尽可能做到的一些地方1.尽量在合适的场合使用单例使用单例可以减轻加载的负担，缩短加载的时间，提高加载的效率，但并不是所有地方都适用于单例，简单来说，单例主要适...
2018-02-08 13:26:08
144
转载 Redis的五种存储类型和其应用场景
常用数据类型简介：redis常用五种数据类型:string,hash,list,set,zset(sorted set).1.String类型String是最简单的类型，一个key对应一个valueString类型的数据最大1G。 String类型的值可以被视作integer，从而可以让“INCR”命令族操作(incrby、decr、decrby),这种情况下，
2018-01-30 15:07:06
242
转载 java中文乱码解决之道（八）—–解决URL中文乱码问题
我们主要通过两种形式提交向服务器发送请求：URL、表单。而表单形式一般都不会出现乱码问题，乱码问题主要是在URL上面。通过前面几篇博客的介绍我们知道URL向服务器发送请求编码过程实在是实在太混乱了。不同的操作系统、不同的浏览器、不同的网页字符集，将导致完全不同的编码结果。如果程序员要把每一种结果都考虑进去，是不是太恐怖了？有没有办法，能够保证客户端只用一种编码方法向服务器发出请求？有！这里
2018-01-23 08:30:37
166
转载 linux 安装MySql 5.7.20
linux 安装MySql 5.7.20本文转载自：https://www.cnblogs.com/cz-xjw/p/8006904.html1、下载文件（https://pan.baidu.com/s/1c1VBcHy）放到目录：/usr/local/2、解压 cd /usr/local/ tar -zxvf mysql-5.7.20-linux-glibc2.
2018-01-22 18:50:48
165
转载 MySQL索引背后的数据结构及算法原理
摘要本文以MySQL数据库为研究对象，讨论与数据库索引相关的一些话题。特别需要说明的是，MySQL支持诸多存储引擎，而各种存储引擎对索引的支持也各不相同，因此MySQL数据库支持多种索引类型，如BTree索引，哈希索引，全文索引等等。为了避免混乱，本文将只关注于BTree索引，因为这是平常使用MySQL时主要打交道的索引，至于哈希索引和全文索引本文暂不讨论。文章主要内容分为三个部分。第一部分主要从
2018-01-19 10:47:16
136
转载 Zookeeper的功能以及工作原理
1.ZooKeeper是什么？ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，它是集群的管理者，监视着集群中各个节点的状态根据节点提交的反馈进行下一步合理操作。最终，将简单易用的接口和性能高效、功能稳定的系统提供给用户2.ZooKeeper提供了什么？1)文件系统2)通知机制3.Zookee
2018-01-15 16:37:25
112
转载 Excel导入导出数据库
在工作中我们有时可能会将数据库中的数据导出来使用，那么下面我们就写一个简单的数据库导入导出的小功能。一、首先我们需要添加poi的依赖jar包 org.apache.poi poi 3.9 表数据如下二、controller如下，注解很详细
2018-01-04 10:30:53
218
转载 eclipse安装SVN插件的两种方法
eclipse里安装SVN插件，一般来说，有两种方式： 直接下载SVN插件，将其解压到eclipse的对应目录里使用eclipse 里Help菜单的“Install New Software”，通过输入SVN地址，直接下载安装到eclipse里 第一种方式： 1.下载SVN插件 SVN插件下载地址及更新地址，你根据需要选择你需要的版本
2018-01-04 10:25:47
156
转载 redis3.0.0 集群安装详细步骤
Redis集群部署文档(centos6系统)（要让集群正常工作至少需要3个主节点，在这里我们要创建6个redis节点，其中三个为主节点，三个为从节点，对应的redis节点的ip和端口对应关系如下）127.0.0.1:7000127.0.0.1:7001127.0.0.1:7002127.0.0.1:7003127.0.0.1:7004127.0.
2018-01-04 10:19:14
137
转载 ELK日志分析集群部署笔记
ELK是什么？ E=ElasticSearch ，一款基于的Lucene的分布式搜索引擎，我们熟悉的github，就是由ElastiSearch提供的搜索，据传已经有10TB+的数据量。 L=LogStash ， 一款分布式日志收集系统，支持多输入源，并内置一些过滤操作，支持多输入元 K=Kibana ， 一款配合ElasticSearch的web可视化界面，内置非常各种查询，聚合操作
2018-01-02 17:24:28
1159
转载 jsonp跨域请求
json相信大家都用的多，jsonp我就一直没有机会用到，但也经常看到，只知道是“用来跨域的”，一直不知道具体是个什么东西。今天总算搞明白了。下面一步步来搞清楚jsonp是个什么玩意。同源策略首先基于安全的原因，浏览器是存在同源策略这个机制的，同源策略阻止从一个源加载的文档或脚本获取或设置另一个源加载的文档的属性。看起来不知道什么意思，实践一下就知道了。1.随便建两个网页
2018-01-02 10:32:01
352
转载 MySQL查询语句的45道练习
题目：设有一数据库，包括四个表：学生表（Student）、课程表（Course）、成绩表（Score）以及教师信息表（Teacher）。 四个表的结构分别如表1-1的表（一）~表（四）所示，数据如表1-2的表（一）~表（四）所示。用SQL语句创建四个表并完成相关题目。表1-1数据库的表结构表（一）Student (学生表)
2017-12-29 14:45:23
659
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人