- 博客(52)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 数据分析（4）绘制茅台股票均线
1.从tushare获取茅台股票交易数据#-*- coding: utf-8 -*-import tushare as tsimport pandas as pdimport matplotlib.pyplot as pltfrom matplotlib.font_manager import FontPropertiesfont = FontProperties(fname=r"C:\Windows\Fonts\simhei.ttf", size=14)df=ts.get_k_da
2022-05-14 14:01:27
265
原创 数据分析（3）
matplotlib绘图 绘制单条线形图 import numpy as npimport matplotlib.pyplot as plt#绘制单条线形图x=np.array([1,2,3,4,5])y=x+3plt.plot(x,y)plt.savefig('条线形图.png')plt.show() 绘制多条线形图 import numpy as npimport matplotlib.pyplot as plt#绘制多条线形图x..
2022-05-04 16:14:31
1097
原创 跳表：为什么Redis一定要用跳表来实现有序集合？
跳表（Skip list）实际上就是在链表的基础上改造生成的。跳表是一种各方面性能都比较优秀的动态数据结构，可以支持快速的插入、删除、查找操作，写起来也不复杂，甚至可以替代 红黑树。Redis 中的有序集合就是用跳表来实现的。那 Redis 为什么会选择用跳表来实现有序集合呢？一、如何理解跳表？对于单链表来说，我们查找某个数据，只能从头到尾遍历链表，此时时间复杂度是 ○(n)。如何提高查询效率？那怎么来提高查找效率呢？如果像图中那样，对链表建立一级“索引”，...
2020-09-14 20:51:33
366
转载 JVM内存模型，以及JVM性能调优
转载批注：最近因与别人讨论问题时，问到JVM内存模型，但是苦于只知道JVM的大概内容，不知道详细，也罢，近期会逐渐有充足的自己的时间，好好整理学习学习。以下内容为转载别人的资料，个人认为写的很好，就全文拷贝了。===================华丽的分割线======================一、JVM内存模型及垃圾收集算法1.根据Java虚拟机规范，JVM将内存划分为：New（年轻代） Old（年老代） 永久代（Perm） 其中New和Old属于堆内存，堆内存会从...
2020-09-13 22:49:52
440
原创 nginx限流
一、场景一般对外暴露的系统,在促销或者黑客攻击时会涌来大量的请求,为了保护系统不被瞬间到来的高并发流量给打垮, 就需要限流二、限流算法1. 令牌桶算法令牌桶算法算法思想是：令牌以固定速率产生，并缓存到令牌桶中； 令牌桶放满时，多余的令牌被丢弃； 请求要消耗等比例的令牌才能被处理； 令牌不够时，...
2019-03-25 10:02:12
181
转载 JAVA进阶面试题：秒杀系统架构分析与实战
1 秒杀业务分析 正常电子商务流程（1）查询商品；（2）创建订单；（3）扣减库存；（4）更新订单；（5）付款；（6）卖家发货 秒杀业务的特性（1）低廉价格；（2）大幅推广；（3）瞬时售空；（4）一般是定时上架；（5）时间短、瞬时并发量高； 2 秒杀技术挑战假设某网站秒杀活动只推出一件商品，预计会吸引1万人参加活动，也就说最大并发请求数是10000，秒杀系统需要面对...
2019-03-08 16:41:45
3475
原创 JAVA进阶面试题：如何设计一个高并发系统？
一、面试原题：如何设计一个高并发系统？二、面试官心理分析：假设你在某知名电商公司干过高并发系统，用户上亿，一天流量几十亿，高峰期并发量上万，甚至是十万。那么人家一定会仔细盘问你的系统架构，你们系统啥架构？怎么部署的？部署了多少台机器？缓存咋用的？MQ 咋用的？数据库咋用的？就是深挖你到底是如何扛住高并发的。因为真正干过高并发的人一定知道，脱离了业务的系统架构都是在纸上谈兵，真正在复...
2019-03-07 16:55:59
1194
原创 CurrentHashMap在JDK1.8的改进
一、ConcurrentHashMap在jdk1.7中的设计jdk1.7中采用Segment+HashEntry的方式进行实现，结构如下：二、ConcurrentHashMap在jdk1.8中的设计1.8中放弃了Segment臃肿的设计，取而代之的是采用Node+CAS+Synchronized+红黑树来保证并发安全进行实现，结构如下：...
2019-03-06 15:39:38
2555
原创 JDK1.8 HashMap源码分析
1、底层结构JDK1.8之前的结构在JDK1.7之前，HashMap采用的是数组+链表的结构，其结构图如下： 数组的每一个元素都是一个单链表的头节点，链表是用来解决冲突的，如果不同的key映射到了数组的同一位置处，就将其放入单链表中。JDK1.8的结构JDK1.8之前的HashMap都采用上图的结构，都是基于一个数组和多个单链表，hash值冲突的时候，就将对应节点以链...
2019-02-27 15:35:37
219
原创 AQS原理浅析
这是一道面试题：简述AQS原理AQS核心思想是，如果被请求的共享资源空闲，则将当前请求资源的线程设置为有效的工作线程，并且将共享资源设置为锁定状态。如果被请求的共享资源被占用，那么就需要一套线程阻塞等待以及被唤醒时锁分配的机制，这个机制AQS是用CLH队列锁实现的，即将暂时获取不到锁的线程加入到队列中。CLH(Craig,Landin,and Hagersten)队列是一个虚拟的双向队列（虚...
2019-02-19 14:53:23
462
原创 关于JVM内存模型的理解
一、概念1、JVM运行时数据区jvm运行时数据区 整个JVM占用的内存可分为两个大区，分别是线程共享区和线程私有区，线程共享区和JVM同生共死，所有线程均可访问此区域；而线程私有区顾名思义每个线程各自占有，与各自线程同生共死。这两个大区内部根据JVM规范定义又分为以下几个区：方法区（Method Area） 方法区主要是放一下类似类定义、常量、编译后...
2018-10-19 10:41:05
198
原创 高级JAVA必会系列四
本文大纲 1.并发编程三要素原子性，即一个不可再被分割的颗粒。在Java中原子性指的是一个或多个操作要么全部执行成功要么全部执行失败。 有序性,程序执行的顺序按照代码的先后顺序执行。（处理器可能会对指令进行重排序） 可见性,当多个线程访问同一个变量时，如果其中一个线程对其作了修改，其他线程能立即获取到最新的值。2. 线程的五大状态创建状态,当用 new 操作符创建一个线程...
2018-10-13 09:30:26
425
原创 高级JAVA必会系列三:并发编程
FutureTaskIntroduction FutureTask这个组件是J.U.C里面的，但不是AQS的子类，但是这个类对线程处理的结果很值得我们学习和在项目中使用。 在Java中一般通过继承Thread类或者实现Runnable接口这两种方式来创建多线程，但是这两种方式都有个缺陷，就是不能在执行完成后获取执行的结果，在Java 1.5之后提供了Callable和Future接口...
2018-10-08 11:54:23
205
原创 Redis集群
集群架构(1)所有的redis节点彼此互联(PING-PONG机制),内部使用二进制协议优化传输速度和带宽.(2)节点的fail是通过集群中超过半数的节点检测失效时才生效.(3)客户端与redis节点直连,不需要中间proxy层.客户端不需要连接集群所有节点,连接集群中任何一个可用节点即可(4)redis-cluster把所有的物理节点映射到[0-16383]slot（插槽）上...
2018-08-29 11:33:18
207
原创 物联网云平台系统设计
下面将谈到几个关键问题：设备如何接入网络？ 设备间如何通信？ 物联网数据的用途? 如何搭建起一个物联网系统框架呢？它的技术架构又是怎么样呢？ 物联网终端软件系统架构？ 物联网云平台系统架构？1. 物联网设备如何接入到网络？只有设备接入到网络里面，才能算是物联网设备。这里涉及到2个关键点：接入方式以及网络通信方式。设备接入方式：当前有2种接入方式直接接入：物联网终端设...
2018-08-16 09:05:41
9114
1
原创 Netty学习笔记系列之七：开发私有协议栈
通信协议从广义上区分，可以分为公有协议和私有协议。由于私有协议的灵活性，它往往会在某个公司或者组织内部使用，按需定制，也因为如此，升级起来会非常方便，灵活性好。绝大多数的私有协议传输层都基于TCP/IP，所以利用Netty的NIO TCP协议栈可以非常方便地进行私有协议的定制和开发。Netty协议栈功能设计使用Netty提供的异步TCP协议栈开发一个私有协议栈，该协议栈被命名为Netty协议栈。N...
2018-06-20 17:36:38
258
原创 高级JAVA必会系列二：多线程经常使用的3个关键字：synchronized、ReentrantLock、volatile
一.synchronized(1)用法:1.修饰实例方法:package com.retail.sync;/** * @author Tom */public class AccountingSync implements Runnable { /** * 共享资源(临界资源) */ static int i = 0; /**...
2018-05-30 16:00:33
296
原创 高级JAVA必会系列一：常用线程池和调度类
一、常用线程池1.newCachedThreadPool (1)缓存型池子，先查看池中有没有以前建立的线程，如果有，就复用，如果没有，就建立一个新的线程加入池中； (2)缓存型池子，通常用于执行一些生存周期很短的异步型任务；因此一些面向连接的daemon型server中用得不多； (3)能复用的线程，缺省超时时间是60s,超过这个IDLE时长...
2018-05-30 15:52:55
342
转载 基于springCloud的分布式架构体系
Spring Cloud作为一套微服务治理的框架，几乎考虑到了微服务治理的方方面面，之前也写过一些关于Spring Cloud文章，主要偏重各组件的使用，本次分享主要解答这两个问题：Spring Cloud在微服务的架构中都做了哪些事情？Spring Cloud提供的这些功能对微服务的架构提供了怎样的便利？ 我们先来简单回顾一下，我们以往互联网架构的发展情况： 传统架构发展史 单体架构 单体架构在...
2018-05-23 16:50:29
404
1
转载 放弃Dubbo，选择最流行的Spring Cloud微服务架构实践与经验总结
Spring Cloud 在国内中小型公司能用起来吗?从 2016 年初一直到现在，我们在这条路上已经走了一年多。在使用 Spring Cloud 之前，我们对微服务实践是没有太多的体会和经验的。从最初的开源软件云收藏来熟悉 Spring Boot，到项目中的慢慢使用，再到最后全面拥抱 Spring Cloud。这篇文章给大家介绍我们使用 Spring Boot / Cloud 一年多的经验总结。...
2018-05-23 16:22:44
1927
转载 springcloud(十) 服务链路追踪(Spring Cloud Sleuth)
转载请标明出处： http://blog.csdn.net/forezp/article/details/70162074 本文出自方志朋的博客这篇文章主要讲述服务追踪组件zipkin，Spring Cloud Sleuth集成了zipkin组件。一、简介Add sleuth to the classpath of a Spring Boot application (see below for ...
2018-05-23 15:02:33
335
转载 springcloud(九) 消息总线(Spring Cloud Bus)
转载请标明出处： http://blog.csdn.net/forezp/article/details/70148235 本文出自方志朋的博客转载请标明出处：Spring Cloud Bus 将分布式的节点用轻量的消息代理连接起来。它可以用于广播配置文件的更改或者服务之间的通讯，也可以用于监控。本文要讲述的是用Spring Cloud Bus实现通知微服务架构的配置文件的更改。一、准备工作本文还...
2018-05-23 15:00:41
122
转载 springcloud(八) 高可用的分布式配置中心(Spring Cloud Config)
转载请标明出处： http://blog.csdn.net/forezp/article/details/70037513 本文出自方志朋的博客上一篇文章讲述了一个服务如何从配置中心读取文件，配置中心如何从远程git读取配置文件，当服务实例很多时，都从配置中心读取文件，这时可以考虑将配置中心做成一个微服务，将其集群化，从而达到高可用，架构图如下：一、准备工作继续使用上一篇文章的工程，创建一个eur...
2018-05-23 14:58:30
137
转载 springcloud(七)：分布式配置中心(Spring Cloud Config)
转载请标明出处： http://blog.csdn.net/forezp/article/details/70037291 本文出自方志朋的博客 在上一篇文章讲述zuul的时候，已经提到过，使用配置服务来保存各个服务的配置文件。它就是Spring Cloud Config。一、简介在分布式系统中，由于服务数量巨多，为了方便服务配置文件统一管理，实时更新，所以需要分布式配置中心组件。在Spring ...
2018-05-23 14:55:56
130
原创 springcloud(六)：路由网关(zuul)
在微服务架构中，需要几个基础的服务治理组件，包括服务注册与发现、服务消费、负载均衡、断路器、智能路由、配置管理等，由这几个基础组件相互协作，共同组建了一个简单的微服务系统。一个简答的微服务系统如下图： 注意：A服务和B服务是可以相互调用的，作图的时候忘记了。并且配置服务也是注册到服务注册中心的。在Spring Cloud微服务系统中，一种常见的负载均衡方式是，客户端的请求首先经过负载均衡（zuul...
2018-05-23 10:30:04
161
原创 Netty 对webSocket的支持
WebSocket是一种规范，是Html5规范的一部分，websocket解决什么问题呢？解决http协议的一些不足。我们知道，http协议是一种无状态的，基于请求响应模式的协议。网页聊天的程序（基于http协议的），浏览器客户端发送一个数据，服务器接收到这个浏览器数据之后，如何将数据推送给其他的浏览器客户端呢？这就涉及到服务器的推技术。早年为了实现这种服务器也可以像浏览器客户端推送消息的长连接需...
2018-05-18 13:35:52
782
转载 【面试题】Netty相关
1.BIO、NIO和AIO的区别？BIO：一个连接一个线程，客户端有连接请求时服务器端就需要启动一个线程进行处理。线程开销大。 伪异步IO：将请求连接放入线程池，一对多，但线程还是很宝贵的资源。 NIO：一个请求一个线程，但客户端发送的连接请求都会注册到多路复用器上，多路复用器轮询到连接有I/O请求时才启动一个线程进行处理。 AIO：一个有效请求一个线程，客户端的I/O请求都是由OS...
2018-05-16 17:39:35
194
转载 Netty 实现HTTP文件服务器
Netty 实现HTTP文件服务器一，需求文件服务器使用HTTP协议对外提供服务。用户通过浏览器访问文件服务器，首先对URL进行检查，若失败返回403错误；若通过校验，以链接的方式打开当前目录，每个目录或文件都以超链接的形式展现，可递归访问，并下载文件。 二，关键实现代码①文件服务器启动类需要添加的通道处理器如下：@Override protected void i...
2018-05-16 17:18:27
474
原创 springcloud(五)：熔断监控Hystrix Dashboard和Turbine
Hystrix-dashboard是一款针对Hystrix进行实时监控的工具，通过Hystrix Dashboard我们可以在直观地看到各Hystrix Command的请求响应时间, 请求成功率等数据。但是只使用Hystrix Dashboard的话, 你只能看到单个应用内的服务信息, 这明显不够. 我们需要一个工具能让我们汇总系统内多个服务的数据并显示到Hystrix Dashboard上, ...
2018-05-09 21:54:48
100
原创 springcloud(四)：熔断器Hystrix
熔断器雪崩效应在微服务架构中通常会有多个服务层调用，基础服务的故障可能会导致级联故障，进而造成整个系统不可用的情况，这种现象被称为服务雪崩效应。服务雪崩效应是一种因“服务提供者”的不可用导致“服务消费者”的不可用,并将不可用逐渐放大的过程。Hystrix特性1.断路器机制断路器很好理解, 当Hystrix Command请求后端服务失败数量超过一定比例(默认50%), 断路器会切换到开路状态(Op...
2018-05-09 21:34:42
116
原创 springcloud(三)：服务提供与调用
服务提供我们假设服务提供者有一个hello方法，可以根据传入的参数，提供输出“hello xxx，this is first messge”的服务1、pom包配置创建一个springboot项目，pom.xml中添加如下配置：<dependencies> <dependency> <groupId>org.springframework.cloud<...
2018-05-09 16:51:33
584
原创 springcloud(二)：注册中心Eureka
Eureka是Netflix开源的一款提供服务注册和发现的产品，它提供了完整的Service Registry和Service Discovery实现。也是springcloud体系中最重要最核心的组件之一。服务中心服务中心又称注册中心，管理各种服务功能包括服务的注册、发现、熔断、负载、降级等，比如dubbo admin后台的各种功能。有了服务中心调用关系会有什么变化，画几个简图来帮忙理解...
2018-05-09 16:15:44
166
原创 springcloud入门
什么是Spring CloudSpring Cloud是一系列框架的有序集合。它利用Spring Boot的开发便利性巧妙地简化了分布式系统基础设施的开发，如服务发现注册、配置中心、消息总线、负载均衡、断路器、数据监控等，都可以用Spring Boot的开发风格做到一键启动和部署。Spring并没有重复制造轮子，它只是将目前各家公司开发的比较成熟、经得起实际考验的服务框架组合起来，通过Spring...
2018-05-09 16:11:26
126
原创 javaSE复习之-------------------动态代理
代理模式一般涉及到的角色有：–抽象角色：声明真实对象和代理对象的共同接口–代理角色：代理对象角色内部含有对真实对象的引用，从而可以操作真实对象，同时代理对象提供与真实对象相同的接口以便在任何时刻都能代替真实对象。同时，代理对象可以在执行真实对象操作时，附加其他的操作，相当于对真实对象进行封装–真实角色：代理角色所代表的真实对象，是我们最终要引用的对象在某些情况下，一个客户不想或者不能直接引用另一个...
2018-04-29 16:54:39
88
原创 java多线程学习之------------------Executor线程池框架
为什么引入Executor线程池框架new Thread()的缺点每次new Thread()耗费性能 调用new Thread()创建的线程缺乏管理，被称为野线程，而且可以无限制创建，之间相互竞争，会导致过多占用系统资源导致系统瘫痪。 不利于扩展，比如如定时执行、定期执行、线程中断采用线程池的优点重用存在的线程，减少对象创建、消亡的开销，性能佳 可有效控制最大并发线程数，提高系统资源的使用率，同...
2018-04-29 16:20:04
95
原创 Mina学习笔记之一：初识Mina
Mina是什么 Mina是一个基于NIO的网络框架，使用它编写程序时，可以专注于业务处理，而不用过于关心IO操作。不论应用程序采用什么协议（TCP、UDP）或者其它的，Mina提供了一套公用的接口，来支持这些协议。目前可以处理的协议有：HTTP, XML, TCP, LDAP, DHCP, NTP, DNS, XMPP, SSH, FTP... 。从这一点来说，Mina不仅仅是一个...
2018-04-28 16:27:39
140
转载 Netty学习笔记系列之六：多种通讯协议支持
通讯协议，指的是把Netty通讯管道中的二进制流转换为对象、把对象转换成二进制流的过程。转换过程追根究底还是ChannelInboundHandler、ChannelOutboundHandler的实现类在进行处理。ChannelInboundHandler负责把二进制流转换为对象，ChannelOutboundHandler负责把对象转换为二进制流。接下来要构建一个Server，同时支持Pers...
2018-04-28 15:03:28
545
原创 Netty学习笔记系列之五：自定义通讯协议
实现的原理是通过Encoder把java对象转换成ByteBuf流进行传输，通过Decoder把ByteBuf转换成java对象进行处理，处理逻辑如下图所示：传输的java bean为Person：[java] view plain copypackage com.guowl.testobjcoder; import java.io.Serializable; // 必须实现S...
2018-04-28 12:39:54
139
原创 Netty学习笔记之四: Netty HTTP服务的实现
前言目前主流的JAVA web 的HTTP服务主要是 springMVC和Struts2，更早的有JSP/servlet。 在学习Netty的时候，发现Netty 也可以作HTTP服务，于是便将此整理一篇博文，分享给大家。开发准备添加配置将Netty作为HTTP服务，需要在过滤器中添加HttpRequest之类的配置，如: ph.addLast("encoder",new Htt...
2018-04-28 11:59:30
386
快压软件安装包
2018-09-06
WinRAR 5.40 简体中文注册版32_64.exe
2018-06-20
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人