- 博客(45)
- 资源 (24)
- 收藏
- 关注
RSS订阅原创 Centos7上krb5版本问题解决
centos79，安装openssl-devel报错如下：#yum install openssl-devel -y--> Finished Dependency ResolutionError: Package: libkadm5-1.15.1-50.el7.x86_64 (os) Requires: krb5-libs(x86-64) = 1.15.1-50.el7 Installed: krb5-libs-1.15.1-51.el7_9.x8...
2022-05-29 08:41:59
5098
转载 [转载]PgSQL · 特性分析· JIT 在数据仓库中的应用价值
原文：http://mysql.taobao.org/monthly/2016/11/10/背景近几年，分析型数据库中有项技术得到了广泛的应用。它就是 JIT(Just-in-time compilation)动态编译。还有一些相关名词 LLVM codegen 和这项技术相关。本文把这项技术做一个简单的分析，和大家分享。一、JIT 是什么长久以来数据仓库都是以高效的处理量数据的能...
2018-09-16 23:02:00
431
转载 [zz]Codd关系模型理论综述
转载自：http://www.codeweblog.com/codd%E5%85%B3%E7%B3%BB%E6%A8%A1%E5%9E%8B%E7%90%86%E8%AE%BA%E7%BB%BC%E8%BF%B0/引言:数据库系统从产生到现在经历了几次的变更,起基于的数据模型有网状模型,层次模型,关系模型,面向对象模型。其中关系模型是目前应用最广泛的。Codd对关系模型的发展做出了巨大的贡献。本文...
2018-07-08 23:55:28
1145
转载 CPU与内存的那些事
CPU与内存的那些事http://www.cnblogs.com/xkfz007/archive/2012/10/08/2715163.html下面是网上看到的一些关于内存和CPU方面的一些很不错的文章. 整理如下: 转: CPU的等待有多久?原文标题：What Your Computer Does While You Wait原文地址：http://d
2016-07-15 08:14:53
1660
转载 三种线程——内核线程、轻量级进程、用户线程
三种线程——内核线程、轻量级进程、用户线程内核线程内核线程就是内核的分身，一个分身可以处理一件特定事情。这在处理异步事件如异步IO时特别有用。内核线程的使用是廉价的，唯一使用的资源就是内核栈和上下文切换时保存寄存器的空间。支持多线程的内核叫做多线程内核(Multi-Threads kernel )。轻量级进程[*]轻量级线程(LWP)是一种由内核支持的用户线程。它是
2016-07-14 21:57:12
4232
转载 Apache Kafka：下一代分布式消息系统
Apache Kafka：下一代分布式消息系统作者 Abhishek Sharma ，译者 梅雪松 发布于 2014年6月12日 | 转至：http://www.infoq.com/cn/articles/apache-kafka/简介Apache Kafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发，之后成为Apache项目的一部分。Ka
2015-12-14 15:23:26
649
原创 centos linux 6.5 yum 从本地光盘安装system-config-kickstart
通过命令 yum install system-config-kickstart-2.8.6.5-1.el6.noarch.rpm 时， 发现无法连接互联网，而采用rpm安装时又发现存在依赖关系非常复杂，只能采用从本地进行安装。1、在centos系统里插入光盘2、修改CentOS-Media.repo 文件[root@node0 mnt]# vi /etc/yum.repo
2015-11-17 09:44:50
1481
原创 zookeeper3.4.6安装后Error contacting service. It is probably not running问题解决
环境： 3台centos Linux 6.6_x64现象： 安装完zookeeper以后，各台机器执行./zkServer.sh start启动正常，再执行./zkServer.sh status提示：Error contacting service. It is probably not running. 如下：[hadoop@node0
2015-11-10 16:54:30
9669
原创 centos 6.5ssh无密钥登陆失败问题解决
按照标准的安装以后，其他机器均没问题，有一台机器无论如何均不行，ssh到自己都需要输入密钥，后来找到问题，原来是selinux没有关闭。关闭方法：修改/etc/selinux/config 文件将SELINUX=enforcing改为SELINUX=disabled重启服务器。
2015-11-05 11:47:36
1353
原创 Linux 主机root登陆以后远程SSH才能访问
问题：Linux 主机root登陆以后远程SSH才能访问原因：主机没有为每一个用户设置网络权限解决：在网卡属性中设置所有用户均可以访问即可，如下图
2015-11-03 15:50:22
776
转载 深入剖析MongoDB架构
原文地址：http://www.open-open.com/lib/view/open1348919251822.html近日，软件工程师Ricky Ho的在 他的博客里发表了一篇关于MongoDB架构（ MongoDB Architecture）的博文，虽然这是一个听起来感觉很宽泛的话题，但是作者在文章中确实对MongoDB由内至外的架构进行了剖析。本文截取了其文章中的几张重点架构示意图
2015-10-16 09:49:15
596
原创 集群内服务器的时钟同步
通常，在构建大型的服务器集群时均需要进行时钟同步，很多年前，笔者刚入门时忘了进行时钟同步，一个数百亿的数据库集群出现故障，导致数据无法恢复，这也说明了集群的时钟同步重要性。 一般来说，集群的时钟同步有以下几种方法： （1）各服务器与公网的时钟服务器同步。 （2）将集群内的某台机器设为时钟服务器，其他机器与此机器同步，应用中，此方法用的较多。
2015-10-15 16:48:01
1836
转载 elasticsearch深入介绍
原文链接：http://www.sxt.cn/u/324/blog/3802elasticsearch是分布式,REST风格,搜索和分析系统。具有实时数据，实时分析，分布式，高可用性，多租户，全文搜索，面向文档，冲突管理，自由模式，rest风格API，每个操作的持久性，Apache 2的开源许可证，基于Apache Lucene之上的特点。实时数据数据流进入
2015-10-14 09:29:59
3582
转载 ElasticSearch分布式架构
本文固定链接: http://www.chepoo.com/elasticsearch-distributed-architecture.html | IT技术精华网今天介绍下ElasticSearch的分布式架构，如果你熟悉cassandra、hadoop、mongodb，你会发现ElasticSearch里面有很多他们的影子，没错，ElasticSearch吸收了目前主流的分布
2015-10-14 09:26:21
6783
转载 Google Spanner和F1介绍
zz from: http://blog.sina.com.cn/s/blog_4a1f59bf01017xiv.htmlZZ From http://qing.weibo.com/2294942122/88ca09aa3300221n.htmlGoogle Spanner原理- 全球级的分布式数据库标签:大数据云计算Google Spanner简介Span
2015-10-05 22:13:35
7062
原创 PrestoServer No factory for connector hive 问题解决
安装了presto去连接hive,启动时一直报以下错误：2015-09-23T17:49:34.771+0800 ERROR main com.facebook.presto.server.PrestoServer No factory for connector hive java.lang.IllegalArgumentException: No facto
2015-09-24 16:44:42
8466
4
原创 presto安装：如何在同一台机器上运行不同版本jdk(1.7&1.8)
直接按文档在已安装hadoop的机器上安装presto，出错我的安装环境为hadoop 2.4,centos 6.5X64，presto 0.100(1)root下安装presto发现无法启动，./launch run报如下信息：java.lang.UnsupportedClassVersionError: PR/Sort : Unsupported major
2015-09-24 16:40:49
2883
原创 Facebook Presto 0.100&0.118的安装
安装环境centos 6.5X64coordinator与work安装在同一台机器，该机器没有安装任何的数据库，刚开始准备测试连接mysql、iq等关系型数据库，然后再测试hive环境准备：jdk-8u51-linux-x64.rpm安装：刚开始安装的presto-server-0.118.tar.gz，具体安装方法可见https://prestodb.io
2015-09-18 10:47:44
3666
原创 ice、ace共用时vs2010+下无法编译通过问题解决方案
解决方案：在ice的ICE-3.4.2\IceUtil目录下，修改Config.h，具体修改方法为：在# include 行的上方，添加以下行#define WIN32_LEAN_AND_MEAN此时，编译通过
2015-09-14 15:47:51
445
转载 Google Protocol Buffer 的使用和原理
http://www.ibm.com/developerworks/cn/linux/l-cn-gpb/Google Protocol Buffer 的使用和原理刘 明, 软件工程师, 上海交大电子与通信系简介： Protocol Buffers 是一种轻便高效的结构化数据存储格式，可以用于结构化数据串行化，很适合做数据存储或 RPC 数据交换格式。它可用于
2012-05-20 16:24:51
386
原创 行式数据库vs列式数据库
DBMS在过去的三十多年都是行式数据库的天下，具有代表性的有：oracle、db2、mysql、sybase ASE、sql server，今天还是占有着绝大部分的市场；随着业务中应用的需求变化，列式数据库、NOSQL数据库（在此不作讨论）开始出现，列式数据库具有代表性的有：sybase IQ, Infobright、InfiniDB、MonetDB，国产的有Gbase 8a；各个数据库厂家也是炒
2012-04-22 21:40:15
724
转载 分布式计算框架libGlass
libGlass 提供了一组可伸缩的组件用来执行分布式计算。应用程序在需要的情况下被当作是可重用的组件。该框架适合新的应用程序，同时对一些老应用也同样可用，而无需去改写。libGlass 2.0 对代码进行了清理，更加的可靠，支持 TCP/IP、Unix 套接字；支持远程变量，实现了 nodeNickNames，支持分区共享内存。 http://libglass.sourceforge
2012-04-21 21:46:30
822
转载 分布式计算框架ProActive
ProActive是一个为进行并联地，分布式地，并发地计算提供一个统一的，灵活的，安全的框架。ProActive提供了一个全面的API从而简化了分布式(局域网上的，并联的工作站，Internet网上的)应用程序的开发。 从网址来看，是法国的一个开源软件http://www-sop.inria.fr/oasis/ProActive/ 其中文的介绍如下：ProActive 是一
2012-04-21 21:33:01
640
转载 分布式应用程序协调服务zookeeper
zookeeper 应用程序协调服务 ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，包含一个简单的原语集，是Hadoop和Hbase的重要组件。分布式应用可以使用它来实现诸如：统一命名服务、配置管理、分布式锁服务、集群管理等功能。 1）ZooKeeper的基本原理 ZooKeeper是以Fast Paxos算法为基础的，在前一篇blog中大
2012-04-21 21:17:18
1313
转载 分布式计算框架Fourinone
Fourinone FourInOne（中文名字“四不像”）是一个四合一分布式计算框架，在写这个框架之前，我对分布式计算进行了长时间的思考，也看了老外写的其他开源框架,当我们把复杂的hadoop当作一门学科学习时，似乎忘记了我们想解决问题的初衷：我们仅仅是想写个程序把几台甚至更多的机器一起用起来计算，把更多的cpu和内存利用上，来解决我们数量大和计算复杂的问题，当然这个过程中要考虑到分布
2012-04-21 21:15:11
1158
转载 什么是分布式计算
分布式计算是一门计算机科学，主要研究分布式系统。一个分布式系统包括若干通过网络互联的计算机。这些计算机互相配合以完成一个共同的目标（我们将这个共同的目标称为“项目”）。具体的过程是：将需要进行大量计算的项目数据分割成小块，由多台计算机分别计算，再上传运算结果后统一合并得出数据结论。在分布式系统上运行的计算机程序称为分布式计算程序；分布式编程就是编写上述程序的过程。 中国科学技术信息研究所的
2012-04-21 20:27:21
2491
转载 有关网站架构的资料
<br />http://www.threes.cn/?category_name=database&paged=3<br /> <br />MySQL数据库服务器国际知名网站中的使用数量<br />2008年4月18日，在Alexa安排的一次“Scaling MySQL — Up or Out?” 的小组辩论中，MySQL、Sun、Flickr、Fotolog、Wkipedia、Facebook、YouTube等国际知名网站的DBA们，对其 网站MySQL数据库服务器、Web服务器、缓存服务器的数量，My
2011-05-12 11:12:00
693
转载 MySQL/HandlerSocket和VoltDB：NoSQL的竞争者
一般认为NoSQL数据库在性能方面要优于传统的SQL数据库。但是有两个SQL的解决方案宣布：对于大型系统的高可扩展性需求，SQL仍然是可行的解决方案！这两个SQL解决方案分别是MySQL加NoSQL层插件和支持SQL的VoltDB数据库。 MySQL + HandlerSocketYoshinori Matsunobu是Sun/Oracle的前雇员，从事MySQ
2011-04-24 18:14:00
554
转载 分布式内存数据库--Voltdb
<br />http://www.binotes.net/read.php/106.htm<br /> <br />分布式内存数据库--Voltdb 1.引言1.1 What is VoltDB?<br />VoltDB 是为满足极端多的事务处理以及以下需求而设计的关系数据库系统：<br />可以提供比传统数据库系统好很多的性能。<br />可以线性扩展。<br />兼容SQL 作为数据库管理接口。<br />兼容ACID ，满足数据一致与完整性。<br />7*24*365 高可用。<br /> <br
2011-04-23 14:03:00
3388
转载 Informatica PowerCenter 8.6的下载与安装
Informatica PowerCenter 8.6的下载与安装http://datawarehou.se/knowledge/informatica-powercenter-86-download-installation/关于下载：<br />主要参考资料：http://gerardnico.com/wiki/powercenter/installation_861<br />下载是从Oracle E-Delivery网站（https://edelivery.oracle.com/）上免费下载，这方面
2011-04-22 16:21:00
1782
原创 sybase iq 大牛的blog地址
<br />http://blog.chinaunix.net/space.php?uid=16765068
2011-04-20 16:19:00
537
转载 [转载]当下流行的分布式文件系统大阅兵
<br /> 本文对目前数种分布式文件系统进行简单的介绍。当前比较流行的分布式文件系统包括：Lustre、Hadoop、MogileFS、FreeNAS、FastDFS、NFS、OpenAFS、MooseFS、pNFS、以及GoogleFS。<br /> Lustre（www.lustre.org）<br /> lustre是一个大规模的、安全可靠的，具备高可用性的集群文件系统，它是由SUN公司开发和维护。该项目主要的目的就是开发下一代的集群文件系统，可以支持超过10000个节点，数以PB的数量存储系统
2011-04-19 00:05:00
607
转载 oracle dsi
<br />http://www.eygle.com/archives/2006/04/dsi_download_links.html<br /> <br />DSI可以称得上是Oracle的终极培训教程.<br />统统被标记为:Oracle Confidential. <br />最近,这些DSI教程纷纷现身江湖,现在推荐一些链接给大家:<br />DSI301-308 + DSI401<br />DSI401~DSI403<br />DSI401e + DSI404<br />DSI405 Perfo
2011-04-17 18:09:00
461
转载 linux磁盘IO查看(iostat)
<br />http://blogold.chinaunix.net/u3/93062/showart_1934431.html<br /> <br />linux磁盘IO查看(iostat)<br />##############<br />#<br /># 操作<br />#<br />##############<br /># iostat -x 1 10<br />Linux 2.6.18-92.el5xen 02/03/2009<br />avg-cpu: %user %nice
2011-04-17 13:17:00
615
转载 数据库应用:RAID的条带的概念及条带大小设置的原则
<br />转自fly115: 来谈谈RAID的条带的概念及条带大小设置的原则<br /><br />分条可以按照水平方向（跨越每个硬盘控制器）进行，可以按照垂直的方向（跨越硬盘集合）进行<br /><br /> 对硬盘进行分条动作的目的是为了使用多个硬盘控制器以便达到对数据的并行访问，因此必须考虑系<br />统中可用的硬盘控制器数目以及每个分条集合中的成员数目。通常，不应该使得分条集合中的成员数<br />目多于系统中可用的硬盘控制器数目，否则将会不能很好地实现进行硬盘分条的目标，这个目标就是<br
2011-04-16 16:20:00
11843
转载 OLAP工具
<br />OLAP工具 联机分析处理工具。目前开源的OLAP工具也分为MOLAP、ROLAP和HOLAP，优秀的OLAP工具通常有以下特性： 1、 良好的执行性能，能快速地进行分析处理工作。 2、 良好的适用性和可伸缩性。 3、 开放式接口和丰富的API。 目前较为知名的开源OLAP工具有： 1、 Mondrian，是Pentaho的一部分，为一个用Java开发的OLAP服务器，实现了MDX语言、xml解析和JOLAP规范，可以不写SQL就能分析存储于SQL 数据库的庞大数据集，可
2011-04-12 13:00:00
3772
转载 几款BI相关的开源工具-ETL-OLAP相关
几款BI相关的开源工具-ETL-OLAP相关 [font=Arial][/font] [font=Arial] 我们都知道“瞎子摸象”的故事。不同的瞎子对大象的认识不同，因为他们只认识了自己摸到的地方。而企业如果要避免重犯这样的错误，那就离不开商务智能（BI）。专家认为，BI对于企业的重要性就像聪明才智对于个人的重要性。欧美企业的经验也证明，企业避免无知和一知半解危险的有效手段就是商务智能。商务智能旨在充分利用企业在日常经营过程中收集的大量数据和资料，并将它们转化为信息和知识来免除各种无知状态和瞎猜行为。
2011-04-12 12:49:00
4531
转载 数据抽取、清洗与转换 BI项目中ETL设计
<br /><br />【赛迪网－IT技术报道】ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程，目的是将企业中的分散、零乱、标准不统一的数据整合到一起，为企业的决策提供分析的依据。<br /> <br />ETL是BI项目最重要的一个环节，通常情况下ETL会花掉整个项目的1/3的时间，ETL设计的好坏直接关接到BI项目的成败。ETL也是一个长期的过程，只有不断的发现问题并解决问题，才能使ETL运行效率更高，为项目后期开发提供准确的数据。<br /> <br />ETL的设计分
2011-04-09 23:16:00
1149
poi-3.8-20120326.jar、poi-ooxml-3.8-20120326.jar
2015-09-22
大型网站技术架构_核心原理与案例分析(高清扫描完整版)
2015-03-01
数据库模板库 OTL
2015-02-26
c++ oracle调用库 oracle class library(ocl) 3.3 源代码
2009-08-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人