BigDataSafe-CSDN博客

转载深入HDFS：Hadoop之分布式文件系统

文本详细介绍了HDFS中的许多概念，对于理解Hadoop分布式文件系统很有帮助。1. 介绍在现代的企业环境中，单机容量往往无法存储大量数据，需要跨机器存储。统一管理分布在集群上的文件系统称为分布式文件系统。而一旦在系统中，引入网络，就不可避免地引入了所有网络编程的复杂性，例如挑战之一是如果保证在节点不可用的时候数据不丢失。传统的网络文件系统（NFS）虽然也称为分布式文件系统

2017-11-27 14:46:52 343

转载数据复制软件---Oracle GoldenGate

前言GoldenGate软件是一种基于日志的结构化数据复制软件，它通过解析源数据库在线日志或归档日志获得数据的增量变化，再将这些变化应用到目标数据库，从而实现源数据库与目标数据库同步。GoldenGate 可以在异构的IT基础结构（包括几乎所有常用操作系统平台和数据库平台）之间实现大量数据亚秒一级的实时复制,从而在可以在应急系统、在线报表、实时数据仓库供应、交易跟踪、数据同步、集中/分发、

2014-06-30 09:07:01 964

转载 history相关命令详解

如果你经常使用 Linux 命令行，那么使用 history（历史）命令可以有效地提升你的效率。本文将通过实例的方式向你介绍 history 命令的 15 个用法。使用 HISTTIMEFORMAT 显示时间戳当你从命令行执行 history 命令后，通常只会显示已执行命令的序号和命令本身。如果你想要查看命令历史的时间戳，那么可以执行：# export HISTTIME

2014-04-09 11:23:54 596

原创 Oracle中查询索引名称，批量修改索引名称语句

在Oralce数据库数据优化过程中，对源数据表处理，原则上是做更名备份，作为被查或回退使用，所以，有修改数据表名后重新建表的操作，这样，往往也需要修改索引、主键、外键名称，方便重建，为了方便、快速生成处理数据脚本，采用批量处理方式，如第4、5段例句，拼接字符串，生成批量处理脚本。一、依据DBA视图查询，涉及到的视图有：user_ind_columns、user_indexes、user_con

2014-03-20 11:54:37 2782

转载 Linux sysctl.conf 优化方案

在服务器安装了LNMP(Linux+Nginx+Mysql+php)环境之后Linux服务器参数必须做必要的优化，包括网络参数优化、文件数优化、内存优化等等。1、网络参数优化：这部分主要参照张宴大师《Nginx 0.8.x + PHP 5.2.13（FastCGI）搭建胜过Apache十倍的Web服务器（第6版）[原创]》其中五、优化Linux内核参数的内容：vi /e

2014-03-20 11:29:32 703

转载 expdp\impdp及exp\imp

expdp介绍EXPDP命令行选项1. ATTACH该选项用于在客户会话与已存在导出作用之间建立关联.语法如下ATTACH=[schema_name.]job_nameSchema_name用于指定方案名,job_name用于指定导出作业名.注意,如果使用ATTACH选项,在命令行除了连接字符串和ATTACH选项外,不能指定任何其他选项,示例如下:Expdp scott

2014-03-20 11:28:19 446

原创 data guard中利用rman构建physical standby

环境介绍：dg1: rhel5.4 32位 192.168.0.201，db_unique_name: primary ,oracle_sid=primarydg2: rhel5.4 32位 192.168.0.202，db_unique_name: standby ,oracle_sid=priamryoracle版本： 11.2.0.1 32位企业版

2014-03-18 01:03:35 623

原创简单描述下linux下如何扩充，删除，管理LVM

使用lvextend -L size LVNAME 增大一个逻辑卷的大小。 [root@NEWLFS mnt]#lvextend -L +1G /dev/lvm_vg/lv_home Extending logical volume lv_home to 3.00 GB Logical volume lv_home successfully resized [root@NEWLFS

2014-03-07 15:44:31 1299

转载 linux平台下RMAN 备份详解

--======================-- RMAN 备份详解--====================== 一、数据库备份与RMAN备份的概念 1.数据库完全备份：按归档模式分为归档和非归档归档模式打开状态，属于非一致性备份关闭状态，可以分为一致性和非一致性

2014-03-07 14:05:49 2949

转载 linux下采用lvm技术动态调整磁盘容量

LVM：logical volume manager(逻辑卷管理)；LVM屏蔽了底层磁盘布局，方便于动态调整磁盘容量。一、创建逻辑卷的步骤：1）通过fdisk 工具将磁盘转换为linux分区2）通过pvcreate命令将linux分区转换成物理卷（PV)；3）通过vgcreate命令将创建好的物理卷处理成卷组（VG)；4）通过lvcreate命令将卷组分成若干个逻辑卷（LV

2014-03-07 14:02:40 1268

转载 linux下查看cpu物理个数和逻辑个数

hadoop@chw-desktop3:~$ cat /proc/cpuinfo processor : 0 vendor_id : GenuineIntel cpu family : 15 model : 2 model name : Intel(R) Pentium(R) 4 CPU 3.00GHz stepping : 9 micro

2014-03-04 22:16:48 594

BigDataSafe