- 博客(74)
- 资源 (5)
- 收藏
- 关注
RSS订阅原创 mpich安装使用
mpich安装使用安装测试mpich自带example测试MPI程序先安装缺少的库缺少log4cpp库解决 mpi_modelcpp38 error memset was not declared in this scopeusrbinld cannot find -lcrypto 错误1usrbinld cannot find -lz 错误测试程序mpich安装使用安装##
2015-11-29 19:46:37
2682
原创 认识Beta函数
1. Beta 函数如果随机变量 XX 服从参数为 nn 和 pp 的二项分布，那么它的概率由概率质量函数(对于连续随机变量,则为概率密度函数)为： p(x)=(nx)qx(1−q)n−x(1)p(x)=\begin{pmatrix}n\\x\\ \end{pmatrix}q^x(1-q)^{n-x}\tag{1} 把 (1)(1) 表示为变量 qq 的函数,即只有 qq 这一个变量,写成如下
2015-11-29 09:58:19
47526
8
原创 Jmeter压力测试
一. 准备客户端访问实现 // TODO 还没上传 打包为 ApacheJMeter_couchbase.jar , 放到 $JMETER_HOME/lib/ext 目录下 ll lib/ext/total 2764-rw-r--r-- 1 root root 528083 Mar 5 16:39 ApacheJMeter_components.j
2015-06-05 19:30:22
781
转载 拉格朗日对偶性(转)
拉格朗日对偶性是解决带约束的最优化问题的方法，在实际应用中，通过拉格朗日对偶原理将原始问题转换成对偶问题，将原来不容易解决的问题转化为一个容易解决的问题，如支持向量机。原始问题假设是定义在上的连续可微函数，原始问题如下所示：引进广义拉格朗日函数那么原始问题等价于如下问题即这是因为如果约束条件不满足，即, 那么总可以找到
2015-04-05 01:14:03
1016
原创 常用函数图像
1. plotFun(x^2/2+y^2/2 ~ x & y, x.lim=range(-10,10),y.lim=range(-10,10),surface = TRUE)等高线图:plotFun(x^2/2+y^2/2 ~ x & y, x.lim=range(-10,10),y.lim=range(-10,10),ntps=1000)除非显式指定参数 surf
2015-03-22 15:01:29
3538
原创 Storm安装(单节点)
启动 Zookeeper./zkServer.sh start./zkCli.sh -server storm-standalone:2181启动 Storm./storm nimbus./storm supervisor./storm ui访问 http://127.0.0.1:8080
2015-01-15 23:00:08
1752
原创 安装单节点伪分布式 CDH hadoop 集群
原来安装都是三个节点，今天要装个单节点的，装完后 MapReduce 总是不能提交到 YARN，折腾了一下午也没搞定MR1 中 Job 提交到 JobTracker，在 YARN 中应该提交到 ResourceManager，但发现起了个 LocalJob，经发现做如下配置并不生效 mapreduce.framework.name yarn 其实在 YARN
2014-03-31 23:38:45
4335
原创 使用 HBase Bulk Loading
1、要导入的数据文件格式将如下格式的文本文件导入 HBase,第一个字符串为 rowkey, 第二个数字作为 Value，所有列中，必须有一个作为 rowkey,rowkey 可以不是第一列，例如要将如下本文中数字部分作为 rowkey，调整 importtsv.columns 参数中 rowkey 对应参数的位置即可the,213to,99and,58a,53you,43
2014-03-15 18:19:51
1429
原创 Python 模块搜索路径
Import下面 import 语句将创建一个名为 sys 的命名空间，sys 模块中的代码将在这个命名空间中运行同时，这个解释器作为调用者也获得了一个名称，刚好也叫 sys，是 sys 模块一个引用，这个名称可通过 sys 修饰符来修改，如 import sys as p>>> import sys>>> sys.prefix'/usr'PYTHONPATH一般安
2014-02-11 01:44:48
2358
原创 在 Erlang 中使用 C 接口
Erlang 端口Erlang 使用 端口来同其他的操作系统进程进行通信，这个所谓的端口不是那些更为常见的硬件、软件、协议端口，这里说的端口是 Erlang 中的端口。为了区分，把 Erlang 中的端口称为 Erlang端口好了。Erlang 端口可以通过标准输入和标准输出同外部操作系统进程进行通信，所以它也需要软件端口的功能；它还能支持简单的数据格式，完成数据收发功能，可被看作
2014-02-05 02:27:37
1964
原创 在 RHEL 中使用 CentOS repositories
禁用 RHEL 仓库禁用 RHEL 的每个仓库配置修改目录 /etc/yum.repos.d 下每个文件，将 enable=1 改为 enable=0，或者也可以将这个目录清空建立 CentOS 的配置 /etc/yum.repos.d/centos.repo ，内容为：[CentOS5 base]name=CentOS-5-Basemirrorlist=http://m
2014-02-03 18:02:13
3044
原创 使用 ZooKeeper 同步集群配置
用 ZooKeeper 同步集群配置，当需要修改所有节点配置时，将配置更新到 ZooKeeper 的一个节点，引起这个节点数据发生变化，其他所有需要同步配置的节点上的本地 Watcher 会立即发现节点状态的变化，并将最新数据更新到本地把官方Demo 改了改，响应 Watcher 时用 ConfFileUtil 更新一下本地配置就可以了public class Execut
2014-01-15 15:21:11
2182
原创 Fedora19中使用maven的一个错误：UnsupportedClassVersionError
[root@indigo apache]# mvn---------------------------------------------------constituent[0]: file:/usr/share/maven/lib/slf4j_nop.jarconstituent[1]: file:/usr/share/maven/lib/aether_spi.jarconstitue
2014-01-01 19:02:41
2535
原创 Shell (二) 变量替换
1.:= username 未定义或值为空时会被设置为变量 LOGNAME 的值只有当变量 username 已经被定义且有一个非空值时，才不会被设置为 LOGNAME 值2.= 只要变量 username 已经被定义，不论值是否为空都不会被设置为变量 LOGNAME 值下面示例中均不会改变 LOGNAME 值，所以就不不再赋值3.:-
2014-01-01 18:42:21
1031
原创 RedHat : DNS 服务（正解）
没有理论，只有操作，希望能让刚开始学习DNS的朋友快速搭建一个可用 Demo1、安装 bind、bind-chrootyum install bind bind-chroot2、主要的配置文件/var/named/chroot/etc/named.conf这个文件不需要动，包括了一些全局参数和指定了zone文件的位置： /etc/named.rfc1912.zones[
2014-01-01 13:04:37
3325
原创 RedHat : SAMBA 服务
从在 VirtualBox 刚装好的 RedHat 开始，首先安装 samba，检查 samba 是否已经安装[root@com5 Desktop]# rpm -qa | grep sambasamba-winbind-3.6.9-151.el6.x86_64samba-winbind-clients-3.6.9-151.el6.x86_64samba4-libs-4.0.0-55.el
2013-12-27 23:17:19
1346
原创 一个Maven插件引发的错误
翻到一个前些天同事发来的邮件，内容如下： INFO [XmlBeanDefinitionReader] (XmlBeanDefinitionReader.java:315) - Loading XML bean definitions from URL [jar:file:/home/eagle/work-project/code/work/logMonitor/bmp/bmp-mq-cons
2013-12-10 01:34:46
1307
原创 JMS入门（三）点对点消息传送模型示例
一、点对点模型当你只需要将消息发送给唯一的一个消费者时，就应该使用点对点模型，并且这是个高可靠的模型。我们用一个贷款示例来演示这种模型QBorrower 类将贷款申请发送给 RequestQueue 队列，并且使用 ReplyQueue 队列从 QLender 类中接收结果QLender 要根据 QBorrower 提供的工资和贷款额来确定是否给予贷款，若贷款额低
2013-12-09 23:54:40
1277
原创 JMS入门（二）Chat示例简要说明
简要说明一下昨天示例中的要素：java.naming.factory.initial = org.apache.activemq.jndi.ActiveMQInitialContextFactoryjava.naming.provider.url = tcp://localhost:61616java.naming.security.principal=systemjava.naming
2013-12-09 23:37:17
1055
原创 JMS入门（一）从简单示例开始
一、准备环境本文假设你还不知道什么是JMS，我们准备今天只完成一个简单示例以获取点感性认识，首先需要一个 ActiveMQ，可以在这里找到：http://mirror.bit.edu.cn/apache/activemq/apache-activemq/5.7.0/apache-activemq-5.7.0-bin.zip如果链接不可用，可尝试其他地址：http://www.apa
2013-12-08 20:36:51
1353
原创 Snappy,Lzo,bzip2,gzip,deflate文件解压
Snappy,Lzo,bzip2,gzip,deflate 都是hive常用的文件压缩格式,各有所长,这里咱们只关注具体文件的解压一、先贴代码：package compress;import org.apache.commons.logging.Log;import org.apache.commons.logging.LogFactory;import org.apache.
2013-12-02 14:26:13
10391
原创 使用VisualVM 查看远程Java进程
在目标远程节点启动jstatd：如果出现如下错误，可使用下面的 jstatd.sh 来启动[apache@indigo ~]$ jstatdCould not create remote objectaccess denied (java.util.PropertyPermission java.rmi.server.ignoreSubClasses write)java.secur
2013-11-23 00:51:50
1735
原创 配置Cisco路由器VTY以允许远程访问
选个路由器和PC，用交叉线连接。设置路由器和PC的IP、路由器vty密码:Router>enRouter#conf tR0(config)#int fastEthernet 0/0R0(config-if)#ip address 10.10.10.1 255.255.255.0R0(config-if)#no shutdown R0(config-if)#^ZR0#R0(co
2013-11-23 00:14:27
6929
原创 postgresql 安装
版本：[yuming@com4 ~]$ lsb_release -aLSB Version: :core-4.0-amd64:core-4.0-noarch:graphics-4.0-amd64:graphics-4.0-noarch:printing-4.0-amd64:printing-4.0-noarchDistributor ID: RedHatEnterpriseServe
2013-11-18 21:51:40
5483
原创 Shell (一) 脚本错误检测
使用set命令来观察脚本运行情况#!/bin/shset -xecho -n "Can you write device drivers? "read answeranswer=`echo $answer | tr [a-z] [A-Z]`#echo $answerif [ "$answer" = Y ]then echo "Wow, you must be very
2013-11-04 15:01:35
1655
原创 Ant: target
if/unless 属性 如果if值为一个属性，那么这个属性not.leaf为true、yes等"true-like"值时才运行这个target1.8.0以后，if值可以不是属性，只要他为true就运行这个target，如： 可运行 ant -Dfile.exists=false lots-of-stuff 来只运行
2013-11-02 11:03:30
1190
原创 fedora19 安装 VirtualBox
https://www.virtualbox.org/wiki/Linux_DownloadsRPM-based Linux distributions1.导入公钥,这步不是必需的wget http://download.virtualbox.org/virtualbox/debian/oracle_vbox.ascrpm --import oracle_vbo
2013-09-07 00:41:19
1887
1
原创 Hive SQL 语义分析：select count(*) from tableName
从客户端提交一个 Hive SQL 到 Driver 提交 MapReduce Job，有一个对SQL进行词法分析和语义分析的过程，下面以 select count(*) from tableName 来描述其过程。一、词法分析使用ANTLR分析SQL，生成语法树，每个节点是一个 ASTNode，它有自己的类型。来看看 select count(*) from tableName 的
2013-09-06 02:01:53
5486
1
原创 未解决问题2_Unknown rpc kind RPC_WRITABLE
在CLI中使用hive 执行引起起 MapReduce 任务的查询时报错，因为还么解决，贴出完整异常：hive> select count(*) from table;Total MapReduce jobs = 1Launching Job 1 out of 1Number of reduce tasks determined at compile time: 1In order t
2013-08-30 12:04:36
2645
3
原创 hive 存储格式和压缩方式 一：Snappy + SequenceFile
1、设置三个参数：hive.exec.compress.output 声明对 hive 查询的输出结果进行压缩，并指定压缩方式为 Snappy。对SequenceFile 有 mapred.output.compression.type，在CDH4中默认就是 BLOCK。SET hive.exec.compress.output=true;SET mapred.output.com
2013-08-30 02:15:38
13864
原创 hive 中的异常：1、ClassNotFound
原来用 hive shell 时从没考虑过在哪个目录下使用，有时候在不同目录下还是有区别的，如下面异常，只要换个目录再运行就没这个问题了：[apache@indigo hive]$ pwd/home/apache/diary/0829/hdp_manual_install_rpm_helper_files-2.0.0.22/configuration_files/hive[apache@i
2013-08-29 23:33:07
5136
1
原创 hive：MoveTask
运行SQL时出了个错：SQL： INSERT OVERWRITE DIRECTORY 'result/testConsole' select count(1) from nutable; 错误信息：Failed with exception Unable to rename: hdfs://indigo:8020/tmp/hive-root/hive_2013-08-22_17-35-05
2013-08-22 21:08:51
10364
1
原创 eclipse
eclipse 竟然出这么个错误：Could not save master table to file '/home/apache/dev/workspaces/kepler/space1/.metadata/.plugins/org.eclipse.core.resources/.safetable/org.eclipse.core.resources'./home/apache/
2013-08-19 00:43:48
3769
原创 NameNode 启动错误
2013-08-18 21:21:10,877 FATAL org.apache.hadoop.hdfs.server.namenode.NameNode: Exception in namenode joinjava.net.BindException: Problem binding to [indigo:8020] java.net.BindException: Cannot assign
2013-08-18 21:26:25
3065
原创 fastjson parseArray
一个项目，主要逻辑由你写，完成差不多了，也不经测试，直接丢给别人，你有这么爽过吗。我反正没有，而且，我就是那个擦屁股的原本项目用的jackson，一同事解析json时却用了fastjson，还把JSON.parseArray 用错了，着实郁闷了我一把@Test public void testJson() throws IOException { String str = "
2013-08-13 23:25:22
15771
点对点消息模型示例
2013-12-09
JS HTML CSS DOM chm文档
2011-12-17
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人