- 博客(19)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 virtualbox安装虚拟机过程黑屏、vmvare提示Intel VT-x处于禁用状态
原因电脑CPU硬件未开启虚拟化功能，需要通过F1（或其他按键）进入Bios进行设置。
2019-08-09 09:43:27
1101
原创 在FreeBSD 11.0上安装KDE桌面系统
通过bsdconfig安装相关软件选择bsdconfig中Xorg相关选项选择kde4相关选项进行安装配置Xorgwhereis Xorg 找到绝对路径为：/usr/local/bin/Xorg /usr/local/bin/Xorg -configure/usr/local/bin/Xorg -config xorg.conf.new -retro （Ctrl+Al...
2018-04-27 15:20:14
4987
原创 源代码升级 FreeBSD命令记录
目前推荐的从源代码升级 FreeBSD 的方法是：# cd /usr/src # make buildworld # make buildkernel # make installkernel # shutdown -r now在 installkernel 成功完成之后，需要引导到单用户模式（可以在加载器提示后输入boot -s）。 接下来执行：# adjkerntz
2018-01-26 16:50:54
528
原创 Alluxio不同存储层(mem,ssd,hdd)的测试
Alluxio是一个基于内存的分布式文件系统，它是架构在底层分布式文件系统和上层分布式计算框架之间的一个中间件，主要职责是以文件形式在内存或其它存储设施中提供数据的存取服务。1、在ubuntu中安装hadoop2.7.1到/usr/local/hadoop文件夹下，hadoop用户可以通过sbin中start-all.sh启动，通过stop-all.sh来关闭；2、安装分布式内存文件系统a
2018-01-15 10:45:31
1996
1
原创 Arrakis: The Operating System is the Control Plane（OSDI 2014）论文学习
论文地址：https://www.usenix.org/node/186141问题（OS）：在传统的操作系统中，需要内核协调server应用对硬件设备的访问，从而实现在网络和磁盘安全方面的进程隔离，这使得操作系统中进程的负载相对较大，此问题在现代客户端-服务器计算中尤为突出。高速以太网和低延迟持久存储器的结合大大提高了I/O密集型软件的效率，因而许多服务器在执行操作系统代码上花
2018-01-15 10:10:26
584
原创 EbbRT: A Framework for Building Per-Application Library Operating Systems （OSDI 2016）论文学习
论文地址：https://www.usenix.org/conference/osdi16/technical-sessions/presentation/schatzberg参考资料：http://ytliu.info/blog/2016/12/15/sa-fan-na-xiao-zhen-shang-de-osdi2016/问题（OS）：操作系统为了保证通用性，不得不牺牲每
2018-01-15 09:36:01
643
原创 Early Detection of Configuration Errors to Reduce Failure Damage（OSDI 2016）论文学习
论文地址：https://www.usenix.org/conference/osdi16/technical-sessions/presentation/xu参考资料：http://ytliu.info/blog/2016/12/15/sa-fan-na-xiao-zhen-shang-de-osdi2016/PCheck:自动生成、调用配置检查代码来执行早期检测。问题：
2018-01-12 17:40:18
365
原创 Light-weight Contexts An OS Abstraction for Safety and Performance（OSDI 2016） 论文学习
论文地址：https://www.usenix.org/conference/osdi16/technical-sessions/presentation/litton论文官网：http://www.cs.umd.edu/projects/lwc/参考资料：http://ytliu.info/blog/2016/12/15/sa-fan-na-xiao-zhen-shang-de-osdi
2018-01-12 16:05:26
766
原创 Ambari 中安装ElasticSearch插件
1.说明：Elasticsearch-Yarn插件地址：https://oss.sonatype.org/content/repositories/snapshots/org/elasticsearch/elasticsearch-yarn/Elasticsearch下载地址：https://download.elastic.co/elasticsearch/elasticsear
2018-01-10 19:05:47
2738
原创 Amabri 2.4 HDP 2.5的安装
1.修改静态IP/etc/sysconfig/network-scripts/ 设置静态ipHWADDR=00:0C:29:0A:72:DETYPE=EthernetBOOTPROTO=dhcpDEFROUTE=yesPEERDNS=yesPEERROUTES=yesIPV4_FAILURE_FATAL=noIPV6INIT=yesIPV6_AUTO
2018-01-10 19:03:17
256
原创 Spark2.0功能测试和日志查看
一、spark2.0功能测试1.Spark-shell在spark的sbin使用spark-shell命令开启，使用如下例子测试：scala>val file=sc.textFile("hdfs://namenode:9000/user/hadoop/input/core-site.xml")scala>val count=file.flatMap(line=>line.split
2018-01-10 18:52:23
2014
原创 Spark集群安装
一、安装hadoop2.7.1集群，提供spark处理的hdfs文件，以及存储spark处理完的文件Vmware中三台ubuntu14虚拟机用户名、组名、密码均为hadoop，无密码登录；1）关闭VMware的NAT模式下的DHCP；2）根据VMnet8的网段来分配三个节点的静态IP；192.168.80.129 NameNode192.168.80.131 DataNod
2018-01-10 18:43:53
231
原创 Spark2.0使用手册
1.spark集群的开启1）在hadoop的sbin目录下使用start-dfs.sh和start-yarn.sh命令开启dfs集群；2）在spark的sbin目录下使用start-master.sh和start-slaves.sh命令开启Master和Worker；3）在hadoop的sbin目录下使用mr-jobhistory-daemon.sh start historyserv
2018-01-10 18:43:11
1449
原创 Spark2.0语法测试
1.Sparkcontext对象和RDDs弹性分布式数据集1）textFile加载文件数据集：scala> val lines = sc.textFile("/user/hadoop/helloSpark.txt")lines: org.apache.spark.rdd.RDD[String] = /user/hadoop/helloSpark.txt MapPartitionsRDD
2018-01-10 18:41:58
455
原创 实现Alluxio访问Oracle中的数据
实现方式：1.可以使用java程序通过JDBC连接到oracle数据库，然后使用Alluxio的java API将从数据库中读取到的数据写入到Alluxio中；2.可以使用java程序通过JDBC连接到oracle数据库，将数据表内容写出为文件，然后使用Alluxio的alluxio fs copyFromLocal命令将本地文件写入到Alluxio中;3.另外，经过查阅资料得
2018-01-10 18:31:06
673
原创 Ubuntu14环境中安装Sqoop1.99.5
环境：Ubuntu14.04 64位alluxio-1.3.0安装位置：/usr/local/alluxio-1.3.0hadoop2.7.1安装位置：/usr/local/hadoopSqoop1.99.5安装到/usr/local/sqoop：1.下载并解压sqoop源程序sudo tar -zvxf sqoop-1.99.5-bin-hadoop200.tar.g
2018-01-10 18:29:02
257
原创 Ubuntu14环境中安装Oracle11G R2
环境：Ubuntu14.04 64位alluxio-1.3.0安装位置：/usr/local/alluxio-1.3.0hadoop2.7.1安装位置：/usr/local/hadoop Oracle11G R2安装到/opt/oracle：1.安装Oracle所需的依赖包，其中安装过程中有问题的解决方法如下：sudo apt-get install ia32-libs:
2018-01-10 18:26:19
361
原创 搭建单机和集群Redis，测试程序访问集群情况
一、搭建单机redis下载redis3.0.2，编译安装：wget http://download.redis.io/releases/redis-3.0.2.tar.gztar -xvf redis-3.0.2.tar.gzmakemake installredis安装位置/home/happy/saas_homework/redis/redis-3.0.2/et
2018-01-10 17:26:52
247
原创 Hadoop3.0版本安装、性能研究
Hadoop3.0安装：环境：Ubuntu14.04 64位1.adduser advhadoop添加用户和组2.为hadoop用户添加权限sudo gedit /etc/sudoers3.安装sshsudo apt-get install openssh-server安装完成后启动ssh server服务sudo /etc/init.d/ssh start查看
2018-01-10 17:05:52
2926
SaaS软件工程 云计算时代的敏捷开发_（美）福克斯，（美）帕特木著_北京：清华大学出版社 , 2015.06_P456
2018-06-28
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人