自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(26)
  • 资源 (18)
  • 收藏
  • 关注

原创 解析旅游网驴妈妈的大数据用户推荐系统(3月11日实时分享)

3月11日,邀请驴妈妈副CTO邵汉成在线分享《基于混合云的OTA比价系统、精准运营和大数据用户推荐》。主要内容包括采用混合云,进行产品比价跟价;进一步提升精准运营并提升产品竞争力;并结合大数据分析,根据用户喜好和个性数据,推荐性价比高的产品等。欢迎分享给更多朋友。还有技术书籍相送。报名地址:https://yq.aliyun.com/articles/7556分布式服务框架原理与实践 Meso...

2016-03-09 08:12:43 752

原创 代表15支阿里系技术博客,云栖社区入驻CSDN博客

2016,我们来了。云栖社区入驻CSDN!首批15支技术团队,包含数据库、aliexpress、云盾、云存储、资源编排、手机淘宝、智能语音交互、技术保障、容器、ODPS、E-MapReduce、中间件、持续交付还有社区技术团队,送给程序猿们一份别开生面的新年礼物。

2016-01-11 09:55:28 2737

原创 云平台网络评测——博睿Bonree出品

云平台纷繁乱人眼,用户如何客观选择。站在分布式用户的视角从网络性能方面去横向评测一下,给大家在云选择前做个参考。博睿Bonree采用全面分布式监测点连续监测方式对云平台的网络评测将长期提供给大家参考。博睿(Bonree)数据监测中心通过分布在全国各地主要城市的电信、联通、移动、教育网(全国80个主要城市的机房以及全国均匀分布的Lastmile会员)对全国主流云平台进行定周期ping测试,每组pin...

2015-07-17 14:56:14 783

原创 最近喝了Dojo”豆粥“没?

Cloud Foundry 基金会启用一个叫Dojo的新方式去支持开源开发。简单讲就是欢迎全世界想致力于cloud foundry开发的高手去Pivotal学习,所以那些做开源cloud foundry的公司以后都会派人参加这个program。 ——官方解释为:它提供给开发者一种独特的“快车道”的commit权利,Cloud Foundry还将引入一个认证的计划以保证跨Cloud Foundry...

2015-07-06 11:47:13 153

原创 Gartner:全球APM软件市场TOP15排名

Dynatrace已连续5年被Gartner魔力象限评选为APM市场领导者。Gartner 报告指出,APM 软件市场的营收在过去几年呈加速态势,截至2014年已达到26亿美元,较2013年增长了15.8%,高于2012年到2013年13.0%的营收增长率。作为第一名,2014年,Dynatrace实现营收3.269亿美元,相较于2013年增长5590万美元。 图片描述 点击此处下载 Ga...

2015-07-03 10:55:30 3171

原创 BAT的故事(4):阿里云催变阿里数据中心

http://mp.weixin.qq.com/s?__biz=MzA3NTM0OTcyOA==&mid=209327475&idx=1&sn=9ae7898a55bd6d0409f2611c0f104dce&scene=1&key=c76941211a49ab589cf6589b9967d968f44851a2e684eb13ba19b69ea48a526...

2015-07-02 17:03:53 153

原创 Uber 买了 Microsoft Data Center和Map Imaging Operation

在国内,地图收购早已完成。新加入者要好好考虑了。 原文链接:http://www.datacenterknowledge.com/archives/2015/06/30/uber-buys-microsoft-data-center-map-imaging-operation/

2015-07-01 10:09:01 153

原创 强烈推荐10个纯干货的技术订阅号

这次瓜哥向大家推荐几个干货比较多的公众号。推荐一(运维类) 介绍:作者老王,07年进入腾讯公司接触运维,经历服务器从百到万的运维历程, 先后在YY和UC参与不同业务形态的运维,期间带过前端运维、数据存储运维、YY语音、游戏运维、运维研发等多种运维团队,对运维有着全面的理解。极力倡导互联网价值运维理念,即面向用户的价值是由自动化平台交付传递,同时由数据化来提炼和衡量。 推荐二(运维类) 名...

2015-06-30 10:09:04 1845 1

转载 GC调优在Spark应用中的实践

Spark是时下非常热门的大数据计算框架,以其卓越的性能优势、独特的架构、易用的用户接口和丰富的分析计算库,正在工业界获得越来越广泛的应用。与Hadoop、HBase生态圈的众多项目一样,Spark的运行离不开JVM的支持。由于Spark立足于内存计算,常常需要在内存中存放大量数据,因此也更依赖JVM的垃圾回收机制(GC)。并且同时,它也支持兼容批处理和流式处理,对于程序吞吐量和延迟都有较高要求,...

2015-06-26 16:49:45 185

原创 Project Tungsten:让Spark将硬件性能压榨到极限

本文编译自Databricks Blog(Project Tungsten: Bringing Spark Closer to Bare Metal),作者Reynold Xin(@hashjoin)、Josh Rosen。由七牛云存储技术总监陈超(@CrazyJvm)友情审校。以下为原文:在之前的博文中,我们回顾和总结了2014年Spark在性能提升上所做的努力。本篇博文中,我们将为你介绍性能提...

2015-06-26 15:47:32 177

原创 Databricks孟祥瑞:ALS 在 Spark MLlib 中的实现

深受用户喜爱的大数据处理平台 Apache Spark 1.3 于前不久发布,MLlib 作为 Spark 负责机器学习 (ML) 的核心组件在 1.3 中添加了不少机器学习及数据挖掘的算法:研究主题分布的 latent Dirichlet allocation (LDA)、估计点集分布的高斯混合模型 (GMM)、提取频繁项集的 FP-growth、生成图聚类的 power iteration c...

2015-06-26 15:30:12 239

原创 黄洁:Intel Spark应用优化和实践经验

【编者按】干货满满的2015 OpenStack技术大会、2015 Spark技术峰会、2015 Container技术峰会以实力赢得所有观众的认可。在Spark峰会上,英特尔大数据技术中心研发经理黄洁就Spark的内存管理、IO提升和计算优化3个方面进行了详细讲解,以下为演讲概述。下为演讲概述我来自Intel大数据技术中心,整个技术中心在中国、美国、印度都有相应的开发人员,团队致力于大数据顶尖项...

2015-06-26 14:32:22 148

原创 还记得CloudStack创始人梁胜吗?他成立了Rancher Labs,重回市场

CloudStack创始人梁胜很传奇。之前的采访文章可见这里。最近,作为Rancher Labs CEO,梁胜和其工程总监Will Chan在首轮融资中获得了一千万美元。他们目前研究的重点是与Docker类似的软件容器化技术。对于软件容器化,你可以将之理解为将逆向工程之后云服务再重新放回云端。这些技术使用户可以在线下开发完善代码,然后完全没有后顾之忧地将程序发布在云端。它使开发人员在开发产品和服务...

2015-06-26 14:17:26 1494

原创 华为叶琪:论Spark Streaming的数据可靠性和一致性

眼下大数据领域最热门的词汇之一便是流计算了,其中最耀眼的项目无疑是来自Spark社区的Spark Streaming项目,其从一诞生就受到广泛关注并迅速发展,目前已有追赶并超越Storm的架势。对于流计算而言,毫无疑问最核心的特点是它的低时延能力,这主要是来自对数据不落磁盘就进行计算的内部机制,但这也带来了数据可靠性的问题,即有节点失效或者网络异常时,如何在节点间进行合适的协商来进行重传。更进一步...

2015-06-26 14:14:11 174

原创 滴滴打车CTO张博:下一阶段重点机器学习

滴滴打车的业务循环与技术支撑之间的关系非常正向。这是采访中最大的感受。 他们的技术架构大的变化有两次: 2012年滴滴打车刚成立时,流量很小,不需要架构,2台服务器就能解决所有问题。随着快速的发展,第一次发现性能瓶颈是在2014年初“补贴大战”时,我们的订单量一周之内涨了50倍。而当时的预估是增加10%。500%对10%,结果可想而知。网络、存储等故障不断,Webserver和MySQL也频出...

2015-06-26 14:02:21 342

原创 Spark 1.4:SparkR发布,钨丝计划锋芒初露

6月11日(美国时间),Spark 1.4版本正式发布,在Spark Core、Spark Streaming、Spark SQL(DataFrame)、Spark ML/MLlib等升级之外,新版本更加入了数据科学家们望眼欲穿的SparkR组件。长话短说,下面一起看Databricks Blog上关于SparkR的介绍,以及七牛技术总监陈超在ChinaScala微信号上对组件升级的总结。Spar...

2015-06-26 13:43:02 347

原创 沙箱中的间谍——可行的 JavaScript 高速缓存区攻击

关于译者:王龑(龙天),男,89年出生,毕业于南京大学软件学院,认证敏捷教练。曾在英特尔亚太研发中心从事私有云系统的开发工作。现在OneAPM担任前端工程师,平时喜欢玩主机游戏,看剧,养鱼等。 以下为正文偶然看到这篇文章美国发现新的浏览器攻击模式:可监控全球八成PC,非常惊讶便随手点开文章里的原文连接PDF,读完有种脑洞大开的感觉。论文知识点涉及计算机组成原理、虚拟化、性能分析、JavaScrip...

2015-06-26 11:57:33 245

原创 没有十全十美的技术!携程事件之后,技术专家们的建议与反思

携程宕机事件留给业内无数反思。官方最初说法是“部分服务器遭到不明攻击”,然而“紧急恢复”迟迟不成功,5月29日凌晨恢复服务后,携程称是“员工错误操作导致”。而网上流传的说法,说数据库数据和备份数据被物理删除者有之,说各个节点的业务代码被删除有之,不一而足。本文根据微信群的专家讨论和各公众号文章整理技术人应该得到的一些启示。 林帆,ThoughtWorks成都办公室CloudOps小组成员,De...

2015-06-26 10:55:33 179

原创 一个技术型投资人眼中的云计算

从概念普及、市场教育到价值创造,云计算的盛宴已如火如荼。在这一技术改变和重构系统架构的时代,资本将聚焦在新产生的生态系统中,即软件定义数据中心、运维管理、性能管理、ITOA、安全等方面。其中,能够实现特色企业信息化的创业企业更有机会。2015年4月是云计算行业非常热闹的月份,国际上成熟的云计算服务公司Amazon AWS和Microsoft Azure迎来了巨大利好:财报显示,亚马逊第一季度AWS...

2015-06-26 10:29:38 198

原创 卡巴斯基实验室被攻陷后的四个未解之谜

前几天,卡巴斯基实验室被Duqu 2.0攻陷的消息传出来后,尽管安全厂商对Duqu 2.0的代码和对攻击者采用的0Day攻击进行了深入分析,目前仍有许多未解之谜。先不说这事儿是谁干的,所有人的研究都仅限于把攻击来源确定为以色列,除此之外,还有很多方面我们还不知道:除了卡巴斯基实验室以外还有别的被黑的安全公司吗?Symantec,FireEye,Trend Micro都表示没有受到Duqu 2.0的...

2015-06-26 10:07:50 321

原创 云端应用提供商Frame获得一千万美元首轮融资

Frame所提供的云端应用服务使用户可以在浏览器中运行桌面应用如Adobe Photoshop和Excel。Frame宣布它已经完成了首轮融资,融资额为一千万美元。原文地址:http://www.csdn.net/article/2015-06-24/2825043...

2015-06-25 16:40:02 125

原创 埃里森:甲骨文将向亚马逊发起云价格战

甲骨文CTO Larry Ellison正在进行一项微软未能完成的任务:以低价打击亚马逊云服务。据悉,甲骨文云端平台 (Oracle Cloud Platform)将扩充服务内容,让开发者、IT 人员、商务人员及分析师们可更轻松地建立、扩充、并整合云端应用程序。此次甲骨文云端平台共新增 24 项新的云端服务,进化全球最全面的SaaS、PaaS 与 IaaS的云端产品组合。 不过在最新Gartne...

2015-06-25 16:37:09 154

原创 阿里云+EnterpriseDB(PostgreSQL数据库),解决Oracle客户上云的难题

6月25日,阿里云与关系型数据库管理系统厂商EnterpriseDB(以下简称“EDB”)公司达成合作,双方将共同打造新一代云数据库服务。EDB 数据库是基于开源PostgreSQL数据库开发,并向企业提供高性能、安全、管理等高级功能的先进数据库。其中产品PPAS(Postgres Plus Advanced Server)基于PostgreSQL上改进,具备对Oracle数据库的强兼容特性。基于...

2015-06-25 16:07:10 275

原创 华为诺亚加入竞争,看深度学习如何改变机器翻译

机器翻译,被认为是人工智能和自然语言处理的“圣杯”。上个世纪九十年代,机器翻译刚刚经历了一次变革,完成了从以规则为基础的方法到统计方法的变迁。而许多人相信我们正在经历第二次变革,这一次则是深度学习为主的方法。深度学习是否能够取代传统的统计方法,业界现在尚无定论。但是对于很多前沿的机器翻译研究人员来说,他们其实更关心的是这次革命如何发生以及他们能否成为这次变革中的英雄。华为在香港和深圳的诺亚方舟实验...

2015-06-25 14:09:06 232

原创 BI初创企业DataHero新增610万美元扩大核心技术和服务能力

在云上,BI领域极有可能也会出现如同Salesforce一样的SaaS企业。BI初创企业DataHero新增610万美元扩大核心技术和服务能力。其在云中为客户提供自助BI服务。DataHero的核心技术是数据分类引擎以及可实现对多云之间的无缝连接。通过拖放界面,用户可以从多云接口引入数据并进行分析,如Salesforce、HubSpot、Marketo、Google Analytics、Drop...

2015-05-21 10:28:43 183

原创 Zynga宣布关闭花费1亿美元构建的数据中心,仍回归AWS

对于一家游戏公司而言,Zynga的故事说明最符合企业利益发展的是研发新游戏,而不是在投入巨大,运维复杂的数据中心上占用太多精力。原文地址:http://www.datacenterknowledge.com/archives/2015/05/12/zynga-ditches-data-center-plans-aws/Casual and social gaming provider Zy...

2015-05-13 12:03:24 173

云计算大数据智能交通行业应用论坛—大数据时代城市交通的思考分析决策—杨东援

同济大学教授/中国城市交通规划学会副主任委员杨东援在题为《大数据时代城市交通的思考·分析·决策》的演讲中表示,对于城市交通来说,大数据不是一种时髦,而是技术推动、需求拉动和任务理念变革所共同呼唤的创新,而面对城市交通领域大数据技术应用问题,需要政府提高预见性,树立正确的价值理念,增强把脉诊断能力。

2015-06-23

云计算核心技术架构论坛(二)— 基于OpenStack的大型电商私有云之路—张小斌

张小斌介绍,从2014年5月开始,苏宁电商开始构建OpenStack私有云,把全国门店用OpenStack管理,经过了单控制节点的OpenStack生产集群部署到多数据中心、多Region、高可用生产集群部署的转变,现在有4个Regions,几百个计算节点,数千虚拟机(大部分KVM虚拟机+少部分Docker),包括内网和DMZ的多个可用域,多主机集合(集群),专用资源池,计算与存储密集型主机资源池等。

2015-06-23

云计算核心技术架构论坛(二)—基于云平台架构千万级移动应用—孙东风

孙东风从足记IT架构的变迁过程,介绍了足记如何基于云平台架构千万级移动应用。作为基于图片社交的移动互联网应用,足记注册用户将近3000W,DAU百万级别,日新增用户30~40%。在这个过程中,由于用户量爆增,导致服务器整个架构产生了很多的变化。

2015-06-23

云计算核心技术架构论坛(二)—容器如何帮助企业转型互联网架构—陈齐彦

陈齐彦认为,在互联网+的时代,企业软件发展到今天,已经到了一个临界点,也就是我们的“瀑布式”的软件开发模式存在着一定的瓶颈,已经无法满足企业快速响应用户需求和市场需求的特点。他表示,在容器出现之前,软件开发被团队少协作、运维难追溯、质量不可控、集成不持续、集群难伸缩、交付缺统一等痛点所困扰。容器的出现,使得软件开发过程有了新的理念,即:精益工程(方法论)、移动(应用)、Git Flow(协作)、微服务(架构)、云平台(平台)、容器(发布)。

2015-06-23

云计算核心技术架构论坛(一)—短视频和云存储—李道兵

七牛云存储首席架构师李道兵分享云存储如何解决短视频行业的痛点。当前短视频产品疯狂增长,主要痛点在于数据上传、数据存储、数据处理集群、数据分发等方面,但随着SSD的广泛应用,数据库的处理能力已经提升了2-3个数量级,架构瓶颈反而容易出在数据存储层面。

2015-06-23

云计算核心技术架构论坛(一)—云计算核心运维架构—丛磊

新浪云计算总负责人、SAE创始人丛磊认为,运维是云计算的核心,但中国企业云环境下运维一个平台非常困难,原因如下:用户不可预知性;业务不可预知性;服务多样性;资源共享性;早期夸大导致用户理解偏差。

2015-06-23

云计算平台构建与实践论坛(二)—基于hypervisor的Docker引擎—王旭

HYPER创始人&CTO王旭在演讲中表示,目前正处Docker热潮,Docker究竟是什么?他认为Docker=Container(LXC)+Layered Image(aufs),LXC和aufs两者都不是新东西,而结合后却产生了很大的效应,原因在于Docker的核心是以应用为中心,大大简化了整体发布流程,降低了运维难度。Docker对应用进行了封装,使操作系统回归本原 ,应用与操作系统完全解耦,是运维领域的一大革命。同时他表示虚拟机的问题在于没有做到“应用为中心”,而Hyper正是应用中心的虚拟化,之后,他还介绍了Hyper的本质,以及在已经有容器的情况下,为什么还要虚机,并将Hyper和容器进行了对比。

2015-06-23

云计算平台构建与实践论坛(二)—什么是云加速—黄惠攀

杭州又拍云CTO黄慧攀发表了题为《什么是云加速》的演讲。他首先介绍了到底什么是云加速,他认为其本质还是网络加速,之后,他还分享了UPYUN云计算的系统架构。虽然云加速会带来硬件成本、系统开发以及网络运营方面的代价,但是云加速所带来的价值也是显而易见的,他认为主要有两点,第一是服务标准化、透明化、公平;第二是服务质量一致,优化周期短,而作为新一代CDN加速服务的UPYUN重新定义了云加速。

2015-06-23

云计算平台构建与实践论坛(一)—基于OpenStack的混合云落地中国企业的挑战与对策—姜 林

KeyTone Cloud 刻通云创始人和首席执行官姜林发表了题为《基OpenStack 的混合云落地中国企业的挑战与对策》,首先他介绍了中国云计算市场的一个真实状态是什么,接着他分析了OpenStack在中国企业接收和使用的程度到底如何。最后他概要解说一下刻通云的背景、产品和定位。他的演讲重点分享了混合云落地在中国企业所遇到的一些挑战,混合云在中国企业进行部署的时候有复杂的环境和困难,我们该如何应对。

2015-06-23

云计算平台构建与实践论坛(一)—云计算:服务平台和国际前景—Norberto

来自都灵理工学院高级副讲师Norberto Patrignani发表了题为《云计算:服务平台和国际前景》的主题演讲,他表示云计算作为计算方式和信息处理历史上的典型模式转变,云计算对于公司、社会以及可能的政策制定者均产生了重要影响,包括可持续的环境的角度,以及以人为本的必要性的角度。最后他从IFIP的角度探讨了云计算技术的重要性。

2015-06-23

主会—基于密码技术的可控、可信、安全云—张岳公

6月5日的全体会议上,北京三未信安科技发展有限公司创始人兼CEO张岳公表示,基于云资源的共享集约化思想,云安全隐患主要来自:传统边界安全防护思想失效,封、堵、查、杀防不胜防,虚拟环境下认证授权、访问控制更加困难,云中管理员拥有更大的权限。针对这种现象,张岳公认为密码技术在云安全保障上更有优势:密码技术是有系统理论基础的技术;密码技术是主动的安全技术,在认证、授权、控制和数据保护上有优势;密码技术和数据的处理紧密结合,符合纵深保护策略。而在密码技术实现中,硬件无疑更有优势。

2015-06-23

主会—互联网+ 中国电信在行动!—黄礼莲

在中国云计算大会上午的主题演讲环节,中国电信股份有限公司云计算分公司副总经理黄礼莲发表题为《互联网+ 中国电信在行动》的演讲,她谈到, “互联网+”吹响了经济转型全面创新的号角,而数据中心和网络是互联网+基础。中国电信责无旁贷的要打造以数据中心为核心的新兴互联网,构建领先的云计算服务能力,全方位可定制化、更懂用户的云服务,构建多维度,全方位的大数据及分析能力,强化产业链合作和生态圈打造,合力推动产业互联网在四大领域的落地,打造可信赖的安全保障体系,打造可信赖的安全保证服务体系,助力互联网+,打造政府企业客户首先服务商。

2015-06-23

主会—360云计算安全与大数据应用2—谭晓生

在大会第二天上午的主题演讲环节,360副总裁谭晓生表示云计算面临着比传统IT技术更多的安全挑战,有来自云计算系统本身的安全性,有云计算组成的复杂性带来安全性验证的挑战,有黑色利益滋生出的威胁。那企业该如何防御来自方方面面的安全问题,谭晓生分享了360的云计算安全总体思路:(1)纵深防御提高攻击成本;(2)主动挖掘漏洞,奖励发现者,同时加强自我保护;(3)关注数据安全;(4)做好最坏打算,假设被功破。

2015-06-23

主会—Turning IT capabilities into Business Success—Mark Mueller-Eberstein

在大会的第三天,Adgetec公司CEO、畅销书作者Mark Mueller-Eberstein教授发表题为《云计算大数据推动业务创新发展》的演讲,介绍如何有效利用云计算、大数据和物联网技术带来的机会,使之在快速变化的世界能成为我们的“商业加速器”。Mark Mueller-Eberstein表示,基于近8年来对大约5万家企业的业务数据和IT投资数据的研究发现,IT的成熟度是企业成功的关键指标。他认为,未来两年内最为重要的技术趋势包括移动、物联网、超级应用、更加智慧的城市和环境以及3D打印等。我们可以根据心理社会发展模型,通过一种过渡理论,将情绪带来的消极影响转化为积极的因素来抓住这些技术趋势带来的新机会,更灵活地满足我们的客户需求。

2015-06-23

徐萌:中国移动大数据应用实践

在BDTC2013上,中国移动研究院专家、中国移动通信研究院云计算系统部大数据产品开发室技术经理徐萌发表了《中国移动大数据领域应用实践》主题演讲,她表示中移动移动互联网用户流量激增,手机数据化、宽带化趋势明显,亟需深挖大数据的价值。

2014-05-29

【金融存储】基于MGM的应用级业务连续性方案

一种基于MGM技术的应用级业务连续性方案,主要讲述的是,使得基于存储复制的技术MGM(Metro/Global Mirror)来替代原先市场上基于数据库日志复制技术。

2013-07-29

【存储】一种基于MGM技术的应用级业务连续性方案

金融行业,【存储】一种基于MGM技术的应用级业务连续性方案,主要讲述的是,使得基于存储复制的技术MGM(Metro/Global Mirror)来替代原先市场上基于数据库日志复制技术。

2013-07-16

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除