ZDNet>服务器频道>虚拟化/云计算>许立剑:分布式计算Mesos框架和应用

邮件订阅订阅:

许立剑:分布式计算Mesos框架和应用

摘要:昨晚,C3沙龙携手ZDNet至顶网走进爱奇艺在鸿成拓展大厦内顺利进行。视频网站已深深地走入了每个人的生活,但从事互联网行业的人会更清楚这一点,如果没有相应的技术支撑,即使有再好的想法和再好的内容,也很难变现为可行的平台和商业模式。

作者:来源:ZDNetserver频道 【原创】 | 2014年03月25日 09:30:55

关键字:C3沙龙走进爱奇艺 爱奇艺 Mesos C3沙龙 分布式计算

ZDNet至顶网服务器频道 03月24日 新闻消息(文/张锐):昨晚,C3沙龙携手ZDNet至顶网走进爱奇艺在鸿成拓展大厦内顺利进行。并邀请了爱奇艺高级工程师许立剑分享分布式计算Mesos框架和应用,中科院软件所工程师李明宇分享关于视频编码与存储的设想,与大家共同探讨视频网站背后的技术架构发展。

视频网站已经深深地走入了每个人的生活,并成为一种重要的内容传播平台,但是从事互联网行业的人会更清楚这一点,如果没有相应的技术支撑,即使有再好的想法和再好的内容,也很难变现为可行的平台和商业模式,对于中国互联网视频行业而言,无论是三网融合的契机,还是移动互联网的未来,对相关技术的重视都是发展的基础。

刘文峰:分布式计算Mesos框架和应用爱奇艺高级工程师许立剑

爱奇艺高级工程师许立剑在活动中对Mesos进行了介绍,Mesos2009年诞生于伯克利AMPlab,用于构建和运行其他分布式系统的分布式系统,可以毫不费力得支撑3万台服务器。Mesos广泛应用于Twitter、eBay、Vimeo等公司,支持Hadoop、Spark、Storm、Jenkins、Marathon、Chronos等多种框架,同时支持自行构建架构,例如视频转码。

Mesos在爱奇艺中的使用是从2013年7月开始初步调研,至今已经上线Hadoop、Spark等框架,并自行开发上线了分布式视频转码框架。在上海,北京,重庆三地近200台服务器,让很多地方看到了Mesos的可利用性,完成视频转码任务达到1000万以上,Storm、Marathon、Chronos、分布式爬虫等框架测试并陆续上线中。

在本次讲解中,许立剑拿OpenStack与Mesos进行了对比,突出了Mesos的优点。

刘文峰:分布式计算Mesos框架和应用

从图中可以很清楚的看到Mesos的优势很明显,用更少的物理机,无需管理虚拟机,就可以很轻松的完成视频转码和计算任务。

同时在活动上许立剑还阐述了静态资源规划的弊端,难以共享数据,难以弹性地分配资源,难以充分利用资源,难以处理服务器失败。从他的角度为大家很好的概述了以上的情况。

ZDNet至顶网携手C3沙龙走进爱奇艺专题:

http://server.zdnet.com.cn/special/C3_Club_intoQIY


扫一扫,每天学点MBA

扫一扫,玩转营销

ZDNet周刊订阅

重磅专题

重点要闻

  • 热点文章
  • 热评文章
  • 厂商动态

热门产品

推荐词条