科技行者

行者学院 转型私董会 科技行者专题报道 网红大战科技行者

知识库

知识库 安全导航

至顶网服务器频道虚拟化/云计算许立剑:分布式计算Mesos框架和应用

许立剑:分布式计算Mesos框架和应用

  • 扫一扫
    分享文章到微信

  • 扫一扫
    关注官方公众号
    至顶头条

昨晚,C3沙龙携手ZDNet至顶网走进爱奇艺在鸿成拓展大厦内顺利进行。视频网站已深深地走入了每个人的生活,但从事互联网行业的人会更清楚这一点,如果没有相应的技术支撑,即使有再好的想法和再好的内容,也很难变现为可行的平台和商业模式。

作者:张锐 来源:ZDNetserver频道【原创】 2014年3月25日

关键字: C3沙龙走进爱奇艺 爱奇艺 Mesos C3沙龙 分布式计算

  • 评论
  • 分享微博
  • 分享邮件

ZDNet至顶网服务器频道 03月24日 新闻消息(文/张锐):昨晚,C3沙龙携手ZDNet至顶网走进爱奇艺在鸿成拓展大厦内顺利进行。并邀请了爱奇艺高级工程师许立剑分享分布式计算Mesos框架和应用,中科院软件所工程师李明宇分享关于视频编码与存储的设想,与大家共同探讨视频网站背后的技术架构发展。

视频网站已经深深地走入了每个人的生活,并成为一种重要的内容传播平台,但是从事互联网行业的人会更清楚这一点,如果没有相应的技术支撑,即使有再好的想法和再好的内容,也很难变现为可行的平台和商业模式,对于中国互联网视频行业而言,无论是三网融合的契机,还是移动互联网的未来,对相关技术的重视都是发展的基础。

刘文峰:分布式计算Mesos框架和应用爱奇艺高级工程师许立剑

爱奇艺高级工程师许立剑在活动中对Mesos进行了介绍,Mesos2009年诞生于伯克利AMPlab,用于构建和运行其他分布式系统的分布式系统,可以毫不费力得支撑3万台服务器。Mesos广泛应用于Twitter、eBay、Vimeo等公司,支持Hadoop、Spark、Storm、Jenkins、Marathon、Chronos等多种框架,同时支持自行构建架构,例如视频转码。

Mesos在爱奇艺中的使用是从2013年7月开始初步调研,至今已经上线Hadoop、Spark等框架,并自行开发上线了分布式视频转码框架。在上海,北京,重庆三地近200台服务器,让很多地方看到了Mesos的可利用性,完成视频转码任务达到1000万以上,Storm、Marathon、Chronos、分布式爬虫等框架测试并陆续上线中。

在本次讲解中,许立剑拿OpenStack与Mesos进行了对比,突出了Mesos的优点。

刘文峰:分布式计算Mesos框架和应用

从图中可以很清楚的看到Mesos的优势很明显,用更少的物理机,无需管理虚拟机,就可以很轻松的完成视频转码和计算任务。

同时在活动上许立剑还阐述了静态资源规划的弊端,难以共享数据,难以弹性地分配资源,难以充分利用资源,难以处理服务器失败。从他的角度为大家很好的概述了以上的情况。

ZDNet至顶网携手C3沙龙走进爱奇艺专题:

http://server.zdnet.com.cn/special/C3_Club_intoQIY

    • 评论
    • 分享微博
    • 分享邮件
    邮件订阅

    如果您非常迫切的想了解IT领域最新产品与技术信息,那么订阅至顶网技术邮件将是您的最佳途径之一。

    重磅专题
    往期文章
    最新文章