科技行者

行者学院 转型私董会 科技行者专题报道 网红大战科技行者

知识库

知识库 安全导航

至顶网服务器频道高性能计算梦工厂数据中心:云和虚拟化不到20%

梦工厂数据中心:云和虚拟化不到20%

  • 扫一扫
    分享文章到微信

  • 扫一扫
    关注官方公众号
    至顶头条

看过梦工厂各个工作室所生产的电脑特效画面,你可能会以为他们的数据中心应该是云数据中心、全虚拟化的、扁平架构的,而且带固态存储(SSD)的。如果你真这么想,那就错了一大半。

来源:腾讯科技 2012年10月22日

关键字: 虚拟化 云计算 数据中心

  • 评论
  • 分享微博
  • 分享邮件

看过梦工厂各个工作室所生产的电脑特效画面,你可能会以为他们的数据中心应该是云数据中心、全虚拟化的、扁平架构的,而且带固态存储(SSD)的。如果你真这么想,那就错了一大半。

梦工厂动画部基础设施运营全球总监Mike Cutler称,梦工厂的服务器只有约15%虚拟化了,所生产的电脑动画渲染工作中只有约20%是利用云服务完成的,而且梦工厂目前还没有发现对SSD有什么需求。

梦工厂数据中心的存储容量为3.8PB,拥有4000台服务器,25000颗CPU。工作区还为员工提供免费食品和医疗保健服务。

虽然梦工厂的服务器没有使用大量的hypervisor技术,但在最先进的刀片服务器、存储阵列和网络上却投入了巨资,以确保艺术家们能够满意和高效率地工作。

梦工厂负责企业营销的Kate Swanborg称,“我们这里投入最大的就是技术,因为我们必须保证艺术家和工程师们能够心情愉快地在这里工作。他们每天都泡在这里,如果你不能提供最先进的技术,他们就会另谋高就。”

梦工厂在美国有两间工作室,在班加罗尔有一间,每年要生产3部电影,而每部电影的制作周期差不多需要3年。梦工厂差不多任何时间段都会有8到10部影片在制作过程中。而据Swanborg说,随着每部影片的上映,观众们对电脑特效画面的质量要求也水涨船高。

在制作一部3D影片时,所投入的计算能力和存储容量是十分庞大的。大约需要300多台高端工作站同时工作。一部影片的渲染工作需要同时使用17000个处理器核心,超过6000万小时。

每个动画人物需要多达2000个控制点或功能才能被动画师完全操控。每个人物需要花6个月时间来制作。“每部影片中的每个像素都是可控的,”Swanborg说。而一部成片中的像素超过了2500亿。

每秒24帧,每部影片12万帧,仅一部影片就会产生5亿个数据文件,需要占用200TB的存储量。“这个容量和生产一架波音飞机是一样的,”Swanborg说。

每天在工作室的服务器上要执行大约40万个处理进程。梦工厂采用红帽的Enterprise MRG来调度这些进程和进程消息。“大多数进程是并行执行的,”Cutler说。

参与影片生产实际制作过程的人员不包括开发人员,梦工厂有150位软件工程师保障各种应用的平滑运行,梦工厂雷德伍德市工作室的研发总监Jeff Wike说。Wike说,梦工厂的软件工程师有大约20%的人都有博士学位,他本人就是放弃了在航天工业的一份“很有前途的工作”来到这里的。

“每3个月就会有一部电影发表,每部电影都是完全不同的。所以这里的所有事情都是新鲜的,”Wike说。

在过去3年里,梦工厂的软件工程师们实现了软件的并行化,充分发挥了英特尔最新的16核Sandy Bridge处理器的优势。

“我们自己不会去开发所有的软件,但大部分是我们自己开发的。能买的我们就买,必须自己开发的就自己开发,”Wike说。“我们的优势就是有一位非常非常喜欢技术、但却根本不懂技术的CEO在推着我们走。这很了不起,他不知道什么是困难的,什么是不可能的。他只说我们应该有工具可以做这样的事情。然后我们就抓耳挠腮地说,‘好吧,我们应该可以做到。’”

一部成片的工作量十分惊人,成本当然也令人乍舌。以《怪物史莱克4》为例,这部90分钟的动画片,制作成本约为1.3亿美元,然后还需要额外的1.3亿美元和1.5亿美元用于发行和市场营销。

虽然最终的成片是电脑制作的,但是创造一部动画片依然需要人工绘制。梦工厂的每部影片都有故事板,每个场景都需要艺术家手工绘制。每部影片需要大约7万到10万个故事板。

梦工厂的大部分IT基础设施统一采用了惠普的BladeSystem c-Class服务器刀片,约有3000块,每块刀片都预配置好了计算、存储和网络架构。梦工厂还使用了惠普的NAS和3Par存储阵列。唯一的例外是使用了少量的HDS的存储阵列和NetApp的NAS。

梦工厂工作室的服务器机柜都配备了通风“烟囱”,可以把热空气向上排出室外。“冷热气流从不混合,”Cutler说。“所以也不需要冷却系统。”

一排惠普刀片服务器机柜。服务器散发的热气排进一个封闭的烟囱里,因此不再需要额外的空调设备。

2009年,在影片《怪兽大战外星人》中首次使用了3D成像技术,电脑制作一直在不断地推升着梦工厂的技术需求。3D电影需要额外增加100TB存储量,因为很多画面都得加倍。

年底的假期档,米高梅公司发行的《霍比特人》将是首部采用每秒48帧技术制作的电影。

“如果观众认可这种体验,那将会对存储和渲染带来巨大的影响,”Wike说。

    • 评论
    • 分享微博
    • 分享邮件
    邮件订阅

    如果您非常迫切的想了解IT领域最新产品与技术信息,那么订阅至顶网技术邮件将是您的最佳途径之一。

    重磅专题
    往期文章
    最新文章