由于农场游戏风靡全球，最近highscalability.com网站采访了美版开心农场FarmVille的Luke Rajlich，他介绍了FarmVille的部分架构资料(1)。

所有模块都是一个可降级的服务

For any web application, high latency kills your app and highly variable latency eventually kills your app.

由于大型的网络应用需要依赖各种底层及内部服务，但是服务调用的高延迟是各种应用的最大问题，在竞争激烈的SNS app领域更是如此。解决此问题的方法是将所有的模块设计成一种可降级的服务，包括Memcache, Database, REST API等。将所有可能会发生大延迟的服务进行隔离。这可以通过控制调用超时时间来控制，另外还可以通过应用中的一些开关来关闭某些某些功能避免服务降级造成的影响。

上面这点我也有一些教训，曾碰到过由于依赖的一些模块阻塞造成服务不稳定的现象。

1. 某Socket Server使用了ThreadPool来处理所有核心业务。
2. 不少业务需要访问内网的一个远程的User Service(RPC)来获取用户信息。
3. User Service需要访问数据库。
4. 数据库有时候会变慢，一些大查询需要10秒以上才能完成。

结果4造成3很多调用很久才能执行完，3造成2的RPC调用阻塞，2造成1的ThreadPool堵塞，ThreadPool不断有新任务加入，但是老的任务迟迟不能完成。因此对于最终用户的表现是很多请求没有响应。部分用户认为是网络原因会手工重复提交请求，这样会造成状况并进一步恶化。上面的问题根本是没有意识到远程服务可能会超时或失败，把远程服务RPC调用当成一个本地调用来执行。

解决思路一：RPC增加Timeout
解决思路二：将RPC改成异步调用。

另一分布式大牛James Hamilton谈到(2)上面这种做法就是他论文Designing and Deploying Internet-Scale Services中的graceful degradation mode(优雅降级)。

FarmVille其他数据

• FarmVille基于LAMP架构，运行在EC2上。
• 读写比例是3:1。
• 使用开源工具来做运维监控，如nagios报警，munin监控，puppet配置。另外还开发了很多内部的程序来监控Facebook DB, Memcache等。
• 到Facebook接口的流量峰值达到3Gb/s，同时内部的cache还承担了1.5Gb/s。
• 另外可动态调整到Facebook与Cache之间的流量，Facebook接口变慢时，可以利用cache数据直接返回，终极目的是不管发生了那个环节的故障，能够让用户继续游戏。

小结

尽管FarmVille公布了上面一些技术资料，凭借上面这些资料无法全部了解FarmVille的架构。但是所有模块都是一个可降级服务的概念值得设计大规模应用的同行参考。

Resource

1. How FarmVille Scales to Harvest 75 Million Players a Month
2. Scaling FarmVille

• Facebook平台设计(一)
• Twitter“鲸鱼”故障技术剖析
• Facebook平台设计(二)
• 构建可扩展的微博架构(qcon beijing 2010演讲)
• Twitter架构图(cache篇)

一、Facebook Connect

Facebook开放平台之后围墙的问题依然存在，所有的用户所有的内容都在facebook网站的内部。facebook connect可以将facebook的用户，好友，feed和第三方网站作深度整合。将social graph扩大到所有的Web领域。到目前为止Facebook Connect的应用已经非常广泛，比如6月27号的Facebook Developer Garage Shanghai介绍了不少基于Facebook Connect的网站，如提供给外国人分享在上海活动图片的citymoments就非常不错。

二、Facebook新的设计

Mark介绍了很多Facebook新的设计, 比如应用可以不再局限在profile box里面，可以作为一个独立的profile tab, 相当一个独立的页面，应用开发商有更多独立的发挥空间。
另外facebook开放了翻译工具, facebook的翻译工具可以让全球的用户帮助将第三方开发的应用翻译成各种本地语言，并由用户投票每个条目最合适的翻译结果。这个本来用于facebook平台自身的国际化，此次开放给第三方开发者。

三、平台指导原则

f8 keynote后半部分由Benjamin Ling主讲(视频)，Ben也是一位神奇的人物。他本来在Google当产品总监，2007年跳槽到facebook做Director of Platform, 不过好像现在又跑回youtube去了。Ben是亚洲面孔，不知道是不是华人。他介绍了facebook平台的三大指导原则(Guide principle for great social app)

1. meaningful/有意义
a. social(graph), e.g. Green Patch
b. useful/有用，如Carpool
c. Expressive/表达, Graffiti, draw on friend profile
d. Engaging, 比如2008/5，用户投入在playfish上的时间有9亿分钟。

2. trustworthy/信任
safe/安全, trusted
secure – 平台越提供更多的privacy控制, 用户才会产生越多内容
respectful
transparent

3. well designed/良好的设计
clean, facebook平台确实很干净，值得陈赞, 因此平台要求应用也如此。
fast, use more, 访问速度越快，用户用得越多。
robust, 强壮

原则总结起来就一句话，”keep the ecosystem safe for user, fair for developers“, 平台设计的目标是对用户安全，对开发者公平。

• Facebook平台设计(一)
• 国内开放API平台实践的一些问题
• Facebook的feed格式设计
• Web 2.0技术沙龙设想
• 广州技术沙龙安排

一、设计开放API没有明显的标准可以遵循

二、缺少深度理解开放平台设计的产品及开发人员

三、没有生态圈或者短期不能形成生态圈

四、不清楚盈利模式

• Facebook平台设计(二)
• Facebook平台设计(一)
• Facebook的feed格式设计
• Twitter API最近的一些飞跃
• Web 2.0技术沙龙设想

为了理解Facebook平台，我们可以从Facebook相册说起。Facebook相册虽然只提供了最简单的特性，比如不能存高像素原图，没有编辑工具等，非常简单，但是Facebook的相册流量是是其他所有相册(Flickr, Picasa…)流量之和的2倍以上。为什么？这就是Mark介绍的Social Graph的力量。

1. 用户A上传图片，他所有好友都能看到。

2. 用户A继续在图片上tag people(标注图片上的好友)，这个tag的图片会出现在被tag好友B profile wall上，接着B的好友接着可以看到这个图片(受privacy设置控制，默认开启)。

特别是第2点它扩大了传播范围，在Facebook认为，第2点比1更为重要，Facebook平台的意义就是在这里。”we build the platform optimize for build apps for social graph”，开放平台的意义就是让扩展应用将social graph发扬光大。

“在Facebook开放平台以前，social network封闭式平台，但是今天这种情况结束了”

Facebook Platform的三大目标

1. Apps深度整合到Facebook平台(Deep Integration Into Facebook Website)

• app可以集成到用户profile
• app拥有独立的首页(canvas page)，首页完全是应用自己控制的，可放任何内容，包括广告。
• app可以以用户身份发布feed
• app可以发送消息，邀请，提醒等

一个应用只要被用户授权访问他的profile之后，应用就可以调用api获取到比如user/friend/application/privacy information，Facebook API接口也值得各种平台设计者学习。比如用户API接口

2. 病毒式的传播(Mass Distribution through the Social Graph)

传播的核心是feed体系(从09年的眼光来看，Twitter的feed可能比它做得更出色，甚至造成了威胁，并进一步引发它最近的homepage改版)。App可以发布3种不同类型的Feed

• application story，相当与应用添加提醒，比如A添加了某应用。
• simple story, feed里面表现为一行文本。
• full story, 详细，可以预览图片，视频等。

关于feed可参看另外一篇技术分析文章：Facebook的feed格式设计

App可以发送notification(提醒)，request(邀请)。Facebook还提供平台级别的工具如friend selector供app使用。Facebook还通过应用嵌入到Profile通过exposure让更多的用户来使用，比如用户看到好友Profile某个应用有趣也会立即add。

通过以上途径，促进应用的传播，促进信息的传播，促进人的社会化交流。

3. 商业机会(New Business Opportunity)

canvas page可以放任何广告，也可以进行电子商务进行销售，app可以获得所有收入。对于这两种方式，Facebook都是持支持态度。

视频：Mark Zuckerberg Keynote Speech f8 2007
http://www.facebook.com/video/video.php?v=28202665043&ref=mf

• Facebook平台设计(二)
• Facebook的feed格式设计
• Ideas for creating a friendfeed like feed aggregator system
• Web 2.0技术沙龙设想
• Twitter API最近的一些飞跃