• 首页
  • 关于

我自然

每月存档:7月 2010

Eclipse4.0的新特性(可下载)

在 2010年7月31日 上公布 作者为 yankay

千呼万唤始出来,Eclipse4.0提前版发布了。我等这个版本已经一年多了。新的版本的性能很好,真的很好。但是没有我所期待的Web运行模式。界面也不如原先优雅了。

感觉Eclipse4.0对于Eclipse3.6。在功能上相当于Eclipse3.6对于Eclipse3.5,在Eclipse个上变化并不大。毕竟Eclipse的功能主要靠插件提供,而Eclipse只是给这些功能提供一个展现的舞台。

对 于Eclipse平台本身,将Web技术引入到Eclipse平台内部。Eclipse开发者可以使用Css,Javascript等Web技术来开发插 件。新的RCP可以是一个富客户端开发工具,可以将应用程序编译成Flex,Dojo(js),以及本地版本运行。不过RCP在eclipse3.5已经出现了。

接下来介绍一些Eclipse4.0的新特性。

Eclipse4.0项目主页 http://www.eclipse.org/eclipse4/

新版工作台

新版的Eeclipse更新了用户界面。此更新的主要目标是采取一个更现代的视觉风格,减少混乱,并使用空白空间代替原先的分割线来区分不同的界面元素。重新设计了选项卡和工作台,让我们能更专注于工作区域。

全局搜索框

和Gmail相似,工具栏上有了全局搜索框。提供了一个“快速通道”。这个功能很亮。

更灵活的布局

您现在可以将功能面板和编辑器叠在一起了。例如,在一些情况下,您可以将功能面板和编辑器叠在一起,以提供更多的空间。

您不仅可以混合操作面板和编辑器,你还可以在编辑器区域分割一块给操作面板,然后最大化编辑器区域。整个工作空间都显示编辑器。

Eclipse开发者相关的功能

  • 通用事件总线
  • 用户界面模块化
  • 简洁的模型结构
  • 使用CSS来控制样式
  • 更多

虽然这些内容对于使用Eclipse的人用处不大,但是对于平台本身影响还是很大的。

文章分类 未分类 | 发表评论 |

Facebook背后的软件

在 2010年7月14日 上公布 作者为 yankay

Facebook

Facebook的数据规模使得很多传统的解决方案根本不适用,或者无法分解来处理。保持一个拥有5亿用户的系统一直稳定可靠的运行,并不是一件很容易的事情。这篇文章介绍了一下Facebook使用的软件。

Facebook的扩展性挑战

在我们讨论细节之前,这里有一些Facebook已经做的软件规模:

  • Facebook有570000000000每月页面浏览量 (据Google Ad Planner)。
  • Facebook的照片量比其他所有图片网站加起来还多(包括Flickr等网站)。
  • 每个月超过30亿张照片被上传。
  • Facebook的系统服务每秒处理120万张照片 。 这不包括CDN服务中处理的照片。
  • 每月超过25亿条的内容 (状态更新,评论等)被共享。
  • Facebook有超过30,000服务器 (这个数字是去年一年!)

Facebook扩展所依赖的软件

Facebook是在某些程度上说仍然是LAMP的站点,但它比普通的LAMP大得多,以纳入其他元素和很多服务,并修改现行的做法。

例如:

  • Facebook的仍使用PHP,但它已经为它建立一个编译器,以便它可以分为本地代码打开了Web服务器,从而提高性能。
  • Facebook的使用Linux,但他特别为网络吞吐量做了优化。
  • Facebook的使用MySQL,但主要是作为一个Key-value的持久性存储,Jions和服务器逻辑操作在Web服务器上操作。因为在那里更容易执行。

还有是自编写的系统,如Haystack,一个高度可扩展的对象存储,用来存储Facebook的照片。还有Scribe,一个日志系统,可以运行在Facebook的巨大规模上的日志系统。

OK。现在 我们介绍一下全球最大的社会网络网站的所使用的软件吧。

Memcached


Memcached

memcached的是现在互联网最有名的软件之一了。 这是一个分布式内存缓存系统,用来作为Web服务器和MySQL服务器之间的缓存层(因为数据库访问比较慢)。 多年以来,Facebook已经提出了一些优化Memcached和一些周边软件的办法。如压缩network stack。

Facebook的每时每刻都有数10TB的数据缓存在Memcached的数千台服务器上。 它可能是世界上最大的Memcached的集群了。

HipHop for PHP

HipHop for PHP

PHP作为一种脚本语言,和本地程序相比是运行缓慢的。 HipHop可以将PHP转换成C + +代码,然后再进行编译,可以获得更好的性能。 因为Facebook严重依赖PHP,这使得其可以让Web服务器运行的更有效率。

一个工程师小团队在Facebook(一开始只有三人)花了18个月时间开发HipHop,现在已经是可用状态。

Haystack

Haystack是Facebook的高性能照片存储/检索系统(严格来说,是一个对象存储,因此它并不一定要存储照片)。 它有许多工作要做;有超过200亿张上传的照片,并且每一个被保存在四个不同的分辨率,因此有超过800亿张照片。

它不仅是对能够处理的上亿的照片,运行表现也是至关重要的。 正如我们前面提到的,Facebook的服务约120万张照片每秒 ,这个数字不包括CDN上的。 这是一个惊人的数字。

BigPipe

BigPipe是Facebook开发的一个动态的网页服务系统。 Facebook使用它来按section(称为“pagelets”)处理每个网页,以获取最佳性能。

例如,在聊天窗口是分开的,新闻Feed也是分开的,等等。 这些pagelets可以在一个页面表现的时候同时使用,这是该页面表现的时候获取进来的。即使某些工程的一部分关闭或中端,用户也可以获得一部分网页。

Cassandra

Cassandra

Cassandra是一个不会单点失败的分布式存储系统。 这是为NoSQL运动的一个重要组成部分,并已公开的源代码(它甚至成为一个Apache项目)。Facebook在搜索功能中使用它。

除了Facebook,还有一些人也用它,例如Digg的。 不过最近Twitter放弃了cassandra。

Scribe

Scribe是一个灵活的日志系统,Facebook在他的内部大量使用。 它的能够处理在Facebook的大规模日志记录,并自动处理新的日志记录类别,Facebook有数百个日志类别(categories)。

Hadoop and Hive

Hadoop

Hadoop的是一个开源的map-reduce实现,使得它可以在进行大数据上进行运算。 Facebook的使用这个进行数据分析(而我们都知道,Facebook已经大量的数据)。 Hive就是发源于Facebook,使得对于Hadoop使用的SQL查询成为可能,从而是其更容易对非程序员使用。

Hadoop和Hive是开源的(Apache项目),有为数众多的追随者,例如雅虎和Twitter。

Thrift

Facebook使用的几种不同的语言和不同的services。 PHP是最终用于前端,Erlang是用于聊天,Java和C ++也使用于多种场所,也许还有其他语言。Thrift是一个内部开发的跨语言的框架,联系语言,使他们可以在一起合作,从而使他们之间可以交互。 这使得Facebook可以更容易为继续保持其跨语言的发展。

Facebook已经让Thrift开源。更多的语言支持已被添加到Thrift。

Varnish

Varnish

Varnish是一个HTTP加速器,可以作为一个负载平衡器,并缓存的内容,然后可以以闪电般的速度送达。

Facebook使用的arnish来处理照片和个人资料图片,处理每天数十亿的要求。 和其他的东西一样,Varnish是开源的。

保持Facebook 顺畅运行的其他东西。

我们已经提到的软件,组成了Facebook的系统,并帮助运行在大规模上。 但是,处理这么大的系统是一个复杂的任务,因此我们将列出一些其他的东西,他们保持了Facebook的平稳运行。

渐进发布和暗启动

Facebook有一个他们所谓的守门人制度(Gatekeeper),允许他们可以给不同的用户运行两套不同的系统。 这让Facebook渐进的发布新的功能,A / B测试,只为Facebook雇员发布等的某些特性。

Gatekeeper也可以让Facebook实现“暗启动”,这是在用户使用一些功能之前,就激活某些功能(因为用户没有察觉,所以称之为暗启动)。 这将作为一个现实世界的压力测试,在正式启动前,帮助揭露一些功能障碍和其他问题。 暗启动通常是在正式启动前两个星期。

Profiling的直播系统

Facebook的仔细监控其系统,有趣的是它也负责监察每一个PHP函数在生产环境的性能。 检测各个PHP的环境的配置运行情况。使用开源工具,XHProf 。

渐进的利用关闭功能来提升性能

如果Facebook运行时出现性能问题,有一个办法,就是逐步禁用不太重要的功能,以增强Facebook的大量核心功能表现。

我们没有提及的事情

我们没有提到硬件相关的事情,但这也是提高可伸缩性的重要一环。例如,就像其他大型站点,Facebook利用CDN来处理静态内容。Facebook还有一个the huge data center,可以帮助他扩展更多的服务。

Facebook的开源情结

不仅是Facebook使用(和帮助),如Linux,Memcached的,MySQL和Hadoop的开源软件,以及许多其他情况下,也贡献许多了其内部开发的软件。

Facebook亦开源了Tornado,一个高性能的网络服务器框架,由FriendFeed团队开发。

关于开放源码软件清单,可以在Facebook’s Open Source page.找到。

Data sources:

http://royal.pingdom.com/2010/06/18/the-software-behind-facebook/

Various presentations by Facebook engineers, as well as the always informativeFacebook engineering blog.

文章分类 未分类 | 发表评论 |

来到上海了

在 2010年7月14日 上公布 作者为 yankay

来到上海了。

挤上了人山人海的地铁,兴致勃勃的向浦东进发。大海的地铁确实很拥挤,要想跳钢管是不可能了。作为地铁的克星,果然不负众望,地铁行至一半,死机不动了,许久方徐行。

找了个地方安顿了下来。准备Galaxydb那个项目。去看看单位。采购生活资料,事情还是蛮多的。值得一提的是,我们下定决心,决定斥巨资购买一把菜刀的时候发现找不到能买到菜刀的地方了。于是我打听到因为世博会,上海已经停止出售和运输刀具。于是我们只有吃冷冻食物了。

其实我们还可以吃刀削面。


刀削面的传说

据传当蒙古鞑靼侵占中原后,为防止汉人起义造反,将家家户户的金属器具全部没收,并规定每十户人家只能用一把厨刀,切菜做饭时轮流使用。

一天中午,有位老汉想取刀做面,结果没能接到,气馁地回家,在回家的路上看到一块薄铁皮,就顺手捡起来揣在怀里。 回家后,老伴责怪老汉,老汉取出铁皮,老伴说:“你就会胡侃”,老汉灵机一动,就用这个切吧!他把揉好的面团放在一块木板上用左手端好,右手操起铁片就削了起来,薄薄的面片飞入锅中后不住地翻滚,很快就煮熟了。 老汉把面捞入碗中浇上卤汁,边吃边说:“好得很,好得很,以后再也不用排队取厨刀了,就用这铁片片削吧。” 一传十,十传百,成了刀削面。

住的地方

床铺

同居对象的博客:http://www.qqlemon.com/

注:我们都是男性,性取向主流。

工作兼游戏台

文章分类 未分类 | 发表评论 |

近期文章

  • 听说 Docker 被 kubenetes 抛弃了,怎么办?containerd
  • 公告 – 博客重开了
  • CloudFoundry v2面面谈,内赠MicroCFv2福利
  • Docker能够运行任何应用的“PaaS”云
  • Scala Tour – 精选

近期评论

  • Gao发表在《公告 – 博客重开了》
  • Impala:新一代开源大数据分析引擎 – FIXBBS发表在《Google Dremel 原理 – 如何能3秒分析1PB》
  • 何建兵发表在《NoSQL数据库笔谈v0.2》
  • Pony发表在《Docker能够运行任何应用的“PaaS”云》
  • Pony发表在《Docker能够运行任何应用的“PaaS”云》

归档

  • 2021年6月
  • 2021年3月
  • 2014年2月
  • 2013年9月
  • 2013年5月
  • 2013年1月
  • 2012年11月
  • 2012年9月
  • 2012年8月
  • 2012年3月
  • 2012年2月
  • 2012年1月
  • 2011年11月
  • 2011年10月
  • 2011年9月
  • 2010年10月
  • 2010年8月
  • 2010年7月
  • 2010年6月
  • 2010年5月
  • 2010年4月
  • 2010年3月
  • 2010年2月
  • 2010年1月
  • 2009年10月
  • 2009年9月
  • 2009年8月
  • 2009年7月
  • 2009年6月
  • 2008年10月
  • 2008年8月
  • 2008年7月
  • 2008年6月

分类

  • 家庭生活
  • 未分类
  • 每日心得
  • 软件技术

友情链接

  • DaoCloud Enterprise
  • DaoCloud 云原生一体机

CyberChimps WordPress Themes

沪ICP备2021008917号-1 © 颜开