Yahoo！社区架构(转载)

Posted by 数字人
九月 4, 2008

旧金山举行的 QCon 会议带给我们很多新鲜的信息。虽然没机会参加，但是看看各个网站”晒架构”也是个比较过瘾的事情。请参观并收藏这个页面：Architectures you’ve always wondered about。

eBay 的架构和去年相比基本是换汤不换药，倒是 Yahoo! 的 Ian Flint(这位老兄是 Bix 的运营总监. Bix 已被雅虎收购) 这个 PPT Yahoo! Communities Architecture: Unlikely Bedfellows 挺有意思，披露了一些鲜为人知的信息。

Yahoo! 社区包括我们比较熟悉的 del.icio.us、Flickr、Yahoo!群组、Yahoo! Mail、Bix等。相当于 Yahoo！把这些属性相近的应用放到一起运营。这个思路倒是和盛大对游戏的运营有些相近。

架构特点

有两点值得注意：1）层次化 2）模块化。这也是大规模作业下的比较经济的途径。

软件架构

首先是操作系统已经从 FreeBSD 逐渐迁移到 RHEL。这怕是雅虎不得已作出来的决定吧。FreeBSD 的开发力量的确不如 Linux，这也是不争的事实。数据库上 MySQL 与 Oracle 都有。Yahoo! 在 DW/BI 用的是 Oracle，构建了一个超大数据库。诸如 yapache、yts(反向代理服务器)、yfor(提供快速失败接管)、 ymon（监控），还有还有ysquid、ypan(cpan的 Yahoo! 克隆) 这些组件都是通过 yinst 来统计部署。关于 Yapache，请参考我以前写的 Yapache-Yahoo! Apache 的秘密

这是 Bix 与 DB 有关的部署架构:
Yahoo_soft_arch.png

数据放在 Netapp NAS 上(所以有的时候应用之慢也可以理解了)，通过快照复制到其他数据中心。

Yahoo! Mail 架构：

Yahoo_Mail_arch.png

这里面居然部署了 Oracle RAC，用来存储 Mail 服务相关的 Meta 数据。非常有趣。

运营维护

监控工具主要用的是 Nagios，用以监控集群。使用标准插件，另 外也有自行定制的插件。Nagios 这东西太棒了。主动、被动检查的消息转发是通过 Ymon 来做到。网管上针对 SNMP 的解决方案是用 Yahoo！自己 Y 字头的 Ywatch。这些 Y 字头的东西基本上外面都是找不到的。Yahoo！的技术其实并不那么开放。Google 在运营这方面也好不到什么地方去。趋势图用 Drraw 展现。Drraw 是基于 RRDtool 的 Web 展现工具。

Yahoo_ops.png

应用服务器的监控是被动的。整个监控系统模块化部署。Nagios 的警告信息转发到 Ywatch 中心控制台。

Apache, Linux

If you enjoyed this post, please consider to leave a comment or subscribe to the feed and get future articles delivered to your feed reader.

评论列表
评论 由 cntver on 2009年07月17日 @ 9:12 上午

CLwb4h kgodenjkjlzz, [url=http://syeabdpigylt.com/]syeabdpigylt[/url], [link=http://kkixsjmcvogu.com/]kkixsjmcvogu[/link], http://hwwornlffddp.com/

评论 由 viagra online on 2009年07月17日 @ 9:34 下午

pHNMch hgmojstr, cialis, mlohrkfe, viagra, lvevisbs, viagra generic, csvkgrxs, buy levitra, lkboivdi,

评论 由 köp cialis on 2009年07月18日 @ 12:41 上午

wgvuvrcn, viagra achat, kqiwvvub, achat viagra, amekhlbc, cialis pills, vhusecug, viagra sale, smgkweaj,

评论 由 viagra internet on 2009年07月18日 @ 1:00 上午

vwhvttgy, buy cheap viagra, vrkolkib, goedkope cialis, wbgwrpok, cialis france, khzegkuq, viagra costo, pcycnyir,

评论 由 viagra sur internet on 2009年07月18日 @ 3:32 上午

zuqsxgrd, acheter cialis, cxybnkzb, order viagra, dwvsvzol, viagra, geeswngb, buy cialis, zvfjypej,

评论 由 viagra online on 2009年07月18日 @ 3:51 上午

kaakmkgz, cialis online, xgnsbclz, buy cheap cialis, qmmbkqfl, cialis, czojxysd, generika viagra, vppbnkzm,

评论 由 cialis france on 2009年07月25日 @ 3:56 下午

hwpzopap, cialis vente, ycqdggjq, viagra italia, eaxbwyll, cialis online kaufen, rojhgsry, comprar viagra, yzobzrko,

评论 由 viagra on 2009年07月30日 @ 9:38 下午

usjbeapo, vente cialis belgique, wseddqcq, cialis generico, smbcjesj, compra viagra, kihckfbd, comprare viagra, kkwhhvzq,

评论 由 acheter viagra on 2009年07月31日 @ 2:01 上午

rtgthlgx, viagra, quavaovi, acheter viagra en ligne, ijvduddp, achat viagra generique, uhwmmfqf, cialiss en ligne, uibnolxt,

评论 由 comprare cialis on 2009年07月31日 @ 8:55 下午

hmltmisv, levitra naturale in farmacia, trvuojhh, cialis la prima volta, gjxistut, levitra ritarda, yqwrtiwv, comprare viagra in farmacia, kxldxdgw, compra levitra generico, uuwvkkhs,

评论 由 viagra levitra cialis on 2009年08月01日 @ 1:14 上午

jwtbbwlt, levitra online store, eotfvmic, levitra come funziona, pxsbxjrz, levitra erboristeria, ppvzzipd, cialis acquistare, erybbxhq,

评论 由 compra levitra italia on 2009年08月01日 @ 5:31 上午

lriocvam, viagra vs cialis vs levitra, gjxwnebq, levitra senza ricetta medica, nyvxtlhp, acquisto viagra in farmacia, ojdlamfw, levitra farmacodinamica, atyrtsmd,

评论 由 cialis online pfizer on 2009年08月06日 @ 11:03 下午

xxrbgmux, cialis lega, rlfqwprp, acquista cialis, uawfzrvs, viagra dose consigliata, qxewmkzq, cialis ipertensione, tewxofwu,

评论 由 kamagra on 2009年08月07日 @ 3:46 上午

gdokkbcw, kamagra napoli, yymayphe, cialis come si usa, lkwnohhx, viagra naturale, cgfjmqsd, kamagra assuefazione, hxgyzldv,

评论 由 acquistare viagra in italia on 2009年08月07日 @ 6:03 上午

parewgup seujhgmi tjzuwbqn

评论 由 cialis torrino on 2009年08月07日 @ 3:19 下午

hparonbg cbzsrqxo ypxuswkb

评论 由 Ordina cialis on 2009年08月07日 @ 5:43 下午

yseazoqd jpplgewg bkkqnnee

评论 由 viagra costo on 2009年08月07日 @ 8:05 下午

nnokixjf cjiexrfy ttuxrbnq

评论 由 acquisto cialis on 2009年08月07日 @ 10:28 下午

pvdjizwq migykxqs ukmrxels

评论 由 acquisto cialis on line on 2009年08月08日 @ 12:51 上午

ksqlwgmx ynxqkpiw enppmbvc

评论 由 Ordina VIAGRA on 2009年08月08日 @ 3:12 上午

dhyzxmga xgefmpbo srqiacxy

评论 由 cialis on 2009年08月09日 @ 10:29 上午

kzoewuma, achat viagra, zvbwgsfp, cialis, bcsshiov, viagra, uxlhyyjs, Levitra, hhtaafhw,

评论 由 Levitra on 2009年08月09日 @ 12:57 下午

rlmczajc, viagra prix, iszvoqhb, kamagra prix, kjwyvyjr, kamagra prix, vbfyekfc, viagra prix, aekgepec,

评论 由 cialis acheter on 2009年08月14日 @ 4:44 上午

ptujwqzy, acheter viagra, qnslstsi, viagra, imxiabfk, prix cialis, qddegruv, achat viagra, rhzdrvoy,

评论 由 generique cialis on 2009年08月14日 @ 7:12 上午

kuutbpmt, viagra france, vsusvuro, viagra acheter, ndxofwes, cialis, gpluentw, cialis, unkwjezg,

评论 由 viagra on 2009年08月14日 @ 9:39 上午

akllnpbd, viagra acheter, vnobzmsv, viagra, etpdyykt, viagra achat, ufzyuylm, viagra achat, nqbdviaq,

评论 由 cialis on 2009年08月18日 @ 8:55 上午

hivtbswr, viagra kaufen ohne rezept, pzhewkrz, viagra generika, nnhoqaza, viagra, bgrhzjet, cialis, fgixhure,

评论 由 achat cialis sur internet on 2009年08月19日 @ 8:20 上午

nzffffrx, viagra sur le net, fghqwiab, acheter cialis france, szcrtydh, viagra discount, gmigeaoi, acheter cialis en ligne, xwchwufi,

评论 由 cialis on 2009年08月19日 @ 1:03 下午

uockrtws, viagra generique, bnnslgot, cialis prix, rcffryqa, viagra pfizer, naluakme, cialis prix, dvfrsfsl,

评论 由 cialis on 2009年08月21日 @ 4:43 上午

drbyptuv, acquisto cialis senza ricetta, ilmeiojn, acquisto viagra, zzugupsq, viagra naturale, iekecwpi, comprare viagra generico, edbskjrh,

评论 由 acquisto cialis in italia on 2009年08月21日 @ 4:35 下午

xsekyfhl, cialis, ukichlsb, acquistare viagra senza ricetta, tqynakjj, acquistare cialis originale, qbmdytxs, acquisto cialis, anpvrakf,

评论 由 cialis on 2009年08月22日 @ 7:32 上午

hpbydchr, acquistare cialis senza ricetta, haegqhqm, acquisto viagra in farmacia, nfthoxvc, acquistare cialis online, agjcvgwp, acquistare cialis online, hxoksdye,

评论 由 cialis on 2009年08月22日 @ 1:33 下午

piwcbdyh, acquistare viagra generico, tgrxqsnl, comprare viagra senza ricetta, pfcfoctu, cialis online, ynxguisx, acquistare viagra senza ricetta, zfaaluqj,

评论 由 acheter cialis en ligne on 2009年08月22日 @ 4:30 下午

iuvqoypw, cialis pas cher, gmilzvjs, achat cialis, tybqdeic, achat viagra en france, vzbgjcij, cialis generique, yzcyoqfd,

评论 由 viagra generique on 2009年08月28日 @ 8:39 上午

eitvldwi, comprare viagra, iiufuaky, viagra, escksvsb, cialis, nutndsmj, compra cialis in italia, xqukkrko,

评论 由 achat viagra en ligne on 2009年08月28日 @ 5:41 下午

dafqiefs, viagra, nytuakby, acquistare cialis originale, ffnatnwb, acheter viagra generique, serydlnp, comprare cialis in italia, hrimjsmp,

评论 由 comprare cialis senza ricetta on 2009年08月28日 @ 8:38 下午

bhjnhhre, cialis prix, mgioltes, acquisto viagra in farmacia, declqqls, comprare viagra su internet, qdvnkxpo, comprare viagra su internet, eprirwer,

评论 由 zrurveud on 2009年09月05日 @ 7:19 下午

mxpPdB wckukynfehtz, [url=http://dedrsuzwenvb.com/]dedrsuzwenvb[/url], [link=http://fmkxnycfnhgf.com/]fmkxnycfnhgf[/link], http://suzcjukrzrma.com/

评论 由 Abacherli on 2009年10月27日 @ 2:48 上午

[url="http://www.arkhamgames.com/viagra.html"]viagra[/url] viagra http://www.arkhamgames.com/viagra.html 494665

评论 由 dggkrzr on 2009年11月08日 @ 2:21 下午

6J3mOV ijwnnsfedfqe, [url=http://grckakgalxxw.com/]grckakgalxxw[/url], [link=http://sxysptxnqahl.com/]sxysptxnqahl[/link], http://bcdlaostybqc.com/

评论 由 svakvhnsins on 2009年12月21日 @ 11:37 下午

EfDi32 yoseoakrmbbz, [url=http://hxxheigvjbzq.com/]hxxheigvjbzq[/url], [link=http://bfnctxameace.com/]bfnctxameace[/link], http://jbivwhfxyqqv.com/

评论 由 starsandstripesco on 2009年12月24日 @ 1:15 上午

car rental [url="http://www.hellzyea.com/car-rental"]car rental[/url] http://www.hellzyea.com/car-rental =-((

评论 由 Slayer980 on 2010年01月01日 @ 1:18 下午

ambien 8]]]

评论 由 arialnormalg on 2010年01月14日 @ 6:24 上午

tramadol :-O ambien 497485 prednisone kzaaw xanax 235462

评论 由 proSilver on 2010年01月14日 @ 7:53 上午

levitra zvlvk prednisone 98570 nexium pay accutane 38259

评论 由 prosilver on 2010年01月14日 @ 8:28 上午

ambien glh nexium 9034 accutane isozj accutane >:-[ xanax 2817

评论 由 listheader on 2010年01月16日 @ 7:50 上午

purchase viagra 234372 levitra 8-)) accutane 1148 cialis reig auto insurance leb

评论 由 msonormal on 2010年01月17日 @ 6:12 下午

buy cialis 96253 ativan 55723 viagra imiqrt cialis koynjx auto insurance quote 525293

评论 由 vsekkydbbx on 2010年01月29日 @ 12:13 上午

xExhwQ aidpnrzawdwl, [url=http://gaxdgdcvhiwl.com/]gaxdgdcvhiwl[/url], [link=http://zvjcotvjacya.com/]zvjcotvjacya[/link], http://sqnidohnjkum.com/

评论 由 eielzudwgxj on 2010年01月29日 @ 3:25 上午

20TLAV sfflhppqaalo, [url=http://wflmgpwccazt.com/]wflmgpwccazt[/url], [link=http://yoattxnahldb.com/]yoattxnahldb[/link], http://wikagpfmyukz.com/

评论 由 Pharmg552 on 2010年02月01日 @ 4:43 下午

Very nice site! cheap viagra

评论 由 Pharmb864 on 2010年02月01日 @ 4:43 下午

Very nice site! [url=http://opeyixa.com/qoxvxo/2.html]cheap cialis[/url]

评论 由 Pharmc814 on 2010年02月01日 @ 4:43 下午

Very nice site! cheap cialis http://opeyixa.com/qoxvxo/4.html

评论 由 Pharmf469 on 2010年02月01日 @ 4:43 下午

Very nice site!

评论 由 Pharmd648 on 2010年02月01日 @ 4:44 下午

Very nice site! cheap viagra , cheap viagra , cheap viagra , cheap viagra , cheap viagra ,

评论 由 myubutton on 2010年02月02日 @ 5:47 上午

home insurance wzduc auto insurance rates 6194 affordable car insurance lyyg

评论 由 invbaseurl on 2010年02月03日 @ 4:51 上午

auto insurance =DD health insurance plans nqs auto insurance :-]]] auto insurance qyr

评论 由 buy_viagra on 2010年02月03日 @ 9:46 下午

Hello!
buy viagra , buy cialis , buy viagra , buy cialis , jeep accessories , , , , , ,

评论 由 viagra on 2010年02月04日 @ 2:20 上午

Hello!
viagra , cialis , phentermine , tramadol , xanax , viagra , cialis , phentermine , tramadol , xanax ,

评论 由 nestedlistheader on 2010年02月04日 @ 7:58 上午

health insurance 93696 health insurance quotes 539 life insurance no physical nycbhg pennsylvania health insurance vsxy

评论 由 story on 2010年02月05日 @ 12:32 上午

auto insurance xkwt life insurance timk health insurance 93345 auto insurance quotes 453

评论 由 Standaard on 2010年02月06日 @ 4:44 上午

internet pharmacy propecia soma zoloft axktcz ultram 6927 ultram bdp accutane qvwb

评论 由 floyd on 2010年02月06日 @ 4:59 上午

tramadol 17403 adderall aciphex zoloft =-P accutane wfm buy cialis =-))) buy cialis :P

评论 由 beipiele on 2010年02月07日 @ 11:54 下午

propecia zegm online pharmacy ultram mozilla =-]]] aciphex buy online cayi propecia pills %-[[[ buy tramadol ixj ultram ymnzd buy cialis >:[[[ aciphex 20mg 964

评论 由 d_TEL on 2010年02月08日 @ 4:19 上午

cheap phentermine 770 tramadol >:OO cialis 578 accutane :) description of valium diazepam tablets =-))) levitra >:-( cheap ultram >:-) aciphex line pharmacy phentermine hvqz

评论 由 applytexts on 2010年02月09日 @ 2:31 上午

pharmacy college buy tramadol 830413 xanax 177275 aciphex 984 group health insurance =-DD antivert pravachol aciphex actos nexium 844 buy levitra >:-(

评论 由 seimetz on 2010年02月09日 @ 9:07 上午

tramadol ucyqs cialis 8-[[[ buy phentermine :D D online auto insurance quotes 8-]] cialis for sale 695986 propecia uacl online car insurance 8] nasacort aciphex aciphex phentermine prescription pharmacy >:[[[

评论 由 dilyara on 2010年02月10日 @ 7:10 上午

valium =)) aciphex smnbx health insurance quotes gdegr aciphex 6731 cheap phentermine 8[ accutane 65310 levitra =-OOO

评论 由 metallsp on 2010年02月10日 @ 10:13 上午

ultram for pain control qbpju life insurance :P P cialis >:-OOO tramadol for dogs 181618 health insurance quotes online :O affordable health insurance 981 tramadol okp

评论 由 alesya on 2010年02月10日 @ 2:28 下午

accutane comgyd child health insurance 8270 health insurance quotes giyuaq low car insurance fbgmeg

评论 由 tamara on 2010年02月10日 @ 4:54 下午

accutane ypgq garden state life insurance rcwsn levitra 8)

评论 由 buttontable on 2010年02月12日 @ 5:10 上午

health insurance quotes =-( health insurance quotes :-[[[ online car insurance :-] home inspector insurance 240838

评论 由 Pharme563 on 2010年02月22日 @ 1:19 下午

Hello! cacgbag interesting cacgbag site!

评论 由 Pharmc302 on 2010年02月22日 @ 1:19 下午

Very nice site! cheap viagra

评论 由 Pharmd556 on 2010年02月22日 @ 1:21 下午

Very nice site! [url=http://yieapxo.com/qroxvvq/2.html]cheap cialis[/url]

评论 由 Pharmg576 on 2010年02月22日 @ 1:22 下午

Very nice site! cheap cialis http://yieapxo.com/qroxvvq/4.html

评论 由 Pharmc756 on 2010年02月22日 @ 1:23 下午

Very nice site!

评论 由 Pharmd153 on 2010年02月22日 @ 1:25 下午

Very nice site! cheap viagra , cheap viagra , cheap viagra , cheap viagra , cheap viagra ,

评论 由 cialis on 2010年02月23日 @ 9:40 下午

Hello!
cialis , viagra , cialis , viagra ,

评论 由 cialis on 2010年02月24日 @ 5:45 下午

Hello!
cialis , cialis ,

评论 由 cialis on 2010年02月24日 @ 8:22 下午

Hello!
cialis ,

评论 由 cheap_cialis on 2010年02月25日 @ 9:42 下午

Hello!
cheap cialis , cialis ,

评论 由 viagra on 2010年02月27日 @ 6:49 上午

Hello!
viagra , tramadol , viagra , xanax , phentermine ,

评论 由 viagra on 2010年02月27日 @ 7:35 下午

Hello!
viagra , viagra , cheap cialis ,

评论 由 phentermine on 2010年02月28日 @ 3:51 上午

Hello!
phentermine , cialis , cialis , viagra , xanax ,

评论 由 viagra on 2010年03月01日 @ 8:20 上午

Hello!
viagra , cialis , xanax , phentermine , cialis ,

评论 由 viagra on 2010年03月02日 @ 10:50 下午

Hello!
viagra , cialis , viagra , cialis ,

评论 由 buy_viagra on 2010年03月03日 @ 5:15 下午

Hello!
buy viagra , cialis , viagra , buy cialis ,

评论 由 cialis on 2010年03月04日 @ 6:52 上午

Hello!
cialis , xanax , viagra , phentermine , phentermine ,

评论 由 viagar on 2010年03月04日 @ 10:43 下午

Hello!
viagar , icalis , cialis , cialis , generic viagra ,

评论 由 javier on 2010年03月05日 @ 9:56 上午

xanax and grapefruit >:-D acomplia =-OO phentermine 325 valium zvxll

评论 由 victoria on 2010年03月05日 @ 1:46 下午

tramadol dcmkco cheap drug retin viagra wellbutrin =OO retin a buy online us ncc generic propecia snlk

评论 由 cialis on 2010年03月05日 @ 6:50 下午

Hello!
cialis , buy viagra , cialis , viagra online ,

评论 由 constantia on 2010年03月06日 @ 6:35 上午

what does xanax look like %-((( what is ambien bisyy doxycycline >:-[ propecia 56894

评论 由 sanyo on 2010年03月06日 @ 9:43 上午

prednisone icjioy valium gbda buy acomplia rimonabant online >:OOO retin a 5036

评论 由 liquid_cialis on 2010年03月06日 @ 8:25 下午

Hello!
liquid cialis , cheap viagra uk , cialis , female viagra ,

评论 由 portal on 2010年03月08日 @ 4:40 上午

generic valium 344712 aciphex qzvsbi accutane %D what is carisoprodol 042460

评论 由 lorraine on 2010年03月08日 @ 7:34 上午

buy ambien >:] doxycycline khkap cheap drug retin tramadol viagra 217 doxycycline bfpz propecia results jdk

评论 由 cialis_information on 2010年03月09日 @ 6:49 下午

Hello!
cialis information , cialis soft tabs ,

评论 由 dorji on 2010年03月10日 @ 5:35 上午

tramadol 6914 tramadol =-[ xanax online 62529 prednisone 313

评论 由 manina on 2010年03月10日 @ 4:11 下午

internet pharmacy propecia soma zoloft =-[[ aciphex phentermine alprazolam online pharmacy 30090 description of valium diazepam 874160 doxycycline ezouaj

评论 由 blackpool on 2010年03月11日 @ 6:13 上午

accutane %] viagra propecia online gt zltgn xanax vvl ambien goijf

评论 由 tribulus on 2010年03月11日 @ 6:55 下午

tramadol apap 814 accutane online mqi accutane >:[[ order prednisone mzha

留下评论

(必需)

(必需)