Google的系统工程师(System Administrator)如何工作

由于Google的服务已经集群化，系统工程师并不大量接触硬件比如做安装服务器等事情。另外大部分工作也已经自动化了，比如架设LDAP, 负载均衡等。对照而言，国内目前大部分互联网公司SA仍然要做大量重复的底层工作，比如拿一个业务的数据库过大需要拆分为例，从系统管理员的角度，需要做以下事情

1. 同技术人员沟通目前业务特点，制定拆分方案并评估程序风险
2. 搭建测试环境，技术人员测试程序兼容性
3. 制定实施方案，保证业务的不停机平稳过渡
4. 深夜上线
5. 观察1-2天运行情况

我们需要思考上面工作是否是系统管理员以及技术人员有价值的工作。像Cassandra这样解决了分布式存储自动化扩展的问题是业内一种发展方向，尽管Cassandra的稳定性还需要改进）。

Google的系统工程师怎么做？
他们会通常1周值班，响应各种问题，比如完成上述场景中的扩容业务。然后有大约5周左右脱离一线工作来自由思考将这1周内碰到的工作进行自动化改进，将那些会反复碰到的问题通过脚本及监控程序完成，或者进一步反馈给技术人员改进应用程序来实现自动化。1:5只是个大约比例，时段可以灵活安排。比如也可以按天来安排，1天值班/7天改进。当改进完成之后，下次遇到相同的场景，自动化程序会完成大部分工作。如果在其他公司，SA通常忙碌在一线机械重复上述工作，但是在Google, 给系统工程师预留了相当多的时间让大家思考改进。

这就是Google的System Administrator自称SRE(Site Reliability Engineers)的原因。SRE会不断在优化所负责的系统，一些人关注运维层面，另外一些可能关注自动化工具。所有的SA都需要具备一定程序或脚本开发能力。

因此，当遇到Google的数据规模，自动化不是是否需要，而是如何更好实现的问题。

在Google其他一些令人兴奋的工作还包括

• 与开发技术人员是协同的关系。
• 只需关心技术，在技术领域也有职业生涯上升通道，不必转向技术管理岗位或其他。
• 同事都非常聪明，通常会觉得自己是最逊的那一个。
• 很多挑战，保守的估计领先行业2-10年，在这里工作就象给了你一个魔法水晶球，通过你的工作可以预见这个行业的未来。

受Google方式的启发，以下想到的一些可以研究的自动化方向

1. 程序部署

C/C++/Java/PHP/Python/Ruby/C# 等语言如何不停机自动发布
自动发布如何简洁的解决模块依赖性，比如1天需要同时更新10个有相互依赖的模块，并且不能停止服务
Web容器虚拟化，同一Web容器上可以部署多个业务，业务之间互相隔离，互不影响。
将新开发的服务程序运维自动化。一般的服务程序从数量上来说，10是一个分水岭，10台以下的服务通过人工重复操作方式来管理也问题不大，但是10台以上就需要自动化管理的方法。很多优秀的开源程序(比如Tokyo Cabinet, Redis等)在单机上表现优秀，但是大规模部署不能。大公司中很多技术人员经常提到很多开源软件不适合他们就有这方面原因。

2. 资源部署

MySQL
分布式文件存储
Cache，拿cache自动化管理举例
端口资源管理，不同业务使用不同端口，同一应用内不同的数据使用不同的端口，相关原因可以参看以前cache相关博文。
容量管理，不同的数据需要不同的容量
动态扩容，应用业务规模增长，比如从10G扩容到100G
Proxy功能，比如虚拟化端口映射，程序访问的是固定虚拟端口，这样不需要重启服务也可以随时扩充，应用也不需要一致性hash, proxy帮你做了。

3. 系统部署

OS
反向代理与负载均衡
本地分区容量，批量管理
程序发布与停止，比如一个程序一个点击部署到100台服务器
虚拟化，比物理服务器更容易部署，资源利用率更高，部署更可控

大部分国内互联网公司基础技术还是比较原始的，这跟行业过分强调“好产品是运营出来的”也有关系，基础研发通常不受重视，长此以往，只能在门槛低的领域打拼，与Google的技术差异就不止10年了。

(图：大型机GEORGE的纸带编程年代)

原文：http://timyang.net/linux/sysadmin-at-google/

或许这些文章您也喜欢：

• Google Wave邀请试用感受 (0)
• 体验：谷歌购物搜索 (0)
• IT江湖聚会：向google学销售 (0)
• 从Google和Baidu的调查统计看网页布局对用户体验的影响 (0)
• 推荐阅读：SEM团队研究系列—搜索引擎蜘蛛篇 (0)

Related Posts

• Google Wave邀请试用感受(0)
• 体验：谷歌购物搜索(0)
• IT江湖聚会：向google学销售(0)
• 从Google和Baidu的调查统计看网页布局对用户体验的影响 (0)
• 推荐阅读：SEM团队研究系列—搜索引擎蜘蛛篇(0)

Recent Comments

• 美国移民 : 呵呵真的不知道啊.
• 股票开户 : 大公司的工作

1.主界面
下面是主界面的截图，基本上Google Wave里面的所有内容都在这个界面上了：（所有面板都是可以最小化的）

2.导航面板

在主界面的左上方，有一个导航面板(Navigation Panel)，和GMail里的导航类似，包括Inbox，Active（活跃的wave），All，By Me，History，Spam，Settings，Trash以及保存的搜索结果和文件夹。注意，Google Wave文档说，这里的所有导航链接都是搜索结果页其实。

3.联系人面板

在导航面板下面，是联系人面板（Contacts Panel），在这个面板里，将会显示你的Google Wave联系人（据悉，这次公开的测试中，联系人将直接是你的Google Contact里的联系人）

a.点击自己的头像，然后点击Change Photo，就可以改头像了（这个头像就是你在GMail里的头像）

b.联系人可以在搜索（见截图）

c.点击好友的头像，可以查看他的信息，也可以直接ping他（ping就是发起私聊）

d.你可以修改你的状态，和GMail里的状态不同步

3.搜索面板

搜索面板很简单，就是完成各种搜索的。

I 搜索命令大致有下面几个：

a.tag，比如搜索tag:中文

b.by，比如搜索by:me

c.with，比如搜索with:public，with:areyoulookon@wavesandbox.com

d.in，比如搜索in:Google（就是搜索Google这个文件夹里的所有wave）

这些命令可以联合起来一起使用，比如搜索

google wave tag:中文 by:me with:public in:Google

II 在搜索结果中点击wave就是打开，ctrl+点击就是在新面板中打开（于是两个wave可以共存）。可以使用Move to将wave移到某个文件夹下。

III 按住shift，可以选择多个wave进行操作

4.Wave面板

Wave面板里面有很多操作，可以回复，重放Wave的对话（Playback），归档（Achieve）等等。Wave面板可以最大化，那样就可以获得几乎全屏的视野了。

二、Google Wave快捷键

下面是一些主要的快捷键，具体内容如果你有了wave账号后，在里面我建了帮助文档了。

三、Google Wave常见问题

哪里有Google Wave的文档？

这篇博客就算是中文的入门文档了吧。。Google Wave的开发人员说，他们也不晓得什么算文档，不过这里有Google Wave协议的文档：http://www.waveprotocol.org/whitepapers

哪里有Google Wave示例代码？

http://wave-samples-gallery.appspot.com/ （其实是几乎所有机器人和小工具的app gallery）

如何公开我的Wave？

先将public@a.gwave.com添加为好友，然后在Wave中将public@a.gwave.com添加为参与者，那么你的Wave就公开了。

如何和其他人分享一个wave？

三个方法。1.直接将这个wave拖到其他wave中，会自动生成一个链接；2.使用ctrl+l，粘帖这个wave的id，也可以创建一个链接（这种方法可以改链接的名字）；3.直接将你的wave公开

如何看所有公开的Wave？

Inbox中不能看到你没参与的公开Wave，想要看其他的公开Wave，可以搜索with:public，这就是看所有公开Wave的方法。

Google Wave支持的浏览器？

Chrome 3.0 Chromium 4.0.212.0，Firefox 3.0 ，IE + Google Chrome Frame ，Safari（以及Gears 0.5.21.0）

Google Wave申请的地址？

开发人员 http://ow.ly/rLNj 非开发人员 http://ow.ly/rLNo （建议都去填开发人员的那个）

如何在Google Wave中添加超链接？

三种方法：1.使用G+插件，将Google搜索中的链接添加到wave；2.使用ctrl+L添加链接（也可以点击link按钮）3.拖拽wave到另一个wave中

如何给一个wave添加tag?

只要点一下在wave左下角的tag旁边的+，然后输入tag，回车即可

如何汇报bug?

汇报bug的地址：http://code.google.com/p/google-wave-resources/issues/list

本文部分内容来自康爷收集整理的博文。

或许这些文章您也喜欢：

• Google的系统工程师(SA)如何工作 (2)
• 体验：谷歌购物搜索 (0)
• IT江湖聚会：向google学销售 (0)
• 从Google和Baidu的调查统计看网页布局对用户体验的影响 (0)
• 推荐阅读：SEM团队研究系列—搜索引擎蜘蛛篇 (0)

Related Posts

• Google的系统工程师(SA)如何工作(2)
• 体验：谷歌购物搜索(0)
• IT江湖聚会：向google学销售(0)
• 从Google和Baidu的调查统计看网页布局对用户体验的影响 (0)
• 推荐阅读：SEM团队研究系列—搜索引擎蜘蛛篇(0)

Recent Comments

• jdqingm : 呵呵，你真是不错，竟然直接收到google邀请，我是找别人要才有的邀请码，不过真的很简洁，简洁的我都...
• bet365 : yuanhua.mail@gmail.com 楼主好心给个邀请码
• 李谭伟 : 可以的，请直接发邮件联系我。
• tengzhao201 : tengzhao201@gmail.com谢谢！
• 艾玛 : 很有用的tips，不过前提是有得用.... 还有邀请么？ emmayang9@gmail.com

这个是英文的Products Search，从Froogle算的话已经有将近7个年头，依然beta中：

Products Search

在开始体验之前，我注意到中文最下面的这行文字，你可能认为这是谷歌对百度的一种讽刺，但实际上英文的Products Search最下面也有这句话。

google 版权声明

购物搜索体验开始：
先从网购比较热门的数码产品开始吧，正好最近我妹要高考打算送她个iPod touch 2代16GB，搜索一下iPod touch看看。结果不错，前6位是一/二代8/16/32GB的型号，后面是相关的保护套附件，尽管也出现了零散的iPod touch的搜索结果未跟前面，但结果已经很出色了。

搜索结果已经按照产品型号分类，点击进入就可以看到详细信息，包括各商家的价格、取自互联网上的评论、以及参数。

搜索结果

对比英文版可以发现中文的少了相关产品搜索，以及增加到购物车的功能。购物车没有好理解，毕竟Google Checkout未引入国内，但列出相关产品这个应该不困难吧？

相关搜索

对于评论，我很奇怪为什么iPod touch这么流行的一个产品里只看的到4条来自中关村在线和PCPOP的评论，而且似乎购物搜索只索引来自这些IT网站的评论，对卓越这种正牌购物网站的评论都熟视无睹。

另外对于产品的“参数”，都来自于中关村在线的数据，这个是否有待商榷？英文搜索的“参数”并未写来自哪里，应该也是直接取自某网站但出处并不唯一。相信将来可以将Google Square结合进来，这样就可以自动收集信息了。

让我匪夷所思的是为什么购物搜索里索引来自PCPOP和中关村在线的产品介绍页面？他们只是介绍+价格查询呀（尽管也有经销商推荐，但都是非网购的，需要打电话然后去实体店买的），这样的话就不应该叫购物搜索了，成了价格搜索。

比较价格

除数码产品以外，搜索其它产品基本都是直接列出商家的链接，而非按照产品类型进行归类，这点跟英文的Products Search一样，主要还是因为大量产品很难判断谁跟谁是同一类里的。

最后感觉谷歌购物搜索索引的产品数量还是有限，可能只包含了淘宝热门的产品，而不是说淘宝里有的东西都搜索的到，对于热门产品可以很方便的货比三家 （不仅可以对比淘宝里的商家，还可以拿淘宝跟卓越、当当、拍拍、易趣啥的对比）。但对于非热门产品，搜索结果很有限，甚至完全搜索不到。而如果你在 Google搜索里用“产品名称+购买”来搜索，可以找到大把的商家都有在线销售。

就初期索引的这些商家来说，都是比较靠谱的B2C商家，谷歌似乎很怕由于索引到一些不靠谱的商家（比如AdSense广告里出现的那些乱七八糟的商家）而引起纠纷，所以也导致索引量比较少。

除了B2C，当然也包括有类似淘宝这样的C2C商家，索引量也不多，比如iPod touch在淘宝只有15条搜索结果，不知是否只索引信用度比较高的了，但我也有发现易趣的索引里出现信用很低和最近才注册的商家，而信用高的老商家并未被索引。

最后提一句，微软与淘宝合作在IE8植入购物搜索，不过我看不出微软做这个对IE8的意义在哪里。

或许这些文章您也喜欢：

• IT江湖聚会：向google学销售 (0)
• 从Google和Baidu的调查统计看网页布局对用户体验的影响 (0)
• 推荐阅读：SEM团队研究系列—搜索引擎蜘蛛篇 (0)
• Google的系统工程师(SA)如何工作 (2)
• Google Wave邀请试用感受 (0)

Related Posts

• IT江湖聚会：向google学销售(0)
• 从Google和Baidu的调查统计看网页布局对用户体验的影响 (0)
• 推荐阅读：SEM团队研究系列—搜索引擎蜘蛛篇(0)
• Google的系统工程师(SA)如何工作(2)
• Google Wave邀请试用感受(0)

Recent Comments

• 网络技术指南 : 了解了 交换友情链接 网络技术指南 http://www.sinoxs.com 电脑故障问题...
• 卢松松 : 看来通过google搜素购物还是能搜索出真的东西
• 电话营销技巧 : 我喜欢这博客
• abc : 测试一下IE能否发表评论

李滨虹：去年的时候IT江湖到我们公司来过一次，那个时候我们刚开始作GOOGLE，这一年碰到很多风风雨雨。我最开始是搞军校专业的，后来一个偶然的机会进电信合资和重钢建了一个公司，94年的时候，重钢的老大在北京开人大，参观一个叫国际互联网的企业，便想利用互联网访问一下，没想到很快就把澳大利亚的照片整出来了，就想重钢上互联网，最开始重钢有个64K的专线，就在美国申请了一个帐号，长途费用，我当时在重钢电话科当科长，就由我来负责这个事情，我就从此开始接触互联网，打开的网站那个时候是雅虎和aol，那个时候我作第一个域名很贵，当时好像是8万块钱，六页网页一共花了60万，关于重钢介绍的网站。老大的想法是为上市作努力，当时美国芝加哥的一个会计事务所，后来改香港上市，95-96年在香港和欧美找承销商，他一直在欧美讲演，名片上有网址。
后来重大和重钢合资的一个公司，我当时就读了信息工程院，网上解放碑第一篇报道是陈泰涌写的，当时一共写了四篇报道，99年作出来的。当时网上解放碑很荒唐，前3个月只有一个网页。

结识google

丁然：后来是因为有怎样一个机缘接触GOOGLE的呢？
李滨虹：后来中企动力来 了，我们的客户一个二个就不见，ABS聚能公司的老大甘时勇劝我说这个市场很难作了，劝让我加大投入作大，但我当时没这么大的实力。我们当时想作网站的人多了，域名肯定也需要很多，于是就想方设法成为域名注册机构，正好我们有两个离职员工在中科院软件所上班，他们就了解到cnnic的第一手信息，后来在2003年拿到注册资格。

当时有个政策，电信营运商不能作域名注册。我们当时为了这个事注册了智佳科技，就是为了作CNNIC，10月份拿到资格，2004年初的时候我们第一次参加中国互联网大会，当时重庆人受到了很大的刺激，500万产值以下的住一个区，住得很烂，很多会也没有资格去参加。这个机会我们和全国各地的机构有接触，我们就会以很低的成本，接到这些公司流出的人才，我感觉其中一个好处就是可以吸纳他们的人才，中部，沿海的人才就想回重庆发展，这个时候我们公司就发展得比较快，我们自己培养的人往往是不得行的，作市场和作销售的人绝对是作过这行的，管理要用自己人。我们现在作GOOGLE的人，只有一个人是我们内部开始做GOOGLE的。

我们最开始做google的灰代，google起诉我们，说我们侵权。google说你把这个域名放了，以后GOOGLE进重庆的时候就找你，结果GOOGLE真的进中国的时候，我们就找他们，他们说找澳大利亚GOOGLE管，后来我们一直在找GOOGLE联系，所以后来Google到重庆来的时候，我们通过三个渠道找GOOGLE，感谢丁然介绍了当时的市场总监王怀南，还有一个是我们渝中区的副区长和李开复是朋友，当时李开复在中国推广正版软件的时候，副区长很支持微软的正版，李开复当时专门请吴区长去上海考察参观，一直有比较好的关系，后来吴区长帮我们牵了个线，这几个原因构成了我们。

google的销售是这样作的

李滨虹：因为GOOGLE的发展代理是根据CNNIC的指标，当时他们要找3家，选1家，找3个机构的人来打分。他们来重庆谈了三家，其他两家放弃了。因为作Google要规定第一年作GOOGLE要亏损100万。

当时中国区一个高管上午11点来考察，我们请他吃饭，他不吃，我们心想可能完了。

作了google后，我们很有心得，我们过去的销售人员是跑地，我们的销售人员要查资料，打电话，签单，拜访。而Google就不同，Google就觉得，查资料为什么要人去查呢？就给我们讲了一些方法，我们自己去编爬虫工具，去互联网上查数据库然后有一个数据专员，比如机械类，住房类，导到crm，然后有一个电话中心，就是把数据库调出来，一个一个打，电话是正还是错的，他们把这个数据叫V，电话如果打通了，有这个人，叫A客户，能够找到负责人，能够面见，如果客户同意，叫A+，那么A+，销售人员约好了去见面，就叫B，是第一次见面。

第一次见面过后，下午公司就有人来回访，今天我们有员工来拜访你，你对他的商务礼仪打分，客户就要打分，产品情况也要打分，产品说得清不清楚，这叫真正作销售，销售人员在后端。作这个工作的是在G一年以上的人在作这个工作。第三，你给他提的问题他回答没有，如果回答完了，就问他，当天拜访当天签单，我们公司是20%的比例。

第二次访问叫C客户，就是准备签合同了，要给客户作方案。签了单叫D客户，签完单叫E客户，这叫快乐销售法。这种的结果是什么，就是员工只作专门的那一项，拜访的只要把拜访技巧作好，每个人专人专事，每个环节都有一个全方位的回馈。

Google要求，每天3个客户，一个新客户，两个老客户。电话中心电话量是每个人每天40-60个就够了。

我们以前作中企模式是一个销售人员每天打100个电话，陌生客户要有30个，下班干啥子？下班就查资料。现在Google要求，下班过后6点半后员工必须离开公司，Google的观念是上班时间只要60%的的精力作上了，你强奸销售员的结果就是销售员成为短期销售员，他觉得太累了。重庆很多人企业教育人，每天9点下班才是好员工，现在我们已经改正这个观念了。

员工上班的工作量肯定有要求，销售人员的拜访只要3个左右，我们是希望员工能用心来作这个事情，就是员工队伍很稳定。同时员工的收入在上升，开始我们不相信这个模式。后来事实证明，Google的这个模式是正常的。

向麦当劳学习

我们作互联网公司，以前讲的是一个人什么都会，Google内部叫麦当劳工作法，现在移过来，宝洁接手过后把宝洁的管理接过来，就是麦当劳工作法，Google给他移过来。把每个人都变成了A人才，就是在某一个点上很专很尖。数据中心就是每天用服务器在网上挖数据，销售中心负责跑单，客户中心负责客户服务，行政就负责行政，Google开会的时候，也是这五个部门分开开，给老板开，国家的法律如何接受和执行，你们要如何资金链不要断，你们要作好两手准备，你们不作Google的时候你们要生存下来，我们希望你们G也能活得很好，我们是一个交往的机会。

google会反复给我们强调，联想当初如果不给宏基卖PC他们就不可能作PC，不给东芝代理投影就不可能自己作投影，不给HP卖笔记本，就不可能自己生产笔记本。他们希望我们这些代理商能成为中国的澳美广告公司，澳美广告有多牛？低于1千万的广告预算不接待，他就希望你们代理商能成为当地互联网公司的澳美公司，Google在中国不希望占领多少市场份额，他们只想占有高端客户群体。

旦丁记录

或许这些文章您也喜欢：

• IT江湖聚会:论坛营销 (0)
• 体验：谷歌购物搜索 (0)
• 从Google和Baidu的调查统计看网页布局对用户体验的影响 (0)
• 推荐阅读：SEM团队研究系列—搜索引擎蜘蛛篇 (0)
• Google的系统工程师(SA)如何工作 (2)
• Google Wave邀请试用感受 (0)
• IT江湖聚会:区域化兼容机商城 (0)

Related Posts

• IT江湖聚会:论坛营销(0)
• 体验：谷歌购物搜索(0)
• 从Google和Baidu的调查统计看网页布局对用户体验的影响 (0)
• 推荐阅读：SEM团队研究系列—搜索引擎蜘蛛篇(0)
• Google的系统工程师(SA)如何工作(2)
• Google Wave邀请试用感受(0)
• IT江湖聚会:区域化兼容机商城(0)

Recent Comments

从Google和Baidu的调查统计看网页布局对用户体验的影响

估计这张图,很多业内人事都见过,更多的说法是这是一张Google和百度的点击热图,主要调查了在搜索引擎中网站排名对网站流量的分配情况,同时不知道图片的出处.

我第二次见到这张图片的时候是今年Google公司来到重庆,李开复先生在西南大学巡讲的时候见到的.他在演讲中谈到了这张图片,真实的情况是Google公司做了一个西方国家和中国在使用网页的行为习惯的调查.图片中比较亮的地方就是眼睛关注的地方,越亮说明关注度越高.其中左边的图片是使用的百度的搜索页面,右边是Google的搜索页面,同时调查的范围也有区别,Baidu页面只是在中国大陆范围做的调查,Google页面是欧美国家做的调查.

在这里发现一个有趣的现象就是:
1: Baidu页面的亮点分布范围要广,而且着重于网页的头部和尾部,同时偏重于网页的左边.
2: Google页面的亮点分布范围相对比较少,而且相对比较集中,而且呈现比较规律的从上到下的浏览,其中包括了网页右边的广告部分.

从这几个结果来看,不难看出了几个问题:
1: 中国人在对待事物的关注度要比欧美国家更广.
2: 大家都知道在Baidu搜索的最下面有一个”相关搜索”,用户在关注到页面的最下面亮点很多的结果表明了中国用户有很主动和频率很高的对比意识.
3: 对待众多信息的筛选中国人比欧美国家要强(从Baidu页面和Google页面的广告位置亮点可以看出).

当Google公司得到了这个信息以后,就在Google搜索的下面增加了一行”相关搜索”这个功能,具李开复先生说,这个功能是当Google进入中国过后然才增加这个功能,然后在其他国家开始试用.
其实我们从Google公司这一个简单的调查结果和Google公司的一个简单的改动可以看出用户的访问习惯和关注点是多么的重要,我们需要做的就是尽量的满足用户的需求,提高用户的体验好感.
不知道今天简单的几句对网页布局的一些想法对你有帮助么?欢迎大家和我探讨.

或许这些文章您也喜欢：

• 体验：谷歌购物搜索 (0)
• IT江湖聚会：向google学销售 (0)
• 百度竞价与企业危机公关 (0)
• 推荐阅读：SEM团队研究系列—搜索引擎蜘蛛篇 (0)
• Google的系统工程师(SA)如何工作 (2)
• 用户是如何浏览你的网站的 (0)
• 交互设计师的专业度表现 (0)
• 更真实的理解用户 (0)
• Google Wave邀请试用感受 (0)
• IT江湖聚会:区域化兼容机商城 (0)

Related Posts

• 体验：谷歌购物搜索(0)
• IT江湖聚会：向google学销售(0)
• 百度竞价与企业危机公关(0)
• 推荐阅读：SEM团队研究系列—搜索引擎蜘蛛篇(0)
• Google的系统工程师(SA)如何工作(2)
• 用户是如何浏览你的网站的(0)
• 交互设计师的专业度表现(0)
• 更真实的理解用户(0)
• Google Wave邀请试用感受(0)
• IT江湖聚会:区域化兼容机商城(0)

Recent Comments

• 健康卡网 : 不错的文章，推荐一下
• 变压器 : 呵呵 太模糊 没看清楚

首先先谈下GOOGLE蜘蛛起源：

当GOOGLE搜索引擎刚建立之初,就拥有这一个非常强大的的服务器,

其每天放出大量的蜘蛛,我们称为1号蜘蛛,其抓取量抓取速度是非常的快,

对其整个互联网每天进行信息进行的采集,可见服务器的速度是多少快，其实最主要的是后期GOOGLE

将服务器延伸到了很多城市,所以现在你能发现GOOGLE的运算速率是超前的快.

服务器将采集的信息分类,整理.到庞大的数据库.

其中有个数据库都是用来存网站域名的.

域名只要被搜索引擎索引到,将自动存入此数据库.

此数据库是1号蜘蛛的核心.

其内部分为10个PR各等级的小数据库，虽说小数据库，但也是大的可怕-。=！

10个等级的数据库 其周期也不同

基本上以一个PR=4的网站来讲 1号蜘蛛爬行的概率也在7天一次.

所以基本你也会发现收录有大的幅度也是在7天内的某一天 .

细心的站长会发现其实有时候7天还是蛮准的,但只针对PR=4

越是PR高其周期越是短,越是PR低周期越长,

当然说到这很多站长有这样的疑惑.会觉得蜘蛛有时天天收录他的站

这里对其收录的也就是接下来要说的2号蜘蛛

2号蜘蛛往往是在1号蜘蛛爬行过程中放出去的，

主要针对于被1号蜘蛛爬过的网站的外部链接.

PS既然都说是2号蜘蛛 肯定其抓取力度要比1号小很多.

★ 当然不只是有2号,还有3号蜘蛛

所谓3号也就 A站1号蜘蛛爬行到B站,B站的2号蜘蛛爬行到C站

目前GOOGLE为了限制其无限的循环对于蜘蛛只分为这三个等级.并对其等级的抓取率有个很明确的标准

而且2号与3号蜘蛛有个抓取特点 基本以时间的先后顺序进行抓取

★ 比方讲：

A网站被1号蜘蛛爬行后的一篇文章最后时间为 2008-6-1

那当A网站被从别的网站过来的2号蜘蛛给爬行,首先有可能会对其收录的是

最近发表的几篇文章如： 2008-5-31等 2008-5-30等文章将会进行第2次,第3次的访问

之后再爬行2008-6-1以后的信息.如果你网站没有任何更新,它将对其近一个月内的更改内容进行2次爬行.

如果外部来的2号与3号蜘蛛越多,同一篇文章有可能会被爬上好几次.

以下为GOOGLE提供的官方数据<秘>

★ 1号蜘蛛

基本抓取率在5%~10%

基于PR=0 没有任何导入链接与提交时 有可能被抓取的周期在6个月~12个月不等

基于PR=1 没有任何导入链接与提交时 有可能每次被抓取的周期在4个月~8个月不等

基于PR=2 没有任何导入链接与提交时 有可能被抓取的周期在2个月~4个月不等

基于PR=3 没有任何导入链接与提交时 有可能被抓取的周期在1个月~2个月不等

基于PR=4 没有任何导入链接与提交时 有可能被抓区的周期在1周~1个月不等

当然没有任何导入链接的网站无法做到PR=4

最高也只有PR=3

上述此数据只是GOOGLE官方提供的一个基数.

意思也就是1号蜘蛛主动爬取你网站的周期数.

对于2号或者3号蛛爬取你的网站,也就根据你的导入链接而定.

所以你会发现你的网站有时天天在被更新.

★ 2号蜘蛛

基本抓取率是2.5%~5%<基于1号蜘蛛爬行后的数据记录进行再次采集,对于最后次被采集日期的前后进行再次访问>

★ 3号蜘蛛

基本抓取率为1.25%~2.5%<基于1号蜘蛛与2号蜘蛛爬行后的数据记录进行再次采集,对于最后次被采集日期的前后进行再次访问>

GOOGLE目前蜘蛛的等级分为三种

当然蜘蛛有不同的蜘蛛

这里单单只的是网页蜘蛛.因为我只对这个感兴趣.

或许这些文章您也喜欢：

• 体验：谷歌购物搜索 (0)
• IT江湖聚会：向google学销售 (0)
• 从Google和Baidu的调查统计看网页布局对用户体验的影响 (0)
• Google的系统工程师(SA)如何工作 (2)
• Google Wave邀请试用感受 (0)
• 淘宝站内搜索引擎排名以及优化方法 (0)

Related Posts

• 体验：谷歌购物搜索(0)
• IT江湖聚会：向google学销售(0)
• 从Google和Baidu的调查统计看网页布局对用户体验的影响 (0)
• Google的系统工程师(SA)如何工作(2)
• Google Wave邀请试用感受(0)
• 淘宝站内搜索引擎排名以及优化方法(0)

Recent Comments