Google ç½'站管理å'˜å·¥å...·åˆšåˆšå'布了一个 Labs 功能，å...¶ä¸­æœ‰ä¸ªåŠŸèƒ½å«åš Fetch as Googlebot ï¼Œä½ å¯ä»¥åœ¨è¿™é‡Œæ¨¡ä»¿googlebotï¼ŒæŸ¥çœ‹ä½ è‡ªå·±çš„ç½'é¡µä»£ç ã€‚ä¸è¿‡è¿™ä¸ªåŠŸèƒ½æ˜¯å¿...须通过管理å'˜éªŒè¯çš„ç½'站才能查看，没有ç½'站管理权限就没机会了。

而在这个 Labs 功能下面还有一个查看恶意软件的细节功能，自动侦测。

Fetch as Googlebot

åœ¨è¿™ä¸ªåŠŸèƒ½ä¸‹ï¼Œä½ å¯ä»¥æŸ¥çœ‹ä»»ä½•ä½ è‡ªå·±ç«™ç‚¹é¡µé¢ä»£ç ï¼Œé€šè¿‡ Google 机器人的视è§'，好好的审视自己的站点。æ"ä½œè¿‡ç¨‹å¾ˆç®€å•ï¼Œåªè¦ç‚¹å‡» Labs æ‰"开功能，点击 Fetch 按é'®æŸ¥çœ‹ï¼Œç­‰å¾...googleæœºå™¨äººçš„å¤„ç†ï¼Œå‡ ç§'é'ŸåŽï¼Œå†åˆ·æ-°ä¸€ä¸‹å°±å¯ä»¥çœ‹åˆ°ç»"果了。

有朋友奇怪了，这å'Œæˆ'们平æ-¶çœ‹ç½'é¡µçš„æºä»£ç æœ‰ä»€ä¹ˆä¸åŒå'¢ï¼Ÿ 为什么要麻烦蜘蛛再来一次，而ä¸"å¿...须在ç½'站管理å'˜å·¥å...·ä¸­æŸ¥çœ‹

• é¦-å...ˆä½ å'看到Http的头信息，这个信息可以通过 Live HTTP Headers 等工å...·æŸ¥çœ‹åˆ°ï¼Œä½†æ˜¯ç›´æŽ¥æŸ¥çœ‹æºä»£ç æ˜¯çœ‹ä¸åˆ°çš„，见上图中最顶部，相å½"于有个小探é'ˆï¼Œå¸®ä½ 查看更多的服务器信息å'Œå...¶ä»-相å...³ä¿¡æ¯ã€‚
• å...¶æ¬¡ä½ 可以æ¯"较蜘蛛看到的信息å'Œäººçœ‹åˆ°çš„信息有什么不同。这个工å...·ç"¨çš„是å'Œ Google æŠ"å-ç½'页的那个Googlebot 及å...¶äººä¸€æ ·çš„IPï¼Œä¸€æ ·çš„æ-¹å¼ï¼Œä¸€æ ·çš„ user-agentï¼Œå¦‚æžœä½ åœ¨ä¸çŸ¥æƒ...çš„æƒ...å†µä¸‹è¢«äººè¿›è¡Œäº†ä»£ç ä¿®æ"¹ï¼Œåœ¨èœ˜è››ä¸‹å'Œäººä¸ºä¸‹çœ‹åˆ°çš„ä»£ç ä¸ä¸€æ ·ï¼ˆè‹±æ-‡å«clockingï¼‰ï¼Œå°±å¯ä»¥é è¿™ä¸ªå·¥å...·æ¥æ£€æŸ¥äº†ã€‚
• è¿˜æœ‰ä½ å¯ä»¥ç"¨è¿™ä¸ªå·¥å...·æµ‹è¯•ä¸€äº›å˜åŒ-，æ¯"如重定å'。

在这个工å...·ä¸­ä½ 还能å'现一些额å¤-的东西，æ¯"如 javascript 能被 googlebot æŠ"å-

æˆ'没有flash站，有的朋友也可以看看flash在googlebotä¸­æ˜¯ä»€ä¹ˆæ ·å­çš„ã€‚

目前测试å'现Google机器人只能æŠ"å-前100000å­-节的å†...容，有人就会觉å¾-ç½'页æ-‡ä»¶æœ€å¥½ä¸è¦è¶...过这个大小，还有人说做é"¾æŽ¥ä¸è¦æ"¾åœ¨åº•éƒ¨ã€‚å...¶å®žè¿™ä¸ªæ²¡å...³ç³»ï¼Œè¿™ä¸ªåªæ˜¯å·¥å...·çš„作ç"¨ï¼Œè·ŸçœŸå®žçš„Googlebotæœºå™¨äººè¿˜æ˜¯æœ‰ä¸€å®šå·®è·ï¼Œä½ çœ‹çœ‹æ-°æµªçš„é¦-页，肯定不止100KB

小知识：什么是Cloaking？

通常是说在Web服务器上使ç"¨ä¸€å®šçš„手段，对搜索引æ"Žä¸­çš„巡回机器人显示出与普通é˜...览è€...不同å†...容的ç½'页。

现象1：为了提高在搜索引æ"Žä¸­çš„名次,不自然地大量å'ç½'页中è¾"å...¥å...³é"®å­-，使å...¶ä¸å±•çŽ°ç»™æ™®é€šç"¨æˆ·,单是选择性地å'给搜索引æ"Žçš„一种手法。

现象2：é»'é"¾ï¼Œä»Šå¹´å°±æµè¡Œé»'客了。å½"然，普通é»'客的所è°"é»'é"¾ï¼Œäººå¯ä»¥ç›´æŽ¥åœ¨æºä»£ç é‡Œçœ‹å‡ºæ¥ï¼Œä½†è‹¥æœ‰é«˜æ‰‹ç"¨äº†cloaking，那就不å¾-了。 ï¼ˆæ®ä¼ æœç´¢å¼•æ"Žä¼šå¯¹cloakingçš„ç½'站进行严惩）

小知识：如何测试æˆ'的重定å'？

ç"¨è¿™ä¸ªå·¥å...·æµ‹è¯•çš„话，就不ç"¨å†åŽ»ç­‰å¾... Google 重æ-°æ"¶å½•ä½ çš„ç½'站，æ¯"如æˆ'们给www.semwatch.org 做了重定å'，自动跳到semwatch.orgï¼Œä½ å°±å¯ä»¥é€šè¿‡è¿™ä¸ªå·¥å...·äº†æ£€æµ‹æ˜¯å¦é¡ºåˆ©äº†ã€‚