【收集】Meta标签Robots之NOODP、NOYDIR

NOODP（No Open Directory Project）：在搜索结果中不使用Open Directory Project中的描述信息作为其摘要信息。

NOYDIR（No Yahoo Directory）：在搜索结果中不使用Yahoo Directory中的描述信息作为其摘要信息。

网站如果提交到Yahoo Directory或者DMOZ这些开放分类目录中，这些目录将记录网站说明信息。有时搜索引擎很可能采用开放目录里面网站的信息，而不采用现有的网址信息，导致搜索引擎的信息和网站的现有信息不匹配。
NOODP 和 NOYDIR 就是要让搜索引擎不使用这些开放分类目录上的信息，而使用网站的现有信息。 

<meta name="搜索引擎类型" content="NOODP,NOYDIR" />

<!-- 此网页不允许Google采用开放目录里的网站信息所为搜索结果 -->

< meta name=”googlebot” content=”noodp” /> 

<!-- 限制所有搜索引擎 -->

< meta name=”robots” content=”noodp,noydir” />

 

搜索引擎机器人（Specific Search Robots）列表

  搜索引擎           Robots（机器人）   
  Google         --  googlebot 
  MSN Search     --  msnbot 
  Yahoo          --  yahoo-slurp
  Baidu          --  baiduspider  
  Ask/Teoma      --  teoma 
  Cuil           --  twiceler 
  GigaBlast      --  gigabot 
  Scrub The Web  --  scrubby 
  DMOZ Checker   --  robozilla 
  Nutch          --  nutch 
  Alexa/Wayback  --  ia_archiver 
  Naver          --  naverbot, yeti
  AltaVista      --  scooter
  AllTheWeb      --  FAST-WebCrawler
  Inktomi        --  Slurp

特殊用途搜索引擎机器人（Specific Special Bots）列表

  搜索引擎           Robots（机器人）   
  Google Image   --  googlebot-image 
  Google Mobile  --  googlebot-mobile 
  Yahoo MM       --  yahoo-mmcrawler 
  MSN PicSearch  --  psbot 
  SingingFish    --  asterias 
  Yahoo Blogs    --  yahoo-blogs/v3.9