Robots.txt: Difference between revisions
Jump to navigation
Jump to search
mNo edit summary |
|||
| Line 2: | Line 2: | ||
manual | manual | ||
* [http://www.robotstxt.org/wc/norobots.html A Standard for Robot Exclusion] | * [http://www.robotstxt.org/wc/norobots.html A Standard for Robot Exclusion] | ||
* [http://www. | * [http://www.searchtools.com/robots/robots-meta.html Search Indexing Robots and the Robots META Tag - SearchTools.com] | ||
* [http://www.google.com/support/webmasters/bin/answer.py?answer=40367 網站管理員說明中心 - 我不想將要攔截的每個檔案都列出。我可以使用* 和 $ 模式媒合嗎？]([http://www.google.com/support/webmasters/bin/answer.py?answer=40367&hl=en EN]) | * [http://www.google.com/support/webmasters/bin/answer.py?answer=40367 網站管理員說明中心 - 我不想將要攔截的每個檔案都列出。我可以使用* 和 $ 模式媒合嗎？]([http://www.google.com/support/webmasters/bin/answer.py?answer=40367&hl=en EN]) | ||
Revision as of 23:54, 1 July 2007
Robots.txt for golbal website or specific folders
manual
- A Standard for Robot Exclusion
- Search Indexing Robots and the Robots META Tag - SearchTools.com
- 網站管理員說明中心 - 我不想將要攔截的每個檔案都列出。我可以使用* 和 $ 模式媒合嗎？(EN)
robots.txt validator
移除自己的網頁在google上的索引
不希望自己的網站或網頁在google上被搜尋 要求Google移掉連結
- ?天: 使用自動網址移除系統 (說明: 移除內容)
- 3-5個工作天內處理: 使用 Google 網站管理員工具中的 URL 移除要求工具 (說明)
- 180天內: 使用robots.txt等 (說明: 如何確定我的內容可以從 Google 索引移除？)
meta tag for each webpage
<meta name="robots" content="noindex,nofollow" />
related: