消息通知
▲

最近使用

热门推荐

当前位置： 九游会国际-九游会体育官网登录 >

robots文件生成 -九游会国际

限制目录：

每个路径之前都要包含："/"

(留空为无)sitemap：

谷歌为xml格式，百度为html格式

检索间隔：
不限
所有搜索引擎：
  • ##
    允许
    拒绝
国内搜索引擎
  • 百度
    默认
    允许
    拒绝
  • soso
    默认
    允许
    拒绝
  • 搜狗
    默认
    允许
    拒绝
  • 有道
    默认
    允许
    拒绝
国外搜索引擎
  • 谷歌
    默认
    允许
    拒绝
  • bing
    默认
    允许
    拒绝
  • 雅虎
    默认
    允许
    拒绝
  • ask/teoma
    默认
    允许
    拒绝
  • alexa/wayback
    默认
    允许
    拒绝
  • cuil
    默认
    允许
    拒绝
  • msn search
    默认
    允许
    拒绝
  • scrub the web
    默认
    允许
    拒绝
  • dmoz
    默认
    允许
    拒绝
  • gigablast
    默认
    允许
    拒绝
特殊搜索引擎(机器人)
  • google image
    默认
    允许
    拒绝
  • google mobile
    默认
    允许
    拒绝
  • yahoo mm
    默认
    允许
    拒绝
  • yahoo blogs
    默认
    允许
    拒绝
  • msn picsearch
    默认
    允许
    拒绝

请将以下结果保存到记事本,命名为robots.txt上传到网站根目录
工具简介

robots.txt 是存放在站点根目录下的一个纯文本文件。虽然它的设置很简单，但是作用却很强大。它可以指定搜索引擎蜘蛛只抓取指定的内容，或者是禁止搜索引擎蜘蛛抓取网站的部分或全部内容。

相关功能
域名类
dns查询 nslookup查询 域名删除时间
ip类
ip反查域名 ip whois查询 端口扫描
百度相关
关键词排名 关键词挖掘 收录查询 关键词优化分析 meta信息挖掘
测速监控
国内网站测速 海外网站测速 网站历史记录 seo历史记录 国内网速对比

| | | | | | |

© 九游会体育官网登录 copyright 2002-2024, chinaz.com, inc.all rights reserved.闽icp备08105208号增值电信业务经营许可证闽b2-20120007号亿速云提供支持
网站地图