## ----------------------------------------------------------------------------- ## 禁止爬虫爬取无效URL,提升网站核心静态资源抓取及索引效率。 ## 无效URL包含:全动态URL,重复页面URL,存在问题的旧静态URL ## 等各种无需被SE收录的URL。 ## ----------------------------------------------------------------------------- User-agent: * Disallow: /