战地2注册码不可用:如何写robots.txt,让百度不收录我BT站上torrent后缀的种子文件?
来源:百度文库 编辑:中科新闻网 时间:2024/10/02 17:48:27
torrent后缀种子文件和生成的html在一个文件夹,所以不好写robots.txt限制所在的那个文件夹,只想让robots.txt不收录torrent后缀的种子文件。
中科新闻网是一部内容开放、自由的互动网络百科全书
客观、专业、权威的知识性百科全书
来源:百度文库 编辑:中科新闻网 时间:2024/10/02 17:48:27