• 陈忠:城市空间弹性:文化自觉与制度转换 2019-07-22
  • 资助期刊采取多种举措推动刊物高质量发展 2019-07-22
  • 在星河中振翅高飞的“天鹅” 2019-07-17
  • 陕台“丝路云”融媒体平台启动 主流媒体融合转型“旗舰”出航 2019-07-16
  • 法制日报:现金贷变身倒逼监管创新 2019-07-16
  • 新疆旅游推介会亮相北京 2019-07-16
  • 安全生产月:铁路安全宣传走进车站 2019-07-16
  • 央行调查:36.5%的居民 预期下季度房价上涨 ——凤凰网房产天津 2019-07-13
  • 习近平日内瓦演讲一周年世界为何青睐"人类命运共同体" 2019-07-13
  • 别空谈,说说看,这个“简单的逻辑关系”是什么关系? 2019-07-09
  • 紫光阁中共中央国家机关工作委员会 2019-07-04
  • 外媒:模仿中国时代来临 西方是时候来中国找灵感了 2019-07-04
  • 特朗普雇佣资深律师应对涉俄调查 2019-07-04
  • 世界杯营销应量力而行 2019-07-04
  • 魅族:要保持精简高效体制 以抓住5G和IOT大潮机会 2019-07-03
  •  手机版 | 登陆 | 注册 | 留言 | 设首页 | 加收藏
    当前位置: 网站首页 > 行业资讯 > 文章

    北京pk10单吊一码倍投:程序中的robots.txt在什么情况下可以修改

    北京赛车pk10助赢软件 www.bghlk.com 时间:2016-05-09    点击: 次    来源:网络    作者:佚名 - 小 + 大

    robots.txt是什么:

    robots.txt是一个纯文本文件,在这个文件中网站管理者可以声明该网站中不想被robots访问的部分,或者指定搜索引擎只收录指定的内容。

    当一个搜索机器人(有的叫搜索蜘蛛)访问一个站点时,它会首先检查该站点根目录下是否存在robots.txt,如果存在,搜索机器人就会按照该文件中的内容来确定访问的范围;如果该文件不存在,那么搜索机器人就沿着链接抓取。

    另外,robots.txt必须放置在一个站点的根目录下,而且文件名必须全部小写。

    什么情况下可以修改:

    当你在程序中新增加文件夹的时候,而且该文件夹不想被搜索引擎抓取时,就可以修改了,使用记事本打开,然后在最下面添加Disallow: /文件夹名称/即可。

    一般情况下我们个人网站考虑不让搜索引擎抓取是出于?;ひ?、增加安全性、做搜索引擎优化而进行的,按照这样的思路,哪些文件夹设置为拒绝抓取就一目了然了

    上一篇:系统所需要的运行环境有哪些购买什么样的空间

    下一篇:用手机访问网站会自动跳转到手机版

    版权声明 | 关于阿布之家|阿布家.. | 广告服务 | 免责声明 | 联系我们 | 网站帮助
    北京赛车pk10助赢软件  |   QQ:155096168  |  地址:广东省广州市番禺区康乐路康乐园  |  电话:--  |  
  • 陈忠:城市空间弹性:文化自觉与制度转换 2019-07-22
  • 资助期刊采取多种举措推动刊物高质量发展 2019-07-22
  • 在星河中振翅高飞的“天鹅” 2019-07-17
  • 陕台“丝路云”融媒体平台启动 主流媒体融合转型“旗舰”出航 2019-07-16
  • 法制日报:现金贷变身倒逼监管创新 2019-07-16
  • 新疆旅游推介会亮相北京 2019-07-16
  • 安全生产月:铁路安全宣传走进车站 2019-07-16
  • 央行调查:36.5%的居民 预期下季度房价上涨 ——凤凰网房产天津 2019-07-13
  • 习近平日内瓦演讲一周年世界为何青睐"人类命运共同体" 2019-07-13
  • 别空谈,说说看,这个“简单的逻辑关系”是什么关系? 2019-07-09
  • 紫光阁中共中央国家机关工作委员会 2019-07-04
  • 外媒:模仿中国时代来临 西方是时候来中国找灵感了 2019-07-04
  • 特朗普雇佣资深律师应对涉俄调查 2019-07-04
  • 世界杯营销应量力而行 2019-07-04
  • 魅族:要保持精简高效体制 以抓住5G和IOT大潮机会 2019-07-03
  • 快乐时时彩计划软件手机版下载 内蒙古快3开奖预测 黑龙江36选7前100期 香港四不像图2019一肖中特 财付通彩票网 宁夏11选5组三助手 向月樵娱乐场所 排球自由人的作用 天津时时彩卡时间漏洞 天津11选5怎么玩 幸运农场遗漏 时时彩计划分分彩 棒球 香港六合彩聊天室 排列三和值走势图彩票2元网