• 家谱是另一种意义上的“身份证” 看看古人如何修谱 2019-09-15
  • 按照相对论,把动能表达为mc^2√(1-v^2c^2)是错误的47 2019-09-15
  • 降低货运价格,迈出铁路货运服务新步伐 2019-09-07
  • 青岛经济学校2018年实习就业双选会供需比17 2019-09-07
  • 海淀北部生态科技新区新技术新产品项目推介会举行 2019-09-02
  • 生活-热门标签-华商生活 2019-08-26
  • 【专题】省违反中央八项规定精神和“四风”问题线索举报平台 2019-08-22
  • 首页 春城壹网 七彩云南 一网天下 2019-08-22
  • 金华:舞动世界杯 我是颠球王 2019-08-11
  • 中国构建自主知识产权商用磁浮体系 2019-08-09
  • 美商务部长表示美国正加大力度吸引国际游客 2019-08-04
  • 宁夏在马来西亚举办旅游推介会 2019-08-04
  • 【景德镇天气】最新景德镇今天天气,实时提供景德镇气温、空气质量、24小时天气预报、生活指数查询 2019-07-31
  • 空港消防借“安全生产日”开展消防安全宣传活动 2019-07-31
  • 广西严肃惩戒公积金骗提套取行为 2019-07-29
  •  手机版 | 登陆 | 注册 | 留言 | 设首页 | 加收藏
    当前位置: 网站首页 > 行业资讯 > 文章

    北京赛车单双大小规律:程序中的robots.txt在什么情况下可以修改

    北京赛车pk10助赢软件 www.bghlk.com 时间:2016-05-09    点击: 次    来源:网络    作者:佚名 - 小 + 大

    robots.txt是什么:

    robots.txt是一个纯文本文件,在这个文件中网站管理者可以声明该网站中不想被robots访问的部分,或者指定搜索引擎只收录指定的内容。

    当一个搜索机器人(有的叫搜索蜘蛛)访问一个站点时,它会首先检查该站点根目录下是否存在robots.txt,如果存在,搜索机器人就会按照该文件中的内容来确定访问的范围;如果该文件不存在,那么搜索机器人就沿着链接抓取。

    另外,robots.txt必须放置在一个站点的根目录下,而且文件名必须全部小写。

    什么情况下可以修改:

    当你在程序中新增加文件夹的时候,而且该文件夹不想被搜索引擎抓取时,就可以修改了,使用记事本打开,然后在最下面添加Disallow: /文件夹名称/即可。

    一般情况下我们个人网站考虑不让搜索引擎抓取是出于?;ひ?、增加安全性、做搜索引擎优化而进行的,按照这样的思路,哪些文件夹设置为拒绝抓取就一目了然了

    上一篇:系统所需要的运行环境有哪些购买什么样的空间

    下一篇:用手机访问网站会自动跳转到手机版

    版权声明 | 关于阿布之家|阿布家.. | 广告服务 | 免责声明 | 联系我们 | 网站帮助
    北京赛车pk10助赢软件  |   QQ:155096168  |  地址:广东省广州市番禺区康乐路康乐园  |  电话:--  |  
  • 家谱是另一种意义上的“身份证” 看看古人如何修谱 2019-09-15
  • 按照相对论,把动能表达为mc^2√(1-v^2c^2)是错误的47 2019-09-15
  • 降低货运价格,迈出铁路货运服务新步伐 2019-09-07
  • 青岛经济学校2018年实习就业双选会供需比17 2019-09-07
  • 海淀北部生态科技新区新技术新产品项目推介会举行 2019-09-02
  • 生活-热门标签-华商生活 2019-08-26
  • 【专题】省违反中央八项规定精神和“四风”问题线索举报平台 2019-08-22
  • 首页 春城壹网 七彩云南 一网天下 2019-08-22
  • 金华:舞动世界杯 我是颠球王 2019-08-11
  • 中国构建自主知识产权商用磁浮体系 2019-08-09
  • 美商务部长表示美国正加大力度吸引国际游客 2019-08-04
  • 宁夏在马来西亚举办旅游推介会 2019-08-04
  • 【景德镇天气】最新景德镇今天天气,实时提供景德镇气温、空气质量、24小时天气预报、生活指数查询 2019-07-31
  • 空港消防借“安全生产日”开展消防安全宣传活动 2019-07-31
  • 广西严肃惩戒公积金骗提套取行为 2019-07-29
  • 江西快三网上怎么投注 瑞超积分榜2018 通比牛牛棋牌游戏官网 爱波足球指数 云南省打造三张牌 腾讯彩票专家预测 福利彩票双色球复式中奖规则及奖金 中国竞彩足球比分官网 安徽快三全天多少期 海南七星彩技巧 安徽快3直播 安徽25选5 福彩3d2018年全年开奖结果 竞彩足球害死多少人 3d必中直选