SEO教程 robots.txt文件常见用途
1. 允许所有的搜索引擎访问网站的任何部分
2. 禁止所有搜索引擎访问网站的任何部分
User-agent: *
Disallow: /
3. 禁止所有搜索引擎访问网站中所有的动态页面
User-agent: *
Disallow: /*?*
4. 禁止网站上的程序文件被搜索引擎蜘蛛索引,这样可以节省服务器资源。
一般网站中不需要蜘蛛抓取的文件有:后台管理文件、程序脚本、附件、数据库文件、编码文件、样式表文件、模板文件、导航图片和背景图片等等。
User-agent: *
Disallow: /admin/ 后台管理文件
Disallow: /require/ 程序文件
Disallow: /attachment/ 附件
Disallow: /images/ 图片
Disallow: /data/ 数据库文件
Disallow: /template/ 模板文件
Disallow: /css/ 样式表文件
Disallow: /lang/ 编码文件
Disallow: /script/ 脚本文件
注:每个网站的文件夹名字可能会不一样
提升主题内容,提高载入速率。如今许多移动网站都充斥着大批量的高清图片,有的还有许多的视频,尽管这种多媒体系统可以有效性提高网页的出彩度,但是也会对移动用户的使用速度造成负面信息的影响,假如一个视频文件很大,不但会耗费移动用户很多的流量,同时还要让客户等待更多的时间。因此在视频展现上我们要谨慎,要么给出相对的提示,要求他们在Wifi模式下选择网页浏览,不然不会让移动用户系统自动下载。而针对高清图片的展现,则应当有效的分屏,不可以让高清图片充斥全部手机屏幕,那样移动用户就只能够看图片,看不见相应的具体内容,比较严重影响到移动用户的阅读体验。尽管如今移动端企业网站建设早已显得越来越关键,以至于早已成为了主导。