一、robots 介绍
Robots 协议（也称为爬虫协议、机器人协议等）的全称是 “网络爬虫排除标准”（Robots Exclusion Protocol），网站通过 Robots 协议告诉来访网站的搜索引擎，此网站的哪些页面可以抓取，哪...
泰泰
9个月前 (06-08) 1824℃ 1评论
2喜欢
【导读】
在上一篇：免插件生成wordpress站点地图，附sitemap源代码（上篇） 文章中，已经通过php编写的代码获得了站点地图信息，但最终的文件是以".php"格式结尾的，在百度SEO提交中并不合适。在各大引擎...
泰泰
3年前 (2018-07-14) 1860℃ 0评论
2喜欢
【导读】
作为一名站长，而且又接触过网站SEO的朋友，相信大家都知道什么是站点地图（sitemap）了吧！简而言之就是，你这个网站的所有‘可访问’的链接。具体可以分为哪些链接呢？一个网站大致可以分为4种链接，具体为所有的：页面地址、文章地址...
泰泰
3年前 (2018-07-11) 2036℃ 0评论
1喜欢
