在网站做SEO优化的同时,就有必要时长关注一下网站访问日志,有助于分析百度蜘蛛或者其他搜索引擎蜘蛛爬取的情况。
如果是“linux+宝塔面板”的主机环境,我们登录宝塔linux面板后,点击左侧“文件”,在www下的wwwlogs目录中就能看到网站访问日志了,
ps:经实测,Windows系统的主机好像没有日志记录功能。
将这个 *****-access_log 文件下载下来,用文本编辑器打开,就可能看到网站的访问记录了。
对于不会分析的朋友,大家可以在网上找找网站日志在线分析工具,将网站日志所有内容复制粘贴进行分析即可,就能方便的查看搜索引擎爬虫的爬取记录了。