。观察百度蜘蛛的抓取记录，最好的方法是查看网站日志。只要你的网页被访问过，不管是人还是百度蜘蛛，或者其他搜索引擎蜘蛛。可以记录在网站里。正规网站空一般都会提供网站日志服务。网站可以通过ftp下载。
查看百度蜘蛛爬行记录的方法：第一，前往空间服务器，下载网站日志。第二，打开网站日志文件，搜索：Baiduspider。百度（Baidu）爬虫名称：Baiduspider 第三，鉴别百度蜘蛛的真伪。
网站日志可在服务器端下载，文件后缀名为.log 下载下来后可用爱站工具包进行日志分析，可以分析出蜘蛛爬取的网站目录、网站页面、蜘蛛ip 但是免费用户只能查看日志文件20M以下的。
1、只查看最后10个或前10个，这样就可以知道这个日志文件开始记录的时间和日期。百度蜘蛛抓取首页的详细记录 cataccess.loggrepBaiduspidergrepGET/HTTP百度蜘蛛似乎很爱主页，每个小时都来访问，而谷歌和雅虎蜘蛛更喜欢内页。
2、要观察百度蜘蛛的爬行记录，最好的办法是通过查看网站日志。只要你的网页被访问过，不管是人还是百度蜘蛛、或者其他搜索引擎蜘蛛。网站日志中都可以把它记录下来。正规的网站空间一般提供网站日志服务。
3、百度统计无法查询蜘蛛爬行轨迹，其作用主要是统计用户数据。spider数据需要您从站点日志中获取，站点日志文件名一般包含：log字样。可通过连接服务器查询。
4、日志。一般IIS 日志存放在你的ftp 账户的根目录下并且以 log×××等字样命名的文件夹下面。
下载后可以使用爱站工具包进行日志分析，可以分析蜘蛛抓取的网站目录、网站页面、蜘蛛ip。但是免费用户只能查看20M以下的日志文件。
可是通过网站IIS日志查看，在IIS日志文件中搜索查找：baiduspider，IIS日志下载方法：登录网站空间，找到日志下载，下载到本地进行查找 打开下载的文件，进行查找。
通常一个网站日志文件在空间管理后台的logofiles文件夹下面。每天系统会自动生成一个LOG日志文件。网站日志文件是安全的，只有站长自己登陆空间管理后台才能看见LOG日志文件。
下载网站日志(如果是企业网站，可以直接找运维部的童鞋帮你下载。如果是个人站长，直接在你买的虚拟主机后台下载。该文件以。日志) 打开光年日志分析工具，上传网站日志。 检查分析结果。
要观察百度蜘蛛的爬行记录，最好的办法是通过查看网站日志。只要你的网页被访问过，不管是人还是百度蜘蛛、或者其他搜索引擎蜘蛛。网站日志中都可以把它记录下来。正规的网站空间一般提供网站日志服务。
先确认log日志对客户端访问机器名以及访问ip进行了记录。如果没有记录这两项就没有Baiduspider字样显示，也没有百度蜘蛛IP记录。
用ftp登陆网站，找带logs字样的文件夹，里面就是网站日志，如果你的空间没有给你开启记录日志，那就看不到。
下载网站日志(如果是企业网站，可以直接找运维部的童鞋帮你下载。如果是个人站长，直接在你买的虚拟主机后台下载。该文件以。日志) 打开光年日志分析工具，上传网站日志。 检查分析结果。
获取日志文件 搜索引擎抓取网站信息必会在服务器上留下信息，这个信息就在网站日志文件里。
有两种方法可以查看网站日志。第一种比较简单粗暴。用Excel打开网站日志文件，直接查看。第二种方法比较适合新手。他们可以通过专业软件查看，将本地网站日志文件上传到软件中，软件会提取重要信息进行阅读。
登录虚拟主机自助管理平台，输入产品服务码和服务码口令，登陆。进入自助管理平台，点击下载日志按钮，然后点击开始下载。可以登录FTP工具，在根目录下找到wwwlogs文件，下载所需的压缩文件。
目前行业内优秀的日志分析工具不多。为了准备分析出想要的结果，有些seo朋友是直接查看网站日志文件来进行分析的。然后日志文件数据量庞大，不是每一个人都具备如此的“眼力”的。一个好的日志分析工具，可以让你事半功倍。
