在百度站长平台里，有一个抓取诊断页面，这个页面可以提交链接，提交后百度蜘蛛可以实时来访问，或许可以带来抓取频次的增加。但是每周只能提交70个链接。对于单个域名提交有限制。如果我们有大量的二级域名或者泛域名进行批量自动化提交，那效率都提升了，也许蜘蛛量也能大幅增加。这次做了一个自动化诊断工具，可以多线程批量自动化提交诊断链接。
演示视频
软件界面如下，可以设置打码方式、cookies、站点路径、线程数量，可以进行自动化的提交。打码方面支持云码、图鉴和我个人的识别接口。
cookies批量设置多条，一行一条，软件会循环读取cookies中已经绑定好的域名，并进行诊断提交。
site.txt放入已经绑定好的域名，一行一个，这里软件可以多线程批量读取每一行站点进行自动提交
tsgz.txt中放入要诊断提交的链接，这里支持泛目录，{字母5}，{数字5}html等格式进行泛提交。不过每个域名放70条链接就行了。因为每周只能提交70条链接。
然后软件就可以开始运行了
前段时间在写逆向旋转验证码的时候，文章在js逆向百度旋转验证码并通过验证 在文章中js逆向配合角度识别是可以通过接口完成验证的。虽然逆向代码是没问题的，但是缺少实际测试。本次就测试一下，以及发现的问题。源码获取：》》》百度旋转验证码逆向源码视频介绍：首先在测试的时候的发现的问题，一是百度旋...
如果用程序持续查关键词排名的话，肯定会遭遇百度反爬机制，反爬手段就是旋转验证码，需要过了旋转验证码才可以继续爬取，在之前已经逆向解决了旋转验证码，那么查询排名就可以持续性自动化进行。如果不过旋转验证码，那么就要买大量的代理ip去替换ip查询，而且这种做法查询过程中也会遇到反爬，并且查询速度收代理ip...
二级域名批量诊断推送的意思就是百度站长平台抓取诊断功能，这个功能提交后，可以实时的来蜘蛛访问。但是如果手动去诊断的话,也非常麻烦，而且每次都要验证一下旋转。先来看看正常抓取诊断，每个域名每周可抓取70次。视频演示在代码中首先要获取指定站点的id值设置规则，随机字母推送网站链接过旋转验证整体的核心思想...
这几天，有个用户找我做百度贴吧回复采集，将出现的验证码也识别通过，那么我正好有这个旋转验证码逆向源码，可以接入到百度贴吧中，只要出现验证码逆向通过就行了。爬虫采集的问题不大，主要是旋转验证码需要接入，接入的规则也是要根据网页的参数需求。视频演示：贴吧采集就不细说了，这里我用了多线程采集，速度已经非常...
在利用软件批量绑定二级域名后，在下一步应该是进行批量推送了，如果写代码或者软件进行批量推送，应该是比较麻烦，既然百度给出curl命令方法，那么结合shell的命令，就能很简单的将批量推送部署到网站服务器里。在批量推送过程中，正常每个域名每次推送最多可以2000条进行推送，然后如此循环往复，就可以全部...
9个月前 (07-21)
9个月前 (07-17)
9个月前 (07-15)
9个月前 (07-14)
9个月前 (07-13)