相关文章
多线程制作sitemap地图，集合到工具集
这次在我的工具集中，增加一个新功能，就是sitemap地图的制作，核心思路当然是爬取网站所有页面，并对页面进行数据清洗，包括去重、分类、url类别判断。然后再将功能集合到seo工具集中。在代码部分，简单介绍一下,解析页面，然后通过BeautifulSoup对页面url进行提取，对url进行判断，同域...
多线程发包模拟点击软件界面运行
前段时间写了一个模拟点击源码，以及网页系统的对接。在运行方面需要先安装python环境以及搭建网页和数据库，方可进行运行。这种方式比较复杂，不适合个人去使用，这次主要是做了一个qt软件，将源码进行封装，这样我们就不需要安装环境了，直接一键运行即可。下面是软件的简单界面，纯属个人简单设计（高手路过）在...
点选验证码js逆向识别进行360url提交
一般我们遇到点选验证码的时候，最简单的方式就是通过selenium调用浏览器，对验证码区域定位截图然后调用平台识别文字坐标。但是用selenium是比较麻烦的。我们还可以用js逆向识别参数生成方式，最后再用接口调用，下面就举例一下360提交的点选验证码js逆向调用。对于这样的点选验证码，我们要知道图...
多进程线程查询关键词排名，速度达到1秒10个！
python多线程有两种，一种是多进程，另一种是多线程，对于线程基础知识层面，线程运行在进程中，一个进程可以有多个线程，而多线程只能在一个进程中运行。所以在多线程并发运行的同时，开启多进程进行并行操作。这样就可以最大化的利用计算机cpu的内核。需要源码的可以在我的商城获取>>>百度...
无需代理ip查询搜狗任务触发验证码机制并识别通过
如果我们想做一些搜狗页面的一些数据分析，比如网站关键词排名，挖掘相关搜索词等任务，用代码自动化请求时间过长，会触发搜搜验证码机制。对于这个验证码，可以识别验证码并请求通过。遇到这类情况，可以分析一下接口，经过分析，在代码中进行还原请求data参数中suuid和auuid在页面源码中可以获取到，r、p...
