PHP最快方式模拟curl,PHP最快爬虫模拟方法
有时候我们需要爬一个接口，但是这个接口需要很多参数，包括header和cookie要去编写，使用php curl模拟实在太慢。我们可以通过浏览器的network来复制请求为curl命令。
例如我需要模拟请求接口地址：https://www.xkmz.cc/Ajax/Debug/delly,我们只需要在谷歌浏览器的network下找到对应的接口请求，鼠标右键选择Copy => Copy as curl，即可将这个请求复制为curl请求命令。
特别提示,这里的Copy as curl (cmd)和 Copy as curl (bash)分别代表win和linux的curl命令，通常我建议大家用火狐浏览器来生成curl命令，更加标准，火狐生成的命令默认就是当前系统的命令。
生成的curl命令是100%完全真正模拟的请求，建议在命令行执行测试。
例如我生成的curl命令为:
curl 'https://www.xkmz.cc/Ajax/Debug/delly' -H 'sec-fetch-mode: cors' -H 'origin: https://www.xkmz.cc' -H 'accept-encoding: gzip, deflate, br' -H 'accept-language: zh-CN,zh;q=0.9' -H 'x-requested-with: XMLHttpRequest' -H 'cookie: PHPSESSID=jtvij4ie3gho559iam07taecl7899; skey=4a2a5f7bd8553ad175ea25d6f17fd952; yd_cookie=fcb30e6d-df04-45f7fced012f024a614263ccb53b82b2402b; Hm_lvt_3588845f64e5333198c26237db9c4bb6=1568507975,1568508261,1568555167,1568989627; Hm_lpvt_3588845f64e5333198c26237db9c4bb6=1568989627; usertoken=08f29f86d028e51ad59f7c9c79a9ad0d' -H 'user-agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/77.0.3865.75 Safari/537.36' -H 'content-type: application/x-www-form-urlencoded; charset=UTF-8' -H 'accept: text/html, */*; q=0.01' -H 'referer: https://www.xkmz.cc/User/qqset/qid/178397.html' -H 'authority: www.xkmz.cc' -H 'sec-fetch-site: same-origin' --data 'qid=178397&id=418693&n=2' --compressed
然后通过开源工具将curl命令转换为php代码，开源工具地址：https://github.com/incarnate/curl-to-php
“PHP最快方式模拟curl,PHP最快爬虫模拟方法” 的相关文章
PHP计算两个字符串的相似度
<?php echo similar_text("Hello World","Hello Shanghai"); ?> 2.计算两个字符串的相似度，并返回百分比 <?php similar_text("...
php定义常量数组
<?php //php7+ define('CONFIG', [ 'MYSQL' => '127.0.0.1', ...
php爬虫执行js,php执行js
当我们使用php爬虫采集网站时经常会遇到内容使用ajax异步加载。一般采取的方案是PHP模拟再请求api接口获取数据，但是有时候前端js加密非常麻烦，我们需要将js的加密方法转换为php方法方便curl请求。当然通过了解我们可以通过3种方案解决。第一种：使用phpv8js扩展执行js代码。(pecl...
thinkphp5整合workerman,tp5整合workerman
由于workerman底层直接读取$_SERVER['argv']的命令行参数,没有提供独立的方法start/stop，而tp的命令行参数无法适配workerman，虽然thinkphp官方专门做了一个适配的版本，但是看了下评论问题挺多的。于是自己来搞一个.(1).在applicat...
php levenshtein,php字符串编辑距离
levenshtein函数可以计算两个字符串之间的编辑距离，那么何为编辑距离？编辑距离概念：编辑距离，是指两个字串之间，通过替换or插入or删除等操作将字符串str1转换成str2所需要操作的最少字符数量。 该算法的复杂度是 O(m*n)，其中 n 和 m 分别是str1 和str2的长度注意：如果...
php交换变量,php交换两个变量的值,php交换2个变量
上代码：<?php $a = 'gao'; $b = 'liu'; echo "交换前： {$a} {$b}".PHP_EOL; //进行交换 list($...