PHP最快方式模拟curl,PHP最快爬虫模拟方法
有时候我们需要爬一个接口，但是这个接口需要很多参数，包括header和cookie要去编写，使用php curl模拟实在太慢。我们可以通过浏览器的network来复制请求为curl命令。
例如我需要模拟请求接口地址：https://www.xkmz.cc/Ajax/Debug/delly,我们只需要在谷歌浏览器的network下找到对应的接口请求，鼠标右键选择Copy => Copy as curl，即可将这个请求复制为curl请求命令。
特别提示,这里的Copy as curl (cmd)和 Copy as curl (bash)分别代表win和linux的curl命令，通常我建议大家用火狐浏览器来生成curl命令，更加标准，火狐生成的命令默认就是当前系统的命令。
生成的curl命令是100%完全真正模拟的请求，建议在命令行执行测试。
例如我生成的curl命令为:
curl 'https://www.xkmz.cc/Ajax/Debug/delly' -H 'sec-fetch-mode: cors' -H 'origin: https://www.xkmz.cc' -H 'accept-encoding: gzip, deflate, br' -H 'accept-language: zh-CN,zh;q=0.9' -H 'x-requested-with: XMLHttpRequest' -H 'cookie: PHPSESSID=jtvij4ie3gho559iam07taecl7899; skey=4a2a5f7bd8553ad175ea25d6f17fd952; yd_cookie=fcb30e6d-df04-45f7fced012f024a614263ccb53b82b2402b; Hm_lvt_3588845f64e5333198c26237db9c4bb6=1568507975,1568508261,1568555167,1568989627; Hm_lpvt_3588845f64e5333198c26237db9c4bb6=1568989627; usertoken=08f29f86d028e51ad59f7c9c79a9ad0d' -H 'user-agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/77.0.3865.75 Safari/537.36' -H 'content-type: application/x-www-form-urlencoded; charset=UTF-8' -H 'accept: text/html, */*; q=0.01' -H 'referer: https://www.xkmz.cc/User/qqset/qid/178397.html' -H 'authority: www.xkmz.cc' -H 'sec-fetch-site: same-origin' --data 'qid=178397&id=418693&n=2' --compressed
然后通过开源工具将curl命令转换为php代码，开源工具地址：https://github.com/incarnate/curl-to-php
“PHP最快方式模拟curl,PHP最快爬虫模拟方法” 的相关文章
php 获取当前执行文件,php 获取当前执行文件,php 获取当前文件
php官方的超全局变量$_SERVER['PHP_SELF']也能直接获取，只不过如果url参数太多也会获取。下面提供一个方法获取/* * 获取当前PHP文件名称 */ if (!function_exists('phpself&#...
php迭代器学习
php官方已经提供了Iterator（迭代器）接口,通过网上资料的学习,目前看适合超大集合或者数组提取使用。学习一个函数的实现对比内存占用差距.使用迭代器和普通循环实现range()函数。(1).普通循环实现range()函数。function newrange($low, $h...
php json_encode 使用注意
参数中包含gb2312的字符串,返回结果是false或者null(不同PHP版本具有差异性)代码:<?php $dbms = 'mysql'; $host = '192.168.8.8'; $dbName =&n...
PHP Warning: ftok(): Project identifier is invalid
在使用ftok生成ipc进程通信key尝试将第二个参数项目标识符传入字符串报错：PHP Warning: ftok(): Project identifier is invalid，查阅资料发现第二个字符串只能是1个字符串，长度为1....
php位运算符详解
文章篇幅较长，如果不喜欢看文章的，此处抛出韩顺丰老师的位运算视频，韩老师应该是全网讲php位运算符最详细的一个老师了。链接：https://pan.baidu.com/s/14xj7er8eVSUcJ-jYXyA0GA 提取码：731m 链接：https://pan.baidu.com...
thinkphp3定时任务,tp定时任务,thinkphp定时任务
本教程使用的定时任务基于EasyTak，EasyTask官方文档：https://gitee.com/392223903/EasyTask由于tp3.2.x官方开发未考虑命令行支持和绝对路径开发的标准,因此我编写了一个支持的类来运行。1.在tp3.2.3根目录下安装easytaskcomposer&...