php自动化爬虫之webdriver

PHP的webdriver 是由facebook公司写的浏览器驱动, 可以和python的webdriver一样自动化的操作浏览器,基本的使用和类名也差不多. 国内相关文档比较少,php的包管理确实没有python的方便.建议有能力的还是学学python比较好

开始:使用的是windows系统, 其他系统也是可以用的需要自己研究

一环境配置

1. composer下 composer require php-webdriver/webdriver 安装包依赖

2. 我用的是谷歌浏览器,需要下载谷歌浏览器的外部驱动(ChromeDriver),python也是一样的.查看自己谷歌的版本,下载对应的驱动

3.需要安装Selenium(WEB自动化工具)Jdk selenium-server-standalone-3.8.1.jar

4.需要安装java环境要启动自动化工具

二启动

1.启动自动化工具 cmd窗

java -jar selenium-server-standalone-3.8.1.jar -enablePassThrough false

2. 启动phpunit

bin/phpunit.bat phpunit.bat双击就可以

三demo代码

require 'vendor/autoload.php';
use Facebook\WebDriver\Remote\RemoteWebDriver;
use Facebook\WebDriver\Remote\DesiredCapabilities;
use Facebook\WebDriver\Remote\WebDriverBrowserType;
use Facebook\WebDriver\WebDriverExpectedCondition;
use Facebook\WebDriver\WebDriverBy;
use Facebook\WebDriver\WebDriverDimension;

$host = 'http://localhost:4444/wd/hub';
putenv('webdriver.chrome.driver=' . getenv('CHROME_DRIVER_PATH'));
$driver = RemoteWebDriver::create($host, DesiredCapabilities::chrome()); //实例谷歌化驱动
//这里就可以成功自动打开浏览器
$driver->get("百度一下，你就知道");

配合
$driver->findElements  && $driver->executeScript

获取到内容和解决防爬问题

php webdriver主要用途方向是 php自动化操作测试,和一些反爬网站的的爬取

无反爬的网站建议使用phpSpider 框架,另个文章有介绍

结尾 faceBook开发文档

php自动化爬虫之webdriver相关推荐

【selenium爬虫】用selenium自动化爬虫爬取海贼王动漫图片
以下内容为本人原创,欢迎大家观看学习,禁止用于商业用途,转载请说明出处,谢谢合作! ·作者:@Yhen ·原文网站:CSDN ·原文链接:https://blog.csdn.net/Yhen1/art ...
Python之Selenium自动化爬虫
文章目录 Python之Selenium自动化爬虫 0.介绍 1.安装 2.下载浏览器驱动 3.实例 4.开启无头模式 5.保存页面截图 6.模拟输入和点击 a.根据文本值查找节点 b.获取当前节点的 ...
fofa自动化爬虫脚本更新+详解
fofa自动化爬虫脚本更新+详解起因最近要用到fofa爬虫,为什么要用爬虫不用api,问就是穷,想起来之前写过一个相关的脚本:Fofa-python-脚本,是很久以前写的了,之前写的时候有点问题, ...
5分钟学会Python爬虫神器autoscraper——自动化爬虫必备
5分钟学会Python爬虫神器autoscraper--自动化爬虫必备爬虫神器autoscraper介绍安装使用批量抓取查看结果爬虫神器autoscraper介绍今天给大家介绍一个非常智 ...
python windows自动化爬虫_使用Python实现自动化截取Windows系统屏幕
文章首发于我的技术博客:你可以在上面看到更多的Python教程和python爬虫自动化截屏有什么用呢?为什么要实现自动化截屏呢?其实,在某些特殊的场景下,记录电脑使用者的操作还是很有必要的.比如,银 ...
python windows自动化爬虫_Python体系(网络爬虫、人工智能、WEB开发、自动化运维)详细介绍...
不论你是对Python初出茅庐,还是如指诸掌,这篇文章对你的收获总归还是有的啦,可能只是程度的问题.好了不扯远了,来说正题,下面在分享这套体系前还是要让Python做一下"自我介绍" ...
python网络爬虫抹除webdriver指纹绕过淘宝滑块验证登录
对于爬虫工程师,最常遇到的需求就是抓取电商网站的数据,那么电商数据最受哪些公司平台的注意呢?以下是几个例子广告商:广告商透过爬虫定期抓取你店铺的数据,并对店铺包括销量,热度,好评,新上线产品好评度, ...
python chromium 自动化_将 WebDriver (Chromium) 用于测试自动化
将 WebDriver (Chromium) 用于测试自动化 01/29/2021 本文内容 WebDriver 允许开发人员创建模拟用户交互的自动化测试. WebDriver 测试和模拟与 Java ...
python 爬虫小说使用无头浏览器 + 自动化爬虫
仅供学习,请勿商业行为!,未经允许请勿转载获取到搜索接口和请求方法和请求参数当前是post 方法请求参数为获取对应小说的详情介绍页对应类.对应浏览器驱动获取方法 python s ...

php自动化爬虫之webdriver

php自动化爬虫之webdriver相关推荐

最新文章

热门文章