golang 配置谷歌driver抓取

首先我们需要谷歌浏览器（双核的不行），然后去下载相对应版本的webdriver
webdriver文件下载地址
http://chromedriver.storage.googleapis.com/index.html（浏览器版本和driver的版本要对应上）

先创建配置文件，看代码


package driverimport ("os/exec""strconv"
)const (chromePath = `C:\Program Files\Google\Chrome\Application\chrome.exe` // 谷歌浏览器地址chromePort = 9222
)// StartChrome 启动Chrome浏览器并开启debug端口
func (d *Driver) StartChrome() error {d.cmd = exec.Command(chromePath, `--disable-notifications`, `--remote-debugging-port=`+strconv.Itoa(chromePort+d.index)) //, `--user-data-dir=`+chromeDir)return d.cmd.Start()
}// StopChrome 停止Chrome浏览器
func (d *Driver) StopChrome() error {return d.cmd.Process.Kill()
}

然后是我封装的一点抓取方法

package driverimport ("fmt""log""os/exec"

golang 配置谷歌driver抓取相关推荐

golang配置export GOPRIVATE拉取私有库代码
golang配置export GOPRIVATE拉取私有库代码可参考链接: http://t.zoukankan.com/jwentest-p-12520378.html
百度与谷歌蜘蛛抓取配置
浅谈:如何屏蔽百度谷歌蜘蛛? 方法一.创建robots.txt文本对于robots.txt文本的相关概念或者是协议我就不提了,主要是直接告诉大家这个文件的写法. 文件应该同时包含2个域," ...
windbg工具安装配置及dump抓取
安装与配置windbg 安装与配置windbg的symbol(符号) 第一步下载WinDBG, 第二步双击下载的文件安装windbg.安装时注意记住安装到那里了. 第三步 windbg访问符号需要 ...
ashx在web.config中如何配置_如何在 Istio 1.6 中配置 Prometheus-Operator 和抓取指标
在 Istio1.4 及以上版本中,可观测性指标的创建.交换和抓取的方式已经发生改变. 以下内容讲述了我如何配置 Prometheus Operator 资源以从 Istio1.6 中抓取指标和安装最 ...
批量抓取微信朋友圈 Java_微信朋友圈转疯了（golang写小爬虫抓取朋友圈文章）...
很多人在朋友圈里转发一些文章,标题都是什么转疯啦之类,虽然大多都也是广告啦,我觉得还蛮无聊的,但是的确是有一些文章是非常值得收藏的,比如老婆经常就会收藏一些养生和美容的文章在微信里看. 今天就突发奇想 ...
高通平台Android 蓝牙调试和配置手册--如何抓取log
1.Android蓝牙调试概述使用本文档可以使用以下方法调试一些常见的蓝牙问题: ■ Android主机日志(ADB logcat) ■ 蓝牙日志 ■ 音频配置文件日志 ■ 数据配置文件日志 ■ G ...
最全从零配置Fiddler实现抓取app数据（HTTPHTTPS）
文章目录 Fiddler软件设置手机设置 HTTP代理设置手机端安装证书(访问HTTPS) 信任证书(只有iOS需要) 注意事项 Fiddler软件设置下载好Fiddler之后如下设置: 记住这 ...
Linux云服务器下配置Scrapy并抓取数据
基础装备: Linux云服务器(阿里云Ubuntu 16.04): 建立远程连接的软件(这里用的是XShell): 友情链接: Scrapy入门教程:http://scrapy-chs.readt ...
Charles笔记-配置Charles代理抓取HTTP和HTTPS数据包，安卓模拟器连接Charles
这里要记住:雷电4是连不上的,有问题.我这里换成了逍遥7模拟器. Charles的版本是4.6.1 首先是代理配置: 把这2个都勾上: 然后是ssl的配置: 所有.com的443端口,都进行ssl 然 ...

golang 配置谷歌driver抓取

golang 配置谷歌driver抓取相关推荐

最新文章

热门文章