使用selenium获取网页源码

安装好selenium和下载好WebDriver后即可测试。下面演示如何打开一个网址，并获取该网站的源码。

基本步骤如下：

1. 导入webdriver

from seleniumimport webdriver

2. 创建浏览器操作对象

指定下载的webdriver文件路径，我有将该文件复制到了当前程序运行的路径下，所以直接指定该文件名，否则加上路径即可。

path =“chromedriver.exe”

browser = webdriver.Chrome(path)

3. 访问一个指定的网站，我以百度为测试实例

url =“https://www.baidu.com”

browser.get(url)

4. 测试获取网页源码

content = browser.page_source

print(content)

能够完整的将网页源码获取：

使用selenium获取网页源码相关推荐

使用WebBrowser控件获取网页源码的方法
使用WebBrowser控件获取网页源码的方法,网上有很多介绍,但绝大多数的人都是使用以下的方法获取: (WebBrowser1.Document as IHtmlDocument2).body.ou ...
vc++获取网页源码之使用import+接口方式
1.使用IWinHttpRequest获取网页源码首先要创建基于对话框的mfc应用程序 2.import+接口方式首先导入winhttp.dll,使用IWinHttpRequest接口 #impo ...
POST教程笔记 - WinHttp获取网页源码
①.WinINet与WinHttp的异同点,为什么使用WinHttp讲解? 详情见:<WinINet与WinHttp总结>文档,已经打包给大家了. ②.WinHttp接口调用方式: 微软官 ...
webclient无法获取html文件,C# WebClient获取网页源码的方法
效果如图完整代码如下using System; using System.Collections.Generic; using System.ComponentModel; using System ...
[转载]关于webbrowser,innet,xmlhttp获取网页源码的比较！
webbrowser: 示例: For i = 0 To WebBrowser1.Document.All.length - 1 If WebBrowser1.Document.All(i) ...
PHP如何获取网页源码？
很多人可能会说那不是很简单直接 file_get_contents ,但是有的时候这样也是获取不到的那怎么办? 用CURL,某些不太懂得朋友可能会发现CURL也获取不到,其实是你没配置对有一个属 ...
Python 爬虫之爬虫的一些基本知识和基本操作（爬取视频、图片、获取网页源码等）整理
Python 爬虫之爬虫的一些基本知识和基本操作(爬取视频.图片.获取网页源码等)整理目录
使用request.get获取网页源码
使用request.get获取网页源码 request.get(url,headers),参数分别为网址和headers import requestsheaders = {'User-Agent': ...
Delphi XE下获取网页源码记录
存放个自己写的获取网页源码,掌握了: 1.利用CreateOLEObject方式获取源码 2.自动判断网页格式编码需要使用到的单元:Winapi.ActiveX,System.Win.ComObj, ...
C# -爬虫之WebBrowser跨域跨iframe获取网页源码
前言:这里关键写用WebBrowser跨域跨iframe获取网页源码的部分,本意是要爬取全职高手的有声小说,这类网站特殊,网页上广告大堆,爬起来真麻烦,比如我爬取的网站的mp3源文件下载还需要秘钥的, ...

使用selenium获取网页源码

使用selenium获取网页源码相关推荐

最新文章

热门文章