python 爬虫使用selenium 控制浏览器进行搜索操作

2024-05-10 03:14:51

首先需要安装selenium：

第一种：可以自己下载selenium tar.gz包，下载到python目录下：解压到当前文件夹

在cmd命令行：进入到解压包中，进行安装。安装完成之后，如果是eclipse中,请 clean project之后，

pydev才能识别新安装的包

第二种：可以直接使用在命令窗口： pip install selenium进行安装

==================================

使用selenium模拟浏览器登录时，需要下载对应浏览器的内核：

chorme内核的下载地址：注意根据自己浏览器版本进行对应下载：

点击下载

将chromedriver,放在chorme.exe启动的相同位置

python代码：

# -*- coding:utf-8 -*-

from selenium import webdriver

import os

#引入chromedriver.exe

chromedriver="C:/Program Files (x86)/Google/Chrome/Application/chromedriver.exe"

os.environ["webdriver.chrome.driver"] = chromedriver

browser = webdriver.Chrome(chromedriver)

#设置浏览器需要打开的url

url = "https://www.baidu.com/"

browser.get(url)

#在百度搜索框中输入关键字"python"

browser.find_element_by_id("kw").send_keys("python")

#单击搜索按钮

browser.find_element_by_id("su").click()

#关闭浏览器

#browser.quit()

=================以上是使用selenium进行模拟浏览器登录，需要打开浏览器，其实可以增加无头参数，不启动浏览器进行爬取操作。下次再写=====================

CSDN官方学习推荐 ↓ ↓ ↓

CSDN出的Python全栈知识图谱，太强了，推荐给大家！

python 爬虫使用selenium 控制浏览器进行搜索操作相关推荐

爬虫之selenium控制浏览器执行js代码
爬虫之selenium控制浏览器执行js代码 selenium可以让浏览器执行我们规定的js代码,运行下列代码查看运行效果 import time from selenium import webdr ...
python 模拟浏览器selenium_浅谈python爬虫使用Selenium模拟浏览器行为
前几天有位微信读者问我一个爬虫的问题,就是在爬去百度贴吧首页的热门动态下面的图片的时候,爬取的图片总是爬取不完整,比首页看到的少.原因他也大概分析了下,就是后面的图片是动态加载的.他的问题就是这部分动 ...
python爬虫：Selenium模拟浏览器爬取淘宝商品信息
1.数据提取前期网页分析分析:淘宝网页数据也是通过Ajax技术获取的,但是淘宝的API接口参数比较复杂,可能包含加密密匙等参数:所以,想要通过自己构造API接口获取完整网页信息很难实现(可能只有部分 ...
python 模拟浏览器下载文件-python爬虫:使用Selenium模拟浏览器行为
前几天有位微信读者问我一个爬虫的问题,就是在爬去百度贴吧首页的热门动态下面的图片的时候,爬取的图片总是爬取不完整,比首页看到的少.原因他也大概分析了下,就是后面的图片是动态加载的.他的问题就是这部分动 ...
python项目实战:selenium控制浏览器自动登录扣扣_zone
2019独角兽企业重金招聘Python工程师标准>>> 前言今天为大家介绍一个用Python的第三方库selenium来自动控制浏览器登录扣扣_zone的案例,selenium简直 ...
python爬虫之selenium,谷歌无头浏览器
python爬虫之selenium和PhantomJS 主要的内容 lenium hantomjs 无头浏览器的懒加载一什么是selenium? 介绍它是python中的一个第三方库,对外提供 ...
从入门到入土：Python爬虫学习|Selenium自动化模块学习|简单入门|轻松上手|自动操作浏览器进行处理|chrome|PART01
此博客仅用于记录个人学习进度,学识浅薄,若有错误观点欢迎评论区指出.欢迎各位前来交流.(部分材料来源网络,若有侵权,立即删除) 本人博客所有文章纯属学习之用,不涉及商业利益.不合适引用,自当删除! 若 ...
python 模拟浏览器selenium_python爬虫:使用Selenium模拟浏览器行为
前几天有位微信读者问我一个爬虫的问题,就是在爬去百度贴吧首页的热门动态下面的图片的时候,爬取的图片总是爬取不完整,比首页看到的少.原因他也大概分析了下,就是后面的图片是动态加载的.他的问题就是这部分动 ...
[Python爬虫]使用Selenium操作浏览器订购火车票
这个专题主要说的是Python在爬虫方面的应用,包括爬取和处理部分 [Python爬虫]使用Python爬取动态网页-腾讯动漫(Selenium) [Python爬虫]使用Python爬取静态网页-斗 ...

最新文章

热门文章