Web scraper使用教程-基本用法

2024-06-01 10:43:47

课程：b站《web scraper使用教程》永恒君的百宝箱

Web Scraper 使用教程（一）安装_哔哩哔哩 (゜-゜)つロ干杯~-bilibili

Google浏览器

官方视频介绍：https://chrome.google.com/webstore/detail/web-scraper-free-web-scra/jnhgnonknehpejjnehehllkliplmbmhn/related

目录

1. 简介

2. 安装方法

3. 基本用法

4. 进阶用法

1. 简介

浏览器数据获取工具

chrome插件

跨平台

2. 安装方法

谷歌浏览器中直接搜索，或在谷歌应用商店中搜索web scaper即可

3. 基本用法

（1）启动界面

打开要爬取的界面，例如：https://www.797rs.com/news/news_list/id/10.html

按F12

（2）基本配置

开始创建、配置爬虫

create new sitemap-》Create sitemap-》输入名称和start url-》点击create sitemap

点击sitemaps可以看见所有创建的项目

点击刚才创建的项目rs-0226进入，点击 add new selector

填写Id（自己填写，便于区分即可，不可大写），Type（类型），

Selector 一般选择第一个Select（通过手动的鼠标去点击，点击后会自动生成代码），比如说点击标题，点击第二个标题时，发现全部的标题都成为了红色，红色就表示这些内容全部选中了

点完后，点击Done selecting

因为要选择多项，所以勾选Multiple

Parent selectors不改变，之后点击save selector

（3）运行爬虫

保存后便可以开始爬取

点击上面的Sitemap rs-0226(这是自己起的名字）-》scrape

Request interbal和 page load delay一般不变，直接点击 start scraping即可

爬取时会出现一个界面，爬取完后自动消失，爬取结束后点击refresh即可看到爬取内容

可以把这些数据保存下来

4. 进阶用法

见下篇文章：Web scraper使用教程-进阶用法

Web scraper使用教程-基本用法相关推荐

Web scraper使用教程-进阶用法（二）-爬取二级页面内容
进阶用法(二)-爬取二级页面内容 1. 爬取网址 https://docs.microsoft.com/en-us/officeupdates/update-history-microsoft365- ...
Web scraper 爬虫傻瓜教程（不断更新中）
教程安装基本操作打开Web scraper 使用Web scraper 创建爬取运行爬虫,查看数据这里讲一个复杂一点的例子帮助大家学习参考: 安装 Web scraper只支持chrome ...
Chrome 爬虫插件 Web Scraper
Web Scraper 官网:https://webscraper.io/ 有关webscraper的问题,看这个就够了(建议收藏): https://zhuanlan.zhihu.com/p/341 ...
web scraper 抓取网页数据的几个常见问题
如果你想抓取数据,又懒得写代码了,可以试试 web scraper 抓取数据. 相关文章: 最简单的数据抓取教程,人人都用得上 web scraper 进阶教程,人人都用得上如果你在使用 web s ...
使用 Chrome 浏览器插件 Web Scraper 10分钟轻松实现网页数据的爬取
web scraper 下载:Web-Scraper_v0.2.0.10 使用 Chrome 浏览器插件 Web Scraper 可以轻松实现网页数据的爬取,不写代码,鼠标操作,点哪爬哪,还不用考虑爬 ...
地图选择器怎么用_简易数据分析 15 | Web Scraper 高级用法——CSS 选择器的使用....
[ 这是简易数据分析系列的第 15 篇文章 ] 年末事情比较忙,很久不更新了,后台一直有读者催更,我看了一些读者给我的私信,发现一些通用的问题,所以单独写篇文章,介绍一些 Web Scraper 的进 ...
webscraper多页爬取_Web Scraper 高级用法——Web Scraper 抓取多条内容 | 简易数据分析 07...
这是简易数据分析系列的第 7 篇文章. 在第 4 篇文章里,我讲解了如何抓取单个网页里的单类信息: 在第 5 篇文章里,我讲解了如何抓取多个网页里的单类信息: 今天我们要讲的是,如何抓取多个网页里的多 ...
webscraper多页爬取_Web Scraper 翻页——抓取「滚动加载」类型网页（Web Scraper 高级用法）| 简易数据分析 10...
这是简易数据分析系列的第 10 篇文章. 友情提示:这一篇文章的内容较多,信息量比较大,希望大家学习的时候多看几遍. 我们在刷朋友圈刷微博的时候,总会强调一个『刷』字,因为看动态的时候,当把内容拉到屏 ...
1分钟轻松爬数据（web scraper插件使用教程）
1分钟轻松爬数据(web scraper插件使用教程) 前提你已安装web scraper(Google,FireBox商店都有). 说明:安装后右键查看元素或检查即可看到web scraper,简介 ...

最新文章

热门文章