图库网站Unsplash高清原图爬虫

【摘要】写博客的好工具，快速获得高清图片

在百度图片爬虫小助手里，我开发了一个爬虫，来节约我写博客时搜集图片的时间。

但是，也出现了一些问题，主要有以下几点：

百度图片上的质量参差不齐，大部分图片质量不够
图片分辨率普遍不够
图片存在版权问题，许多图片存在水印或logo

针对上面的几个问题，我找了一个新的图库网站Unsplash来获得图片。

Unsplash首页

Unsplash上的图片都是免费的，因此不存在水印的问题，而且，针对同一图片，还提供不同尺寸（raw,full,regular,small,thumb），就我发博客这一需求而言，regular级别的图片已经可以满足。

进入Unsplash，打开F12开发者工具抓包，输入关键字boy，试图找到相关的request，得到了这些信息

上图红色框是接口地址，蓝色框中是向这个接口发送的入参，我们再看一下这个接口返回的数据。

红色框中返回了20条数据，正好对应的向接口发送的入参per_page:20(即每页返回20张图片信息)，查看每一张图片的信息，可以看到以下内容。

红色框中正是图片的URL地址，绿色框中用了一句话对图片进行大致描述，而蓝色框中可以看出，图片根据不同尺寸分了好几种规格，这应该是方便在不同的设备之间进行显示。

由于Unplash是国外的图库网站，因此并不支持中文查询。但这可难不倒我们，在网上找了个翻译接口将中文翻译成英文，就可以解决这个问题了，我采用的是百度的翻译接口，这里就不展开讲述了。

爬虫的流程

我们看一下爬虫的结果吧！

爬虫下载的“programmer”部分图片

爬虫下载的“boy”部分图片

可以看出，下载的图片质量是非常不错的。为了加速爬虫，并节约硬盘资源，我选择下载reular级别的图片，下面我们看一下这个级别的图片在博客上展示有没有什么问题。

总的来说，Unsplash上的图片质量是比百度图库要好的，但有些特殊的词，Unsplash收录的图片数量就没有百度图库多了，有时间再将Unsplash爬虫与百度爬虫结合起来，希望我的博客在编辑速度以及美观方面能有所提升。

来源：华为云社区作者：开飞机的大象

图库网站Unsplash高清原图爬虫相关推荐

Python爬虫实战 — — Wallhaven壁纸高清原图下载
Python爬虫实战 - - Wallhaven壁纸高清原图下载一.网站分析二.可行性分析三.代码分析 1.所需第三方库与请求头 2.获取当前页的所有壁纸图像链接 3.根据图像链接存储本地 4. ...
python 网络爬虫入门（四）— 破解pexels高清原图
最近貌似对好看的图着迷,Pixabay爬不到原图不甘心呀. 百度+知乎了下,于是转向pexels,同样一个高人气图片网站. 颜值逆天,画质不输Pixabay,瞬间感觉有了动力? 不到一下午就爬到高清原 ...
python爬虫实践（1）爬取图片网站的高清壁纸
python爬虫实践(1)爬取图片网站的高清壁纸 robots.txt协议: 爬取网站之前首先检查该站点根目录下是否存在robots.txt,如果存在,就会按照该文件中的内容来确定访问的范围:如果该文 ...
用Python爬取wallhaven高清原图
wallhaven高清原图爬取第一步:整理思路第二步:分析网址第三步:编写代码第一步:整理思路首先要知道自己要干嘛,怎么干,去哪里干?要干嘛?我们要爬取图片,而且我们要原图.怎么干?这里我用 ...
9个高质量、无版权的PPT素材网站，高清大图全搞定！
想必80%的人都做过PPT汇报吧,制作PPT时,素材非常重要,没有好看的素材会影响整个PPT的效果.今天分享8个我珍藏已久的高质量,且无版权的图片+配色素材网站. 每张图片都不需要登录就获取高清4K. ...
这6个超实用的图片素材网站，高清、免费，赶紧马住
推荐6个超实用的图片素材网站,高清无水印,绝对值得收藏! 1.菜鸟图库 https://www.sucai999.com/pic.html#?v=NTYxMjky 网站主要是为新手设计师提供免费素材的 ...
Python 3.5_简单上手、爬取百度图片的高清原图
利用工作之余的时间,学习Python差不多也有小一个月的时间了,路漫漫其修远兮,我依然是只菜鸟. 感觉学习新技术确实是一个痛并快乐着的过程,在此分享些心得和收获,并贴一个爬取百度图片原图的代码. 代码 ...
APP - 微信朋友圈如何发高清原图？
首先微信发朋友圈,是无法直接选择图片高清原图.本经验介绍一种如何间接发高清原图到朋友圈一般方法.适合 Android 和 IOS. 方法 / 步骤在手机上选择打开[微信]应用App,进入[微信]应用 ...
【第三期】电子元器件创意作品，附带高清原图，共计60张
来源:eemakes,排版:晓宇微信公众号:芯片之家(ID:chiphome-dy) 第一期 [第一期]电子元器件创意作品,附带高清原图第二期 [第二期]电子元器件创意作品,附带高清原图,共计40 ...
【第一期】电子元器件创意作品，附带高清原图
来源:eemakes,排版:晓宇微信公众号:芯片之家(ID:chiphome-dy) 这次不鸽了之前在粉丝群里就有跟大家零零散散的分享过一些用电子元器件制作的创意作品的图片,大家甚是喜欢,答应了大 ...

图库网站Unsplash高清原图爬虫

图库网站Unsplash高清原图爬虫相关推荐

最新文章

热门文章