[会写代码的健身爱好者成长史]之Jsoup的简单使用

1.依赖

       <dependency><groupId>org.jsoup</groupId><artifactId>jsoup</artifactId><version>1.13.1</version></dependency>

2.工具类

解析网页，拿到数据，放到list集合里面

public List<Content> parseJD(String keyword) throws IOException {List<Content> contentList = new ArrayList<>();//获得请求String url = "https://search.xx.com/Search?keyword="+keyword;//解析地址,如果30s内解析不到就会报错// jsoup返回的 document 对象就是 js浏览器里面的document对象Document parse = Jsoup.parse(new URL(url), 30000);//先获取id=J_goodsList的大的一个商品divElement elementById = parse.getElementById("J_goodsList");//再获取包含一个个商品的li标签Elements li = elementById.getElementsByTag("li");//循环这个li,这里的li包含的就是一个个商品,商品有价格,名称,店铺名,图片地址等等for (Element element : li) {//为了用户体验,一般大厂的网页图片都懒加载,刚开始只会加载一个默认图片,正在的图片地址在这个data-lazy-img 里面,而不是在src里面String img = element.getElementsByTag("img").eq(0).attr("data-lazy-img");String price = element.getElementsByClass("p-price").eq(0).text();String name = element.getElementsByClass("p-name").eq(0).text();String shop = element.getElementsByClass("p-shopnum").eq(0).text();Content content = new Content();content.setImg(img);content.setPrice(price);content.setTitle(name);content.setShop(shop);contentList.add(content);}return contentList;}

3.相关实体类

@Data
public class Content {//myBatis-plus 的id自增@TableId(type = IdType.AUTO)private Integer id;private String title;private String price;private String img;private String shop;
}

[会写代码的健身爱好者成长史]之Jsoup的简单使用相关推荐

[会写代码的健身爱好者成长史]之spring-security
目录 1.什么是spring-security? 2.准备工作 2.1 添加依赖 2.2 相关实体类 2.3 sql建表语句 2.4 相关工具类 2.4.1 Jwt 2.4.2 redis工具类(但是 ...
[会写代码的健身爱好者成长史]之Elasticsearch
目录 1.安装 2.安装elasticsearch可视化工具 3.ik分词器 5.关于 elasticsearch的curd 1.创建一个索引 2.查询索引库 3.修改索引库内容 4.删除所有库 6. ...
已经是公元2023年了，一定还有这么写代码的人儿。看看是如何把简单的事情搞复杂的。
先来一道开胃菜. public class XXService {... private Boolean isTax(PurchaseBillItem purchaseBillItem) {if (p ...
编程同写作，写代码只是在码字
编程同写作,写代码只是在码字原文作者: Phodal Huang 原文链接看到一篇文章<We Are Typists First, Programmers Second>,日期是20 ...
ClownFish：比手写代码还快的通用数据访问层
最近花了二个月的业余时间重写了我以前的通用数据访问层, 由于是重写,所以我给这个项目取了个新名字:ClownFish 如果需要了解ClownFish的使用方法,请点击ClownFish 使用说明 Cl ...
写代码后你胖了几斤？（程序员健身的独特方式）
原文链接你觉得噼里啪啦敲键盘写代码时的你,是屠龙的勇士.登塔的先锋! 然而屏幕前这个形容憔悴的你,更像刚从80年代僵尸片的片场领了盒饭回来 . 你在幻想中严词拒绝了产品经理瞎改需求的要求,并把他 ...
程序员健身总动员：写代码后你胖了几斤？
原文链接你觉得噼里啪啦敲键盘写代码时的你,是屠龙的勇士.登塔的先锋! 然而屏幕前这个形容憔悴的你,更像刚从80年代僵尸片的片场领了盒饭回来 . 你在幻想中严词拒绝了产品经理瞎改需求的要求,并把他 ...
可旋转的2K显示器，写代码逼格要到位，免费包邮送到家
写代码如果有两个显示器事件很爽的事情,如果再来一个2K超清并且可以旋转的显示器.那会不会更爽呢! 阅读代码的时候将显示器竖着旋转一目了然,代码BUG多不多不重要,逼格先到位! 所以,小编联合几位公众号 ...
我为什么晚上写代码?
摘要:作为一个有点追求的程序员,应该每天练习写代码,而夜深人静的时候,似乎比较合适,至少对我来说是这样. 我可真没时间写代码写代码是我的工作,也是我的兴趣,本来以为,我应该可以一直写下去. 然而,现 ...

[会写代码的健身爱好者成长史]之Jsoup的简单使用

1.依赖

2.工具类

3.相关实体类

[会写代码的健身爱好者成长史]之Jsoup的简单使用相关推荐

最新文章

热门文章