java网络编程---使用URL爬取歌曲

前言

最近在学习狂神老师所讲的网络编程，get到了很对新技能。今天我跟大家分享一下如何使用URL爬取歌曲

1. URL

在WWW上，每一信息资源都有统一的且在网上唯一的地址，该地址就叫URL（Uniform Resource Locator,统一资源定位符），它是WWW的统一资源定位标志，就是指网络地址。它由四部分组成: 协议、主机、端口、路径.

举一个简单的例子: http://localhost:8080/helloworld/index.jsp?username=gs&password=123
http为该url的协议
localhost为该url的主机
8080位该主机的端口
index.jsp?username=gs&password=123为该url的完整路径

2.使用URL爬取想要的资源

package gs.lesson04;import java.io.FileOutputStream;
import java.io.InputStream;
import java.net.HttpURLConnection;
import java.net.MalformedURLException;
import java.net.URL;
import java.net.URLConnection;public class UrlDown {public static void main(String[] args)  {//1.下载地址URL url = null;try {url = new URL("http://m701.music.126.net/20200331152926/e340371950590da93ac96456e5cd88f6/jdyyaac/055a/020e/5458/208e69f5a75d98ab6cbac290f2b1f217.m4a");//2. 连接到这个资源 HTTPHttpURLConnection connection = (HttpURLConnection) url.openConnection();InputStream inputStream = connection.getInputStream();FileOutputStream fos = new FileOutputStream("ni.mp4");byte[] buff = new byte[1024];int len;while((len=inputStream.read(buff))!=1){fos.write(buff,0,len);}fos.close();inputStream.close();connection.disconnect(); //断开连接} catch (Exception e) {System.out.println(e.getCause());e.printStackTrace();}}
}

解析:
1.上面的代码我们先从第一步下载地址说起 url就是我们需要爬取的网络地址(这里以音乐做为实例)
打开一个音乐网站（如：网易云音乐）

审查元素–>NetWork

由于请求的速度不一样，如果你第一次没有看到该文件，你可以通过刷新提高request速度（在众多文件中找到.m4a结尾）

2 通过这个url获取相应的HTTP连接

 HttpURLConnection connection = (HttpURLConnection) url.openConnection();

3 因为网上所有的文件都是以流的形式进行传输的，我们获取到连接的相应输入流后，写入到我们磁盘上的某个文件

InputStream inputStream = connection.getInputStream();
FileOutputStream fos = new FileOutputStream("ni.mp4");
byte[] buff = new byte[1024];
int len;
while((len=inputStream.read(buff))!=1){fos.write(buff,0,len);}

4.关闭我们相应的流

fos.close();
inputStream.close();
connection.disconnect(); //断开连接

5.运行相应的程序后，我们可以看到生成了相应的音频文件

java网络编程---使用URL爬取歌曲相关推荐

Java 网络编程 03 —— URL下载资源
系列文章目录 Java 网络编程 01 -- Socket TCP通信 Java 网络编程 02 -- Socket UDP通信 Java 网络编程 03 -- URL下载资源文章目录系列文章目录 ...
java 网络爬虫（以爬取豆瓣为例）
文章目录一. 设计思路二. 功能概述三.运行状态图四.代码设计 1.设计一个类负责任意一个豆瓣电影详情网页的爬取. 2.设计一个类爬取 [豆瓣电影 Top 250](https://movie ...
教你如何使用Java代码从网页中爬取数据到数据库中——网络爬虫精华篇
文章目录 1:网络爬虫介绍 2:HttpClients类介绍 2.1 HttpGet参数问题 2.2 HttpPost参数问题 2.3 连接池技术问题 3:Jsoup介绍 4:动手实践如何抓取网页上数 ...
迈入JavaWeb第一步，Java网络编程基础，TCP网络编程URL网络编程等
文章目录网络编程概述网络通信要素要素一IP和端口号要素二网络协议 TCP网络编程 UDP网络编程 URL网络编程 Java网络编程基础网络编程概述 Java是Internet上的语言,它从语 ...
Java 网络编程：必知必会的 URL 和 URLConnection
java.net.URL 类将 URL 地址进行了封装,并提供了解析 URL 地址的基本方法,比如获取 URL 的主机名和端口号.java.net.URLConnection 则代表了应用程序和 UR ...
Java爬虫_资源网站爬取实战
对 http://bestcbooks.com/ 这个网站的书籍进行爬取 (爬取资源分享在结尾) 下面是通过一个URL获得其对应网页源码的方法传入一个 url 返回其源码 (获得源码后,对源码进 ...
Java网络编程（自己在学习的一些路线）
Java网络编程 1. 协议与URL 这个可以参考我在python写的相关文档. 2. maven Maven 是一个项目管理和构建自动化工具.但是对于我们程序员来说,我们最关心的是它的项目构建功能. ...
java 使用webmagic 爬虫框架爬取博客园数据
java 使用webmagic 爬虫框架爬取博客园数据存入数据库学习记录 webmagic简介: WebMagic是一个简单灵活的Java爬虫框架.你可以快速开发出一个高效.易维护的爬虫. ht ...
java爬虫的2种爬取方式（HTTP||Socket）简单Demo(一)
转载自 java爬虫的2种爬取方式(HTTP||Socket)简单Demo(一) 最近在找java的小项目自己写着玩,但是找不到合适的,于是写开始学一点爬虫,自己也是感觉爬虫比较有趣.这里自己找了一个 ...

java网络编程---使用URL爬取歌曲

前言

1. URL

2.使用URL爬取想要的资源

java网络编程---使用URL爬取歌曲相关推荐

最新文章

热门文章