springcloud 文件服务器,SpringCloud传文件
最近要做个需求: 手机app上传视频文件到服务器, 文件可能有几百兆字节。 但目前尚没有使用七牛等类似的文件服务器,要自己实现这个功能。 考虑方案:
1、单文件断点续传, 即只有1个线程使用multipart方式从客户端上传文件, 服务器每接收完一个part则保存到文件。 优点:实现比较简单;
缺点:1、单线程慢, 由于传输时间长,传输中很可能中断。
2、由于长时间阻塞服务器线程, 可能出现网络拥塞情况。
2、切片上传, 即将大文件分割成若干片在多线程并发上传。 举例: 待传文件大小为201M字节, 按照每5M逻辑上切割为41段(其实就是从不同的位置开始传,切片大则传输时间长且易失败);假设使用5个线程并发上传, 理论上比上一种方案减少了80%的上传时间。
缺点:实现较复杂, 上传的每段字节流在服务器上都是一个单独的文件(逻辑上的中间文件), 服务器要判断所有切片都上传完成后做文件合并,并删除切片文件; 服务器要做定时任务, 删除长时间无效的中间文件。 如果一个切片上传失败则需要从头再传。
优点:上传速度快,比上一个方案成功率高。
3、切片断点续传, 即将大文件视为由若干段小文件组成, 在上一个方案基础上添加各个切片的断点续传功能。
缺点:实现最复杂, 每次上传前要跟服务器同步一下各个切片的上传状态(即文件预期总大小、当前文件大小等), 以服务器为准。
优点:最快且省流量。
4、为了保证文件传输过程中的数据可靠性( 传输层有可能丢包 ),可以添加CRC校验码。 即客户端计算所传输文件数据的校验码, 服务器接收到文件数据后计算校验码是否匹配。 如果不匹配,说明数据不完整, 需要客户端重传;如果匹配则走正常流程。
按照第2种方案的思路, 使用SpringCloud实现一个上传文件服务。 新建一个AndroidStudio工程,配置pom.xml
SpringCloudFileSvr
Demo project for Spring Boot
org.springframework.boot
spring-boot-starter-parent
1.5.9.RELEASE
UTF-8
UTF-8
1.8
Edgware.RELEASE
org.springframework.cloud
spring-cloud-starter-eureka
org.springframework.cloud
spring-cloud-starter-zuul
org.springframework.boot
spring-boot-starter-web
org.springframework.boot
spring-boot-starter-test
test
org.springframework.cloud
spring-cloud-dependencies
${spring-cloud.version}
pom
import
org.springframework.boot
spring-boot-maven-plugin
其中的注册中心、zuul网关在下面的demo中没用到, 但实际项目中肯定要用。
为了测试方便写个网页, 注释里已提醒name字段值使用在http包体的multipart中, 代码里要用到这个值。 action值是在Controller类中配置的, 建议层级深一些,方便zuul路由和区分各个业务。
上传文件
请选择文件:
修改application.yml, 添加multipart属性。
server:
port: 9000
eureka:
client:
serviceUrl:
defaultZone: http://localhost:8761/eureka/
instance:
prefer-ip-address: true
spring:
application:
name: fileserver
http:
multipart:
max-file-size: 5Mb # Max file size
max-request-size: 5Mb # Max request size
新建controller类, 将文件存储到服务器的一个目录中。
@RestController
@RequestMapping(value = "/fileserver/pictures")
public class PictureController {
private final String CATEGORY_TEST = "pics";
@RequestMapping(value = "test")
@ResponseBody
public String testFileServer() {
return "文件服务器已启动";
}
/**
* 上传文件。
* @param file, 文件字节流, 其中filename是multipart中的变量名称
* @return
*/
@RequestMapping(value = "/upload", method = RequestMethod.POST)
@ResponseBody
public PictureResp uploadFile(/**HttpServletRequest request, 拿到请求的所有信息 */
//@RequestHeader(value = "Range") String range, //大文件分段上传,格式: Range: start-end/total
@RequestHeader(value = "Content-Type") String type,
//@RequestParam(value = "signparam") String data, //在http包体里添加验签的json
@RequestParam(value = "filename", required = true)MultipartFile file) {
//System.out.println(request.getHeader("Content-Type")); //文件分片或断点续传需要Range头,表示字节流对应原始文件的位置
System.out.println("请求类型:" + type);
PictureResp resp = new PictureResp();
try {
File dir = new File(CATEGORY_TEST);
if (!dir.exists()) {
dir.mkdirs(); //判断并创建文件夹
}
byte[] bytes = file.getBytes(); //文件字节流
File fileToSave = new File(dir.getAbsolutePath() + File.separator + file.getOriginalFilename());
FileCopyUtils.copy(bytes, fileToSave); //保存文件
//数据表里要存储原始文件名、用户id、时间戳、服务器生成的文件名, 客户端文件起始位置start、客户端文件终止位置end、客户端文件大小total等
resp.setStatus(0);
resp.setSize(fileToSave.length());
resp.setPath(fileToSave.getPath());
} catch (IOException ex) {
ex.printStackTrace();
resp.setStatus(1); //失败
}
return resp;
}
}
运行服务并在浏览器中输入: localhost:9000/index.html
选择电脑里的文件(要小于5M)后,
点击“上传”按钮后网页会显示结果
{"status":0,"size":135017,"index":0,"path":"/Users/***/AndroidStudioProjects/SpringCloudFileSvr/pics/jmeter.log"}
demo仅实现了单文件上传功能, 后续应创建数据表存储各个切片的信息, 用于合并文件或删除过期中间文件时使用。
代码: http://download.csdn.net/download/brycegao321/10158457
springcloud 文件服务器,SpringCloud传文件相关推荐
- Tomcat文件服务器上传文件出错
Tomcat文件服务器上传文件出错 在Tomcat的web.xml里org.apache.catalina.servlets.DefaultServlet节点加上这段代码 <init-param ...
- 文件服务器上传文件流程,上传文件到服务器流程
上传文件到服务器流程 内容精选 换一换 安装传输工具在本地主机和Windows云服务器上分别安装数据传输工具,将文件上传到云服务器.例如QQ.exe.在本地主机和Windows云服务器上分别安装数据传 ...
- 文件服务器上传文件的过程,文件服务器上传文件实现过程【分享】
写本帖的目的是,论坛经常有咨询或反馈文件服务器问题. 本帖准备把文件服务器整个的实现过程讲清楚. 以方便相关问题的或达到问题自查的目的. 1.文件服务器 其实是IIS的一个站点. 前端(说的前端是Si ...
- Java springcloud B2B2C o2o多用户商城 springcloud架构 (十七)上传文件
2019独角兽企业重金招聘Python工程师标准>>> 这篇文章主要介绍,如何在springboot工程作为服务器,去接收通过http 上传的multi-file的文件. 构建工程 ...
- springcloud上传文件报错
Spring Cloud上传文件报如下错误: The temporary upload location [/tmp/tomcat.5260880110861696164.8090/work/Tomc ...
- 文件已上传服务器去哪找,ftp文件服务器上传后的文件在哪
ftp文件服务器上传后的文件在哪 内容精选 换一换 FTP/SFTP连接适用于从线下文件服务器或ECS服务器上迁移文件到OBS或数据库.当前仅支持Linux操作系统的FTP 服务器.连接FTP或SFT ...
- 云服务器可以文件服务器,云服务器 可以上传文件
云服务器 可以上传文件 内容精选 换一换 安装传输工具在本地主机和Windows云服务器上分别安装数据传输工具,将文件上传到云服务器.例如QQ.exe.在本地主机和Windows云服务器上分别安装数据 ...
- 向上传文件服务器,向服务器上传文件
//--------------------向服务器上传文件------ //浏览选择需要上传的文件 private static bool Unzip(string address, string ...
- iPhone 共享 文件服务器,iPhone手机打开服务器功能,和Windows电脑互传文件方法
iPhone手机打开服务器功能,和Windows电脑互传文件方法 PC端设置: 一.在计算机端新建一个文件夹,例如取名为:"iphone共享文件". 二.然后右键点击文件夹属,点击 ...
最新文章
- mysql jdbc tomcat_Tomcat+MySql+jdbc
- OpenvSwitch — 操作实践
- 可视化计算java_Java可视化计算器
- ZetCode C#/vb.net 教程
- php 检查语法命令,php语法检查的方法有哪些?(代码示例)
- LeetCode刷题开源手册
- sqli-labs Less-11 and Less-12
- 一行命令搞定node.js 版本升级
- Unity中Lua造成的堆内存泄露问题
- 如果你学习C 请不要选择DevCpp
- Activiti7的进阶使用
- MySQL(5)条件查询 | 单行函数 | 事务详解
- 你想要的宏基因组-微生物组知识全在这(2020.11)
- 塑源码是什么_朔源码燕窝就没有问题货吗?朔源码和非朔源码燕窝该如何选择?...
- hangfire mysql_.NET之Hangfire快速入门和使用
- 12864oled显示屏专业程序【仅供参考】
- linux重装出现cannot load file 5555h,技术员教你解决win7系统重装开机提示cannot load file code:5555h的操作方案...
- 网络电视测试软件,电视屏幕检测(三款智能电视屏幕检测软件)
- [转] 程序员才懂的58张图片,哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈
- DDD解决软件系统腐化之道
热门文章
- ps原始数据清理脚本_创建地形模型一步到位!PS最新2019全球首款3D地形生成插件送给你...
- 2020-10-13 四元数用法(不讲原理,只讲计算规则)
- [bzoj 5332][SDOI2018]旧试题
- HDU 1232 - 畅通工程
- eclipse 安装tomcat
- 《第一行代码》学习笔记24-持久化技术(3)
- c#和VB混用出现的错误
- Docker删除镜像
- mybatis自我总结
- 牛客网Java刷题知识点之字节缓冲区练习之从A处复制文本文件到B处(BufferedReader、BufferedWriter)、复制文本文件的原理图解...