IT技术博客大学习 共学习 共进步
全部 移动开发 后端 数据库 AI 算法 安全 DevOps 前端 设计 开发者

全平台大文件断点续传上传技术 ( 开源项目 Stream )

扶凯 2014-11-07 10:28:54 累计浏览 3,648 次
本机暂存

近来看了一下大文件断点续传的开源项目, 发现了 Stream 这个好项目, 非常非常感谢作者. 然后我花了点时间, 简单的使用 Perl 来实现了一下相关的接口. 这个是非常好的用来解决不同浏览器上传文件的方案.

Stream 上传插件介绍

Stream 这个项目主要是为了解决大文件上传, 本程序只是它的一个 Perl 后端的实现. 项目网站是: http://www.twinkling.cn 原始地址是:http://git.oschina.net/jiangdx/stream/wikis/home. 因为它对 HTML5 和 Flash 都支持, 所以很合适做全功能的上传平台. 在这, 感谢作者为我们大家提供这么好的开源项目.

 支持HTML5、Flash两种方式(跨域)上传
支持多文件一起上传
HTML5方式支持断点续传,拖拽等新特性
兼容性好IE7+, FF3.6+, Chrome*,Safari4+,遨游等主流浏览器
选择文件的按钮完全可以自定义
进度条、速度、剩余时间等附属信息
基本的自定义属性及函数,如文件多选、上传成功的响应函数等
示例代码java实现(StreamServlet, FormDataServlet{commons-fileupload的stream api}, TokenServlet)
注:Chrome没测试最低版本,不想支持IE6

Stream 的 Perl 后端

本后端是使用 Perl 中常用的框架 Mojolicious 实现. 本程序做为后端接收上传过来的大文件的时候, 完全使用的是异步流式处理, 所以就算是单进程, 也可以处理多个上传的请求. 并且不会有多少内存的占用. 因为使用 Mojolicious 实现, 所以需要安装这个框架和一些相关的模块. Perl 中模块的安装需要使用 cpanm 所以先要下载 cpanm .

$ wget  http://xrl.us/cpanm  --no-check-certificate -O /sbin/cpanm
$ chmod +x  /sbin/cpanm

然后开始安装

$ cpanm Mojolicious EV Digest::MD5 

安装

这个 Perl 的后端的 stream 的实现文件都在项目 https://github.com/iakuf/mojolicious-stream-upload 中. 大家需要使用到其中二个文件 stream.pl 和 StreamUpload.conf 所以可以使用任何方法下载这个项目中的文件. 其中 stream.pl 是执行文件, StreamUpload.conf 是配置文件.

stream.pl 可以放在任何路径, StreamUpload.conf 请放到 '/etc' 的目录下.

配置

整个配置文件如下:

{    
   hypnotoad => {        
       listen => ['http://*:3008'],            
       user   => 'newupload',            
       group  => 'newupload',    
   },    
   UploadServer   => 'http://xxx.xxxx.com',    
   CrossOrigins   => 'http://xxx.xxxx.com',    
   FileRepository => '/tmp/',    
   debug          => 1,    
   log            => '/var/log/upload.log',
}

指定用户和组

user   => 'newupload'group  => 'newupload'

哪些域名的文件, 是可以接收并存储的

CrossOrigins   => 'http://xxx.xxx.com'

文件存储的目录

FileRepository => '/tmp/'

修改服务器启动的端口

listen => ['http://*:3008']

启动

hyphotoad 是一个常用的 Perl 后端的 Web 异步服务器, 为 Mojolicious 的原生配置. 多进程, 为 Unix 优化过. 所以使用它来启动,

$ hypnotoad stream.pl 

现在就可以直接打开这个服务器来进行测试了

同分类推荐文章

  1. 等了十年的 Go 链式管道,终于来了:seq 让你像写 Scala 一样写 Go (2026-06-25 18:38:18)
  2. Go 实验特性详解 (2026-06-21 10:05:27)
  3. amd64 微架构级别对 Go 程序性能提升多少? (2026-06-21 09:38:49)

查看更多 后端 文章 →

建议继续学习

  1. perl更新/修改/删除文本文件内容 (累计阅读 10,647)
  2. 介绍几个QQ开源项目及协议下载 (累计阅读 10,220)
  3. 10个强大的Ajax jQuery文件上传程序 (累计阅读 8,853)
  4. perl大牛flw传说 (累计阅读 7,713)
  5. AWStats是一个基于Perl的WEB日志分析工具。 (累计阅读 7,173)
  6. perl模块Getopt::Std用法及实例-从命令行读取参数模块 (累计阅读 7,017)
  7. [Perl] Template::Toolkit 模板技术. (累计阅读 6,344)
  8. PHP上传进度条深度解析 (累计阅读 6,018)
  9. Perl命令行常见用法及技巧 (累计阅读 5,912)
  10. PHP将死,何以为继? (累计阅读 5,917)