PHP大文件分片上传

tommego 发布于2019-07-01 12:27 / 1742人阅读

摘要：分片上传主要是前端将一个较大的文件分成等分的几片，标识当前分片是第几片和总共几片，待所有的分片均上传成功的时候，在后台进行合成文件即可。

一、前言

在网站开发中，经常会有上传文件的需求，有的文件size太大直接上传，经常会导致上传过程中耗时太久，大量占用带宽资源，因此有了分片上传。

分片上传主要是前端将一个较大的文件分成等分的几片，标识当前分片是第几片和总共几片，待所有的分片均上传成功的时候，在后台进行合成文件即可。

二、开发过程中遇到的问题

分片的时候每片该分多大size？太大会出现“413 request entity too large”

分片上传的时候并不是严格按照分片的序号顺序上传，如何判断所有的分片均上传成功？

合成文件的时候如何判断保证合成一个完整的文件而不出错？多个分片同时上传的时候，读写文件没有独占锁的时候会导致合成错误。

三、问题解决

当出现413的时候，修改了 nginx.conf 和php.ini
（1）nginx中添加client_max_body_size和client_body_buffer_size
（2）php.ini添加post_max_size 和 upload_max_filesize

重启nginx和php-fpm

代码逻辑梳理和分享

    （1）先获取当前分片是第几片以及总共几片

    （2）创建一个文件夹用来存储所有的分片以及合成的文件

    （3）变量$done初始为true,用来判断是否所有的分片都上传完成，每个分片保存的时候使用分片序号作为文件名，然后判断所有的分片文件是否存在

    (4)当$done===true的时候，代表所有分片上传完成，合成文件。     
       $target变量代表合成后的文件名，file_exists判断是否已经合成成功，然后追加方式创建打开文件，循环将每个分片内容写入一个文件中。
       在读取每个分片之前先判断当前分片是否存在，是为了防止多个进程执行合成文件代码块的时候导致某个分片已经写入删除，最后导致合成的文件是不完整的，此时需要删除合成的不完整的文件并退出exit当前进程。
       其中每个分片最好设置独占锁，flock($in, LOCK_EX)，用来保证读写分片的时候其他进程不会操作该分片。最后删除分片unlink以及释放独占锁。

云服务器 GPU云服务器大文件php上传 php拖拽上传大文件分片上传分片上传大文件上传

文章版权归作者所有，未经允许请勿转载,若此文章存在违规行为，您可以联系管理员删除。

转载请注明本文地址：https://www.ucloud.cn/yun/30753.html

关于七牛云正确使用姿势探索

摘要：，在后续测试时遇到一个诡异，当文件过大时，任务脚本上传到七牛云失败。当我遇到大文件无法上传到七牛云时，断点调试到这里，发现返回的是。后来还真被我找到了，七牛云官方提供一个脚本工具。业务场景需求我们项目有一个文件上传需求，需要从客户端上传到七牛云的对象存储和自己的应用服务器上。这里使用七牛云主要是实现下载分发。应用服务器需要留一份是因为后续需要做文件分析（并且是上传后需要立马分析出...

3fuyu 2019-07-01 12:39 评论0 收藏0
在Vue项目中使用WebUploader实现文件上传

摘要：简介是由团队开发的一个简单的以为主，为辅的现代文件上传组件。采用大文件分片并发上传，极大的提高了文件上传效率。另外分片传输能够更加实时的跟踪上传进度。选择文件的按钮。简介：WebUploader是由Baidu WebFE(FEX)团队开发的一个简单的以HTML5为主，FLASH为辅的现代文件上传组件。在现代的浏览器里面能充分发挥HTML5的优势，同时又不摒弃主流IE浏览器，沿用原来的...

mindwind 2019-08-02 15:35 评论0 收藏0
在Vue项目中使用WebUploader实现文件上传

摘要：简介是由团队开发的一个简单的以为主，为辅的现代文件上传组件。采用大文件分片并发上传，极大的提高了文件上传效率。另外分片传输能够更加实时的跟踪上传进度。选择文件的按钮。简介：WebUploader是由Baidu WebFE(FEX)团队开发的一个简单的以HTML5为主，FLASH为辅的现代文件上传组件。在现代的浏览器里面能充分发挥HTML5的优势，同时又不摒弃主流IE浏览器，沿用原来的...

endiat 2019-08-26 10:14 评论0 收藏0
在Vue项目中使用WebUploader实现文件上传

摘要：简介是由团队开发的一个简单的以为主，为辅的现代文件上传组件。采用大文件分片并发上传，极大的提高了文件上传效率。另外分片传输能够更加实时的跟踪上传进度。选择文件的按钮。简介：WebUploader是由Baidu WebFE(FEX)团队开发的一个简单的以HTML5为主，FLASH为辅的现代文件上传组件。在现代的浏览器里面能充分发挥HTML5的优势，同时又不摒弃主流IE浏览器，沿用原来的...

funnyZhang 2019-08-30 11:27 评论0 收藏0