您的位置：首页 > 编程技术 > php  >  PHP如何搭建大文件切割分块上传功能的实例代码

PHP如何搭建大文件切割分块上传功能的实例代码

 更新时间：2017年1月22日 11:08  点击：2082
小编给大家分享一篇文章，介绍了PHP如何搭建大文件切割分块上传功能的实例代码，有兴趣的同学可以看看！

背景

在网站开发中，文件上传是很常见的一个功能。相信很多人都会遇到这种情况，想传一个文件上去，然后网页提示“该文件过大”。因为一般情况下，我们都需要对上传的文件大小做限制，防止出现意外的情况。
 但是在有些业务场景中，大文件上传又是必须的，比如邮箱附件，或者内部OA等等。

问题

服务端为什么不能直接传大文件？跟php.ini里面的几个配置有关

upload_max_filesize = 2M//PHP最大能接受的文件大小
post_max_size = 8M//PHP能收到的最大POST值'
memory_limit = 128M//内存上限
max_execution_time = 30//最大执行时间

当然不能简单粗暴的把上面几个值调大，否则服务器内存资源吃光是迟早的问题。

解决思路

好在HTML5开放了新的FILE API，也可以直接操作二进制对象，我们可以直接在浏览器端实现文件切割，按照以前的做法就得用Flash的方案，实现起来会麻烦很多。

JS思路

1.监听上传按钮的onchange事件

2.获取文件的FILE对象

3.把文件的FILE对象进行切割，并且附加到FORMDATA对象中

4.把FORMDATA对象通过AJAX发送到服务器

5.重复3、4步骤，直到文件发送完。

PHP思路

1.建立上传文件夹

2.把文件从上传临时目录移动到上传文件夹

3.所有的文件块上传完成后，进行文件合成

4.删除文件夹

5.返回上传后的文件路径

DEMO代码

前端部分代码

 
 代码如下 复制代码
<!doctype html>
<html lang="en">
<head>
 <meta charset="UTF-8">
 <meta name="viewport"
   content="width=device-width, user-scalable=no, initial-scale=1.0, maximum-scale=1.0, minimum-scale=1.0">
 <meta http-equiv="X-UA-Compatible"content="ie=edge">
 <title>Document</title>
 <style>
  #progress{
   width: 300px;
   height: 20px;
   background-color:#f7f7f7;
   box-shadow:inset 0 1px 2px rgba(0,0,0,0.1);
   border-radius:4px;
   background-image:linear-gradient(to bottom,#f5f5f5,#f9f9f9);
  }
 
  #finish{
   background-color:#149bdf;
   background-image:linear-gradient(45deg,rgba(255,255,255,0.15) 25%,transparent 25%,transparent 50%,rgba(255,255,255,0.15) 50%,rgba(255,255,255,0.15) 75%,transparent 75%,transparent);
   background-size:40px 40px;
   height: 100%;
  }
  form{
   margin-top: 50px;
  }
 </style>
</head>
<body>
<div id="progress">
 <div id="finish"style="width: 0%;"progress="0"></div>
</div>
<form action="./upload.php">
 <input type="file"name="file"id="file">
 <input type="button"value="停止"id="stop">
</form>
<script>
 varfileForm = document.getElementById("file");
 varstopBtn = document.getElementById('stop');
 varupload =newUpload();
 
 fileForm.onchange =function(){
  upload.addFileAndSend(this);
 }
 
 stopBtn.onclick =function(){
  this.value ="停止中";
  upload.stop();
  this.value ="已停止";
 }
 
 functionUpload(){
  varxhr =newXMLHttpRequest();
  varform_data =newFormData();
  const LENGTH = 1024 * 1024;
  varstart = 0;
  varend = start + LENGTH;
  varblob;
  varblob_num = 1;
  varis_stop = 0
  //对外方法，传入文件对象
  this.addFileAndSend =function(that){
   varfile = that.files[0];
   blob = cutFile(file);
   sendFile(blob,file);
   blob_num += 1;
  }
  //停止文件上传
  this.stop =function(){
   xhr.abort();
   is_stop = 1;
  }
  //切割文件
  functioncutFile(file){
   varfile_blob = file.slice(start,end);
   start = end;
   end = start + LENGTH;
   returnfile_blob;
  };
  //发送文件
  functionsendFile(blob,file){
   vartotal_blob_num = Math.ceil(file.size / LENGTH);
   form_data.append('file',blob);
   form_data.append('blob_num',blob_num);
   form_data.append('total_blob_num',total_blob_num);
   form_data.append('file_name',file.name);
 
   xhr.open('POST','./upload.php',false);
   xhr.onreadystatechange =function() {
    varprogress;
    varprogressObj = document.getElementById('finish');
    if(total_blob_num == 1){
     progress ='100%';
    }else{
     progress = Math.min(100,(blob_num/total_blob_num)* 100 ) +'%';
    }
    progressObj.style.width = progress;
    vart = setTimeout(function(){
     if(start < file.size && is_stop === 0){
      blob = cutFile(file);
      sendFile(blob,file);
      blob_num += 1;
     }else{
      setTimeout(t);
     }
    },1000);
   }
   xhr.send(form_data);
  }
 }
 
</script>
</body>
</html>
 

PHP部分代码

 
 代码如下 复制代码
<?php
classUpload{
 private$filepath='./upload';//上传目录
 private$tmpPath;//PHP文件临时目录
 private$blobNum;//第几个文件块
 private$totalBlobNum;//文件块总数
 private$fileName;//文件名
 
 publicfunction__construct($tmpPath,$blobNum,$totalBlobNum,$fileName){
  $this->tmpPath =$tmpPath;
  $this->blobNum =$blobNum;
  $this->totalBlobNum =$totalBlobNum;
  $this->fileName =$fileName;
   
  $this->moveFile();
  $this->fileMerge();
 }
  
 //判断是否是最后一块，如果是则进行文件合成并且删除文件块
 privatefunctionfileMerge(){
  if($this->blobNum ==$this->totalBlobNum){
   $blob='';
   for($i=1;$i<=$this->totalBlobNum;$i++){
    $blob.=file_get_contents($this->filepath.'/'.$this->fileName.'__'.$i);
   }
   file_put_contents($this->filepath.'/'.$this->fileName,$blob);
   $this->deleteFileBlob();
  }
 }
  
 //删除文件块
 privatefunctiondeleteFileBlob(){
  for($i=1;$i<=$this->totalBlobNum;$i++){
   @unlink($this->filepath.'/'.$this->fileName.'__'.$i);
  }
 }
  
 //移动文件
 privatefunctionmoveFile(){
  $this->touchDir();
  $filename=$this->filepath.'/'.$this->fileName.'__'.$this->blobNum;
  move_uploaded_file($this->tmpPath,$filename);
 }
  
 //API返回数据
 publicfunctionapiReturn(){
  if($this->blobNum ==$this->totalBlobNum){
    if(file_exists($this->filepath.'/'.$this->fileName)){
     $data['code'] = 2;
     $data['msg'] ='success';
     $data['file_path'] ='http://'.$_SERVER['HTTP_HOST'].dirname($_SERVER['DOCUMENT_URI']).str_replace('.','',$this->filepath).'/'.$this->fileName;
    }
  }else{
    if(file_exists($this->filepath.'/'.$this->fileName.'__'.$this->blobNum)){
     $data['code'] = 1;
     $data['msg'] ='waiting for all';
     $data['file_path'] ='';
    }
  }
  header('Content-type: application/json');
  echojson_encode($data);
 }
  
 //建立上传文件夹
 privatefunctiontouchDir(){
  if(!file_exists($this->filepath)){
   returnmkdir($this->filepath);
  }
 }
}
 
//实例化并获取系统变量传参
$upload=newUpload($_FILES['file']['tmp_name'],$_POST['blob_num'],$_POST['total_blob_num'],$_POST['file_name']);
//调用方法，返回结果
$upload->apiReturn();
 

存在的问题

这只是一个简单的DEMO，有很多地方需要改进，比如上传的文件夹与临时文件放在一起，用户中途取消也没有发请求进行清理，容易造成文件冗余。JS采用的是同步模型，文件需要一块一块按顺序上传，会导致整个浏览器在上传的过程中出于堵塞的状态，按了按钮可能需要几秒钟才能反应过来，用户体验不好。真正需要产品化的时候就要综合考虑多种情况，当然作为一个示例，引导大家了解分块上传的思路还是不错的。

小编推荐的这篇文章介绍了php与c实现按行读取文件的实例代码，有需要的同学可以参考一下

php与c 实现按行读取文件

前言

感觉很糟糕的一场电话一面竟然给了二面通知，好吧，给自己一个机会也给对方一次机会，题外话。海量数据处理经常涉及到hash将原来文件的每一行散列到子文件中，那如何按行读取文件呢，这里记录一下php和c的实现

很水的一篇，只是记录一下常用的方法，防止面试尴尬

php代码：

 
 代码如下 复制代码
<?php
  
/**
 * 按行读取文件
 * @param string $filename
 */
functionreadFileByLine ($filename)
{
  $fh=fopen($filename,'r');
    
  while(!feof($fh)) {
    $line=fgets($fh);
    echo$line;
  }
    
  fclose($fh);
}
  
// test
  
$filename="/home/wzy/test/sort.txt";
  
readFileByLine($filename);
 

c实现代码：

 
 代码如下 复制代码
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
  
#define LEN 1024
  
intmain(void)
{
  charfilename[LEN], buf[LEN];
  FILE*fp;
  intlen;
  
  scanf("%s", filename);
  
  fp =fopen(filename,"r");
  
  if(fp == NULL)exit(-1);
  
  while(fgets(buf, LEN, fp) != NULL) {
    len =strlen(buf);
    buf[len - 1] ='\0'; // 去掉换行符
  
    printf("%s\n", buf);
  }
  
  return0;
}
 
这篇文章介绍了php中常用的数组与函数，非常具有价值，有兴趣的同学可以参考一下

本文实例总结了php常用数组函数。分享给大家供大家参考，具体如下：

1. array array_merge(array $array1 [, array&nbsp; $array2 [, $array]])

函数功能：将一个或多个数组的单元合并起来，一个数组中的值附加在前一个数组的后面。返回结果的数组。

如果输入的数组中有相同的字符串键名，则该键名后面的值将覆盖前一个值。然而，如果数组包含数字键名，后面的值将不会覆盖原来的值，而是附加到后面。

如果只给了一个数组并且该数组是数字索引的，则键名会以连续方式重新索引。

例1：数组中有相同的字符串键名

 
 代码如下 复制代码
$array1=array('color'=>'greed','3'=>8);
$array2=array("a",'color'=>"red",'3'=>8);
var_dump(array_merge($array1,$array2));
 

输出：

 
 代码如下 复制代码
array（4）{
  ["color"]=> string(3)"red"
  [0]=> int(8)
  [1]=> string(1)"a"
  [2]=> int(8)
}
 

键名重复的color被覆盖，只取后面的值‘red'，而数字键名相同的‘3'未被覆盖，而是附加到后面。

2. array array_slice(array $array,int $offset, [, int $length [, bool  $preserve_keys ]])

函数功能：返回根据offset和length参数所指定的array数组中的一段序列。

如果offset非负：则数组将从开始端到offset的偏移量开始。$array=array(1,2,3,4,5,6);array_slice($array,2);相当于(1,2,3,4,5,6);红色代表截取后的数组

如果offset为负：则数组将从末端到offset的偏移量开始。array_slice($array,-2);相当于(1,2,3,4,5,6);

如果length为正：从offset开始的截取的个数。array_slice($array,2，2);相当于(1,2,3,4,5,6);

如果length为负：则序列将终止在距离数组末端这么远的地方；array_slice($array,2，-1);相当于(1,2,3,4,5,6);
默认为：到数组末尾。

3. array_map(callback  $callback , array  $arr1[, array $.....])

函数功能：返回一个数组，该数组包含了arr1中的所有单元经过callback作用后的单元。callback 接受的参数数目应该和传递给 array_map() 函数的数组数目一致。

 
 代码如下 复制代码
<?php
functioncube($n)
{
  return($n*$n*$n);
}
$a=array(1, 2, 3, 4, 5);
$b=array_map("cube",$a);
print_r($b);
?>
 

输出：

 
 代码如下 复制代码
Array
(
  [0] => 1
  [1] => 8
  [2] => 27
  [3] => 64
  [4] => 125
)
 
这篇文章分享了php中preg_match匹配不同国家语言的实例代码，工作学习中非常有用，有兴趣的同学可以试试

php preg_match的匹配不同国家语言实例

正则：[\S]{2,32}

过滤是管用的

PHP中：

 
 代码如下 复制代码
<?php
var_dump( preg_match("/[\S\b]{2,32}/",'ج') );
echo'<hr />';
var_dump( preg_match("/[\S\b]{2,32}/",'中国') );
 

是不行的

需要加一个参数u，按照uniode来读码

 
 代码如下 复制代码
<?php
var_dump( preg_match("/[\S\b]{2,32}/u",'ج') );
echo'<hr />';
var_dump( preg_match("/[\S\b]{2,32}/u",'中国') );
echo'<hr />';
var_dump( preg_match("/[\S\b]{2,32}/u",'Дракон') );
echo'<hr />';
var_dump( preg_match("/[\S\b]{2,32}/u",'cc') );
 
[!--infotagslink--]

相关文章

  • 几分钟搞懂c#之FileStream对象读写大文件(推荐)

    这篇文章主要介绍了c#之FileStream对象读写大文件，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧...2020-06-25

  • Unity使用EzySlice实现模型多边形顺序切割

    这篇文章主要为大家详细介绍了Unity使用EzySlice实现模型多边形顺序切割，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下...2020-11-03

  • C#使用FileStream循环读取大文件数据的方法示例

    这篇文章主要介绍了C#使用FileStream循环读取大文件数据的方法,结合实例形式分析了FileStream文件流的形式循环读取大文件的相关操作技巧,需要的朋友可以参考下...2020-06-25

  • C#实现图片切割、切图、裁剪

    这篇文章主要为大家详细介绍了C#实现图片切割、切图、裁剪，具有一定的参考价值，感兴趣的小伙伴们可以参考一下...2020-06-25

  • 修改PHP配置文件上传大文件几种方法(apache/nginx)

    在php.ini中如果我们不对 post_max_size,upload_max_filesize 这些参数进行修改，默认最多只能上传2MB的文件了，如果几十MB或更大的就无法上传了，下面我来介绍修改PHP配置...2016-11-25

  • Linux系统下nginx日志每天定时切割的脚本写法

    本篇文章给大家分享使用Linux系统自带的命令logrotate对Nginx日志进行切割的方法，对nginx日志切割脚本感兴趣的朋友一起学习吧...2016-11-22

  • .NET的file文件上传控件使用方法 修改web.config文件上传大文件

    这篇文章主要介绍了.NET修改web.config文件上传大文件的方法，大家参考使用吧...2021-09-22

  • php下载远程大文件的实例

    本篇文章结合实例为大家介绍了php下载远程大文件(获取远程文件大小)的方法，有需要的朋友就来参考一下吧。 废话不多说，直接上代码 代码如下复制代码 <?php /...2017-07-06

  • php+resumablejs实现的分块上传 断点续传功能示例

    这篇文章主要介绍了php+resumablejs实现的分块上传 断点续传功能,结合实例形式分析了php+resumablejs文件传输的具体实现步骤与相关操作技巧,需要的朋友可以参考下...2017-04-26

  • php读取超大文件实现例子

    需求如下： 现有一个1G左右的日志文件,大约有500多万行， 用php返回最后几行的内容，如果我们使用常用的方法估计就直接卡死了，后看到一站长写了这文章整理了一下使用起来非...2016-11-25

  • PHP如何搭建大文件切割分块上传功能的实例代码

    小编给大家分享一篇文章，介绍了PHP如何搭建大文件切割分块上传功能的实例代码，有兴趣的同学可以看看！ 背景 在网站开发中，文件上传是很常见的一个功能。相信很多人都...2017-01-22

  • PHP/Shell大文件数据统计并且排序

    本文章来给各位同学介绍一个简单的PHP/Shell大文件数据统计并且排序实现程序，各位同学可参考使用哦。 诸多大互联网公司的面试都会有这么个问题，有个4G的文件，如何用...2016-11-25

  • 详解PHP如何读取大文件

    作为PHP开发人员，我们不需要担心内存管理。在极少数情况下，我们可能需要走出舒适的界限—例如，当我们尝试在可以创建的最小VPS上为大型项目运行Composer时，或者需要在同样小的服务器上读取大文件时。这是我们将在本教程中讨论的一个问题。...2021-05-30

  • PHP 读取大文件程序代码

    PHP 读取大文件与读取一般的文件是有些区别的，如果你的文件到了几百MB或GB这样可能普通的php读取文件会很慢或卡死了，下面我来介绍一下PHP 读取大文件技巧吧。 一般...2016-11-25

  • PHP fastcgi模式大文件上传500错误

    在linux中增加了fastcgi+php环境，结果在文件上传时如果文件小于100KB是可以上传，但大了点就提示mod_fcgid: HTTP request length 132296 (so far) exceeds MaxRequestLe...2016-11-25

  • OpenCV实现图像切割功能

    这篇文章主要为大家详细介绍了OpenCV实现图像切割功能，具有一定的参考价值，感兴趣的小伙伴们可以参考一下...2020-04-25

  • php读取大文件最好的实现方法

    php读取大文件方法我们一般是一行行来讲取而不是一次性把文件全部写入内存中了，这样会导致php程序卡死，下面给大家整理一个例子。 代码如下 复制代码 ...2016-11-25

  • PHP读取大文件末尾N行的高效方法推荐

    下面小编就为大家带来一篇PHP读取大文件末尾N行的高效方法推荐。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧...2016-06-12

  • vue-cropper组件实现图片切割上传

    这篇文章主要为大家详细介绍了vue-cropper组件实现图片切割上传，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下...2021-05-28

  • 在ASP.NET中支持断点续传下载大文件(ZT)源码

    这篇文章主要为大家介绍了在ASP.NET中如何做到支持断点续传下载大文件(ZT),需要的朋友可以参考下...2021-09-22