python计算文件的md5值实例

 更新时间:2017年1月22日 11:07  点击:1306
python如何计算文件的md5值呢?这篇文章介绍了较小文件处理方法与较大文件处理方法,有兴趣的可以试试

较小文件处理方法:

 

 代码如下复制代码

importhashlib

importos

defget_md5_01(file_path):

  md5=None

  ifos.path.isfile(file_path):

    f=open(file_path,'rb')

    md5_obj=hashlib.md5()

    md5_obj.update(f.read())

    hash_code=md5_obj.hexdigest()

    f.close()

    md5=str(hash_code).lower()

  returnmd5

if__name__=="__main__":

  file_path=r'D:\test\test.jar'

  md5_01=get_md5_01(file_path)

  print(md5_01)

 

较大文件处理方法:

 

 代码如下复制代码

importhashlib

importos

defget_md5_02(file_path):

  f=open(file_path,'rb') 

  md5_obj=hashlib.md5()

  whileTrue:

    d=f.read(8096)

    ifnotd:

      break

    md5_obj.update(d)

  hash_code=md5_obj.hexdigest()

  f.close()

  md5=str(hash_code).lower()

  returnmd5

if__name__=="__main__":

  file_path=r'D:\test\test.jar'

  md5_02=get_md5_02(file_path)

  print(md5_02)

 

说明:对于同一个文件,两种方法计算得到的md5是一致的。

注:以上代码在Python 3.x版本测试通过。

这篇文章详细介绍了Yii2定制表单输入字段的标签和样式的教程,有需要的同学可以参考一下,以备不时之需。

Yii2中对于表单和字段的支持组件为ActiveForm和ActiveField,

要生成一个具有label、input、error提示这样通用格式的登录框,可编写如下代码:

 
 代码如下 复制代码
<?php$form= ActiveForm::begin([
 'id'=>'login-form',
 'options'=> ['class'=>'form-horizontal'],
 'fieldConfig'=> [
  'template'=>"{label}\n<div class=\"col-lg-3\">{input}</div>\n<div class=\"col-lg-8\">{error}</div>",
  'labelOptions'=> ['class'=>'col-lg-1 control-label'],
 ],
]); ?>
 
<?=$form->field($model,'username') ?>
<?=$form->field($model,'password')->passwordInput()
?>
 

上述代码生成两个带默认标签名(如Username,Password)的表单输入框(input)。

如果想更改输入框的标签及其样式,有两个方式,一个是通过labelOptions参数:

复制代码代码如下:
 代码如下 复制代码
<?= $form->field($model, 'username',['labelOptions' => ['label' => 'Nick name','class' => 'your own class']]) ?>

还有一个更加面向对象的方法是:

复制代码代码如下:
 代码如下 复制代码
<?= $form->field($model, 'username')->textInput()->hint('Please enter your nick name instead of email')->label('Nick name') ?>
小编给大家分享一篇文章,介绍了PHP如何搭建大文件切割分块上传功能的实例代码,有兴趣的同学可以看看!

背景

在网站开发中,文件上传是很常见的一个功能。相信很多人都会遇到这种情况,想传一个文件上去,然后网页提示“该文件过大”。因为一般情况下,我们都需要对上传的文件大小做限制,防止出现意外的情况。
 但是在有些业务场景中,大文件上传又是必须的,比如邮箱附件,或者内部OA等等。

问题

服务端为什么不能直接传大文件?跟php.ini里面的几个配置有关

upload_max_filesize = 2M//PHP最大能接受的文件大小
post_max_size = 8M//PHP能收到的最大POST值'
memory_limit = 128M//内存上限
max_execution_time = 30//最大执行时间

当然不能简单粗暴的把上面几个值调大,否则服务器内存资源吃光是迟早的问题。

解决思路

好在HTML5开放了新的FILE API,也可以直接操作二进制对象,我们可以直接在浏览器端实现文件切割,按照以前的做法就得用Flash的方案,实现起来会麻烦很多。

JS思路

1.监听上传按钮的onchange事件

2.获取文件的FILE对象

3.把文件的FILE对象进行切割,并且附加到FORMDATA对象中

4.把FORMDATA对象通过AJAX发送到服务器

5.重复3、4步骤,直到文件发送完。

PHP思路

1.建立上传文件夹

2.把文件从上传临时目录移动到上传文件夹

3.所有的文件块上传完成后,进行文件合成

4.删除文件夹

5.返回上传后的文件路径

DEMO代码

前端部分代码

 
 代码如下 复制代码
<!doctype html>
<html lang="en">
<head>
 <meta charset="UTF-8">
 <meta name="viewport"
   content="width=device-width, user-scalable=no, initial-scale=1.0, maximum-scale=1.0, minimum-scale=1.0">
 <meta http-equiv="X-UA-Compatible"content="ie=edge">
 <title>Document</title>
 <style>
  #progress{
   width: 300px;
   height: 20px;
   background-color:#f7f7f7;
   box-shadow:inset 0 1px 2px rgba(0,0,0,0.1);
   border-radius:4px;
   background-image:linear-gradient(to bottom,#f5f5f5,#f9f9f9);
  }
 
  #finish{
   background-color:#149bdf;
   background-image:linear-gradient(45deg,rgba(255,255,255,0.15) 25%,transparent 25%,transparent 50%,rgba(255,255,255,0.15) 50%,rgba(255,255,255,0.15) 75%,transparent 75%,transparent);
   background-size:40px 40px;
   height: 100%;
  }
  form{
   margin-top: 50px;
  }
 </style>
</head>
<body>
<div id="progress">
 <div id="finish"style="width: 0%;"progress="0"></div>
</div>
<form action="./upload.php">
 <input type="file"name="file"id="file">
 <input type="button"value="停止"id="stop">
</form>
<script>
 varfileForm = document.getElementById("file");
 varstopBtn = document.getElementById('stop');
 varupload =newUpload();
 
 fileForm.onchange =function(){
  upload.addFileAndSend(this);
 }
 
 stopBtn.onclick =function(){
  this.value ="停止中";
  upload.stop();
  this.value ="已停止";
 }
 
 functionUpload(){
  varxhr =newXMLHttpRequest();
  varform_data =newFormData();
  const LENGTH = 1024 * 1024;
  varstart = 0;
  varend = start + LENGTH;
  varblob;
  varblob_num = 1;
  varis_stop = 0
  //对外方法,传入文件对象
  this.addFileAndSend =function(that){
   varfile = that.files[0];
   blob = cutFile(file);
   sendFile(blob,file);
   blob_num += 1;
  }
  //停止文件上传
  this.stop =function(){
   xhr.abort();
   is_stop = 1;
  }
  //切割文件
  functioncutFile(file){
   varfile_blob = file.slice(start,end);
   start = end;
   end = start + LENGTH;
   returnfile_blob;
  };
  //发送文件
  functionsendFile(blob,file){
   vartotal_blob_num = Math.ceil(file.size / LENGTH);
   form_data.append('file',blob);
   form_data.append('blob_num',blob_num);
   form_data.append('total_blob_num',total_blob_num);
   form_data.append('file_name',file.name);
 
   xhr.open('POST','./upload.php',false);
   xhr.onreadystatechange =function() {
    varprogress;
    varprogressObj = document.getElementById('finish');
    if(total_blob_num == 1){
     progress ='100%';
    }else{
     progress = Math.min(100,(blob_num/total_blob_num)* 100 ) +'%';
    }
    progressObj.style.width = progress;
    vart = setTimeout(function(){
     if(start < file.size && is_stop === 0){
      blob = cutFile(file);
      sendFile(blob,file);
      blob_num += 1;
     }else{
      setTimeout(t);
     }
    },1000);
   }
   xhr.send(form_data);
  }
 }
 
</script>
</body>
</html>
 

PHP部分代码

 
 代码如下 复制代码
<?php
classUpload{
 private$filepath='./upload';//上传目录
 private$tmpPath;//PHP文件临时目录
 private$blobNum;//第几个文件块
 private$totalBlobNum;//文件块总数
 private$fileName;//文件名
 
 publicfunction__construct($tmpPath,$blobNum,$totalBlobNum,$fileName){
  $this->tmpPath =$tmpPath;
  $this->blobNum =$blobNum;
  $this->totalBlobNum =$totalBlobNum;
  $this->fileName =$fileName;
   
  $this->moveFile();
  $this->fileMerge();
 }
  
 //判断是否是最后一块,如果是则进行文件合成并且删除文件块
 privatefunctionfileMerge(){
  if($this->blobNum ==$this->totalBlobNum){
   $blob='';
   for($i=1;$i<=$this->totalBlobNum;$i++){
    $blob.=file_get_contents($this->filepath.'/'.$this->fileName.'__'.$i);
   }
   file_put_contents($this->filepath.'/'.$this->fileName,$blob);
   $this->deleteFileBlob();
  }
 }
  
 //删除文件块
 privatefunctiondeleteFileBlob(){
  for($i=1;$i<=$this->totalBlobNum;$i++){
   @unlink($this->filepath.'/'.$this->fileName.'__'.$i);
  }
 }
  
 //移动文件
 privatefunctionmoveFile(){
  $this->touchDir();
  $filename=$this->filepath.'/'.$this->fileName.'__'.$this->blobNum;
  move_uploaded_file($this->tmpPath,$filename);
 }
  
 //API返回数据
 publicfunctionapiReturn(){
  if($this->blobNum ==$this->totalBlobNum){
    if(file_exists($this->filepath.'/'.$this->fileName)){
     $data['code'] = 2;
     $data['msg'] ='success';
     $data['file_path'] ='http://'.$_SERVER['HTTP_HOST'].dirname($_SERVER['DOCUMENT_URI']).str_replace('.','',$this->filepath).'/'.$this->fileName;
    }
  }else{
    if(file_exists($this->filepath.'/'.$this->fileName.'__'.$this->blobNum)){
     $data['code'] = 1;
     $data['msg'] ='waiting for all';
     $data['file_path'] ='';
    }
  }
  header('Content-type: application/json');
  echojson_encode($data);
 }
  
 //建立上传文件夹
 privatefunctiontouchDir(){
  if(!file_exists($this->filepath)){
   returnmkdir($this->filepath);
  }
 }
}
 
//实例化并获取系统变量传参
$upload=newUpload($_FILES['file']['tmp_name'],$_POST['blob_num'],$_POST['total_blob_num'],$_POST['file_name']);
//调用方法,返回结果
$upload->apiReturn();
 

存在的问题

这只是一个简单的DEMO,有很多地方需要改进,比如上传的文件夹与临时文件放在一起,用户中途取消也没有发请求进行清理,容易造成文件冗余。JS采用的是同步模型,文件需要一块一块按顺序上传,会导致整个浏览器在上传的过程中出于堵塞的状态,按了按钮可能需要几秒钟才能反应过来,用户体验不好。真正需要产品化的时候就要综合考虑多种情况,当然作为一个示例,引导大家了解分块上传的思路还是不错的。

小编推荐的这篇文章介绍了php与c实现按行读取文件的实例代码,有需要的同学可以参考一下

php与c 实现按行读取文件

前言

感觉很糟糕的一场电话一面竟然给了二面通知,好吧,给自己一个机会也给对方一次机会,题外话。海量数据处理经常涉及到hash将原来文件的每一行散列到子文件中,那如何按行读取文件呢,这里记录一下php和c的实现

很水的一篇,只是记录一下常用的方法,防止面试尴尬

php代码:

 
 代码如下 复制代码
<?php
  
/**
 * 按行读取文件
 * @param string $filename
 */
functionreadFileByLine ($filename)
{
  $fh=fopen($filename,'r');
    
  while(!feof($fh)) {
    $line=fgets($fh);
    echo$line;
  }
    
  fclose($fh);
}
  
// test
  
$filename="/home/wzy/test/sort.txt";
  
readFileByLine($filename);
 

c实现代码:

 
 代码如下 复制代码
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
  
#define LEN 1024
  
intmain(void)
{
  charfilename[LEN], buf[LEN];
  FILE*fp;
  intlen;
  
  scanf("%s", filename);
  
  fp =fopen(filename,"r");
  
  if(fp == NULL)exit(-1);
  
  while(fgets(buf, LEN, fp) != NULL) {
    len =strlen(buf);
    buf[len - 1] ='\0'; // 去掉换行符
  
    printf("%s\n", buf);
  }
  
  return0;
}
 
[!--infotagslink--]

相关文章

  • python opencv 画外接矩形框的完整代码

    这篇文章主要介绍了python-opencv-画外接矩形框的实例代码,代码简单易懂,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下...2021-09-04
  • php读取zip文件(删除文件,提取文件,增加文件)实例

    下面小编来给大家演示几个php操作zip文件的实例,我们可以读取zip包中指定文件与删除zip包中指定文件,下面来给大这介绍一下。 从zip压缩文件中提取文件 代...2016-11-25
  • Jupyter Notebook读取csv文件出现的问题及解决

    这篇文章主要介绍了JupyterNotebook读取csv文件出现的问题及解决,具有很好的参考价值,希望对大家有所帮助。如有错误或未考虑完全的地方,望不吝赐教...2023-01-06
  • Python astype(np.float)函数使用方法解析

    这篇文章主要介绍了Python astype(np.float)函数使用方法解析,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下...2020-06-08
  • 最炫Python烟花代码全解析

    2022虎年新年即将来临,小编为大家带来了一个利用Python编写的虎年烟花特效,堪称全网最绚烂,文中的示例代码简洁易懂,感兴趣的同学可以动手试一试...2022-02-14
  • python中numpy.empty()函数实例讲解

    在本篇文章里小编给大家分享的是一篇关于python中numpy.empty()函数实例讲解内容,对此有兴趣的朋友们可以学习下。...2021-02-06
  • python-for x in range的用法(注意要点、细节)

    这篇文章主要介绍了python-for x in range的用法,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧...2021-05-10
  • Python 图片转数组,二进制互转操作

    这篇文章主要介绍了Python 图片转数组,二进制互转操作,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧...2021-03-09
  • Python中的imread()函数用法说明

    这篇文章主要介绍了Python中的imread()函数用法说明,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧...2021-03-16
  • python实现b站直播自动发送弹幕功能

    这篇文章主要介绍了python如何实现b站直播自动发送弹幕,帮助大家更好的理解和学习使用python,感兴趣的朋友可以了解下...2021-02-20
  • python Matplotlib基础--如何添加文本和标注

    这篇文章主要介绍了python Matplotlib基础--如何添加文本和标注,帮助大家更好的利用Matplotlib绘制图表,感兴趣的朋友可以了解下...2021-01-26
  • Photoshop打开PSD文件空白怎么解决

    有时我们接受或下载到的PSD文件打开是空白的,那么我们要如何来解决这个 问题了,下面一聚教程小伙伴就为各位介绍Photoshop打开PSD文件空白解决办法。 1、如我们打开...2016-09-14
  • 解决python 使用openpyxl读写大文件的坑

    这篇文章主要介绍了解决python 使用openpyxl读写大文件的坑,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧...2021-03-13
  • C#实现HTTP下载文件的方法

    这篇文章主要介绍了C#实现HTTP下载文件的方法,包括了HTTP通信的创建、本地文件的写入等,非常具有实用价值,需要的朋友可以参考下...2020-06-25
  • SpringBoot实现excel文件生成和下载

    这篇文章主要为大家详细介绍了SpringBoot实现excel文件生成和下载,文中示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下...2021-02-09
  • C#操作本地文件及保存文件到数据库的基本方法总结

    C#使用System.IO中的文件操作方法在Windows系统中处理本地文件相当顺手,这里我们还总结了在Oracle中保存文件的方法,嗯,接下来就来看看整理的C#操作本地文件及保存文件到数据库的基本方法总结...2020-06-25
  • python 计算方位角实例(根据两点的坐标计算)

    今天小编就为大家分享一篇python 计算方位角实例(根据两点的坐标计算),具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧...2020-04-27
  • php无刷新利用iframe实现页面无刷新上传文件(1/2)

    利用form表单的target属性和iframe 一、上传文件的一个php教程方法。 该方法接受一个$file参数,该参数为从客户端获取的$_files变量,返回重新命名后的文件名,如果上传失...2016-11-25
  • python实现双色球随机选号

    这篇文章主要为大家详细介绍了python实现双色球随机选号,文中示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下...2020-05-02
  • python中使用np.delete()的实例方法

    在本篇文章里小编给大家整理的是一篇关于python中使用np.delete()的实例方法,对此有兴趣的朋友们可以学习参考下。...2021-02-01