七牛上传报文件已存在

薄洪涛5年前PHP1310

之前做了一个大文件的分片上传,做好之后就没管了,让客户端一直自己用着,然后期间偶尔会有浏览器不兼容的现象我也懒得改,然后十一回来,客户端就给我说,有文件上传不上去,然后正好手头没活,就用改了下

先看下思路,这里做了分片上传,就是文件按照一小块一小块分片上传到服务器后,然后拼接,拉到七牛

拉到七牛的代码如下

/*
 * 上传到七牛
 */
public static function saveQiniuByUrl($file_url){
    $data = file_get_contents($file_url);
    //七牛的密钥、域名和空间
    $access_key = Yii::$app->params['access_key'];
    $secret_key = Yii::$app->params['secret_key'];
    $bucket = Yii::$app->params['bucket'];
    //上传7牛的文件的名字及路径
    $file_name =  basename($file_url);
    //授权
    $auth = new Auth($access_key,$secret_key);
    //生成token
    $token = $auth->uploadToken($bucket);
    $uploadManager = new UploadManager();
    list($ret,$err) = $uploadManager->put($token,$file_name,$data);
    if($err !== null){
        return false;
    }
    return Yii::$app->params['domain'].'/'.$file_name;
}

我只需要提供本地的组装好的文件的位置就可以

然后我打印了下七牛的返回

array (size=2)
  0 => null
  1 => 
    object(Qiniu\Http\Error)[89]      
    private 'url' => string 'http://up.qiniup.com' (length=20)
      private 'response' => 
        object(Qiniu\Http\Response)[88]          
        public 'statusCode' => int 614
          public 'headers' => 
            array (size=16)
              ...          
          public 'body' => string '{"error":"file exists"}' (length=23)
          public 'error' => string 'file exists' (length=11)
          private 'jsonData' => 
            array (size=1)
              ...          
              public 'duration' => float 12.178

关键的一句话,file exists

查了七牛的文档,我知道了原因,七牛判断文件是否相同是根据文件的key,即文件的名字,我上传文件到服务器后,保留了上传之前的名称,所以会出现这个问题,那我们如何避免用户上传相同key的文件呢?

七牛已经提供好了相应的算法,见 https://github.com/qiniu/qetag

算法大体如下:

  • 如果你能够确认文件 <= 4M,那么 hash = UrlsafeBase64([0x16, sha1(FileContent)])

  • 如果文件 > 4M,则 hash = UrlsafeBase64([0x96, sha1([sha1(Block1), sha1(Block2), ...])])

  • 其中 Block 是把文件内容切分为 4M 为单位的一个个块,也就是 BlockI = FileContent[I*4M:(I+1)*4M]

上传到七牛云存储的时候,key 是可选的。如果你不指定 key,则自动以 hash 值作为 key,此时自动带了消重能力。两个用户上传相同的文件,最终的 key 是一样的。

另外需要指出,当上传相同的文件时,七牛不会覆盖,只能你手动删除某个文件然后才能上传相同文件(如果你想覆盖的话)

我这里的解决就比较简单了,直接生成唯一的key拼接下就可以了

相关文章

抢红包的一些实现思路

抢红包的一些实现思路

最近探索了关于抢红包的一些实现思路,在此记录下本篇文章主要探讨了金额随机算法关于分布式锁的一些探索我们开始,首先说下抢红包的业务流程,分为两步,发红包和抢红包,在抢红包的时候,并发是非常大的,我们这里...

YII2独立开发遇到的坑

    之前开发的时候,遇到图片上传什么的都是直接用前辈们配好的插件等等,换了家公司以后,要自己独立开发项目,顿时遇到了问题,开始是项目的配置,然后在添加的时候遇到了图片上传的问题...

csrf攻击原理及防范

csrf攻击原理及防范

CSRF(Cross-site request forgery),中文名称:跨站请求伪造,也被称为:one click attack/session riding,缩写为:CSRF/XSRF。在不少的...

Yii2.0整合ueditor并上传图片到七牛云

Yii2.0整合ueditor并上传图片到七牛云

某个项目要做一个文章模块,用到Ueditor,并且ue中的图片要上传到七牛,所以总结下步骤;1、Yii2.0下载ueditor for Yii2.0和七牛composer require&n...

laravel chunk 更新数据的坑

在一些情况下,我们需要对大批量的数据进行操作,如果这个时候我们使用foreach的话,很可能会遇到操作超时的情况。在Laravel框架中我们可以很方便的使用chunk方法来解决。来看一个简单的例子:$...

php用curl模拟post请求接口的坑

php用curl模拟post请求接口的坑

我们的接口是用java实现的,然后我需要用php去调用下接口,请求方式为post,需要传一个数组过去(不是json_encode的那种),之前的时候,是这么写的$post_params =&...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。