京东云前端JS分片上传完整版

2023-05-16

京东云上传我是写了以下几步

注:京东云分片上传时成功则有data返回 失败则返回err

1、请求后台接口获取身份信息等数据用于访问

2.createMultipartUpload创建上传请求

身份信息

/*data为第一步时请求后台接口并返回的值*/

身份信息必传

accessKeyId: data.accessKey,

secretAccessKey: data.secretKey,

sessionToken: data.sessionToken,

要用秘钥的形式登录上传

endpoint: '请求的地址 默认是亚马逊的地址(传自己服务器的地址)',

createMultipartUpload具体传递的参数

必须值

Bucket: 桶,

Key: Key,

ACL: ‘public-read’,

注:ACL可传可不传

3.分片

4.uploadPart上传分片的每一部分

PartNumber: '唯一id使用变量', // 1 ~ 10,000

UploadId: 这是createMultipartUpload里返回的ID值用于后续所有操作不可或缺, // s3.createMultipartUpload

Body: (二进制文件 string类型),

Bucket: 桶名,

Key: Key值,

5.abortMultipartUpload若失败则删除所有

Bucket: 桶名,

Key: Key值,

UploadId: 这是createMultipartUpload里返回的ID值用于删除失败后的整条数据,

6.listParts获取上传列表

Bucket: 桶名,

Key: Key值,

UploadId: 这是createMultipartUpload里返回的ID值用于获取当前ID的上传列表

7.completeMultipartUpload合并上传分片

Bucket: 桶名,

Key: Key值,

MultipartUpload: {

Parts: [

{

ETag:'listParts下的data返回值用于合并',

PartNumber:'上传分片时分片的ID值',

}

],

},

这是createMultipartUpload里返回的ID值用于合并当前ID下的所有分片

createMultipartUpload请求成功后会有data下的Location是成功存储后的地址

具体代码 注释见下文

这个是基于vue3的写法 和JS也差不多 上传用的是elementUI upload组件

// **上传视频**

    let object = [];

/* handlevideoUpload :绑定上传视频方法 需要传file参数

后面会将file转二进制通过uploadPart方法上传至亚马逊方法里进行分片储存 */

    const handlevideoUpload = async (file) => {

      window.console.log(file);

/* 拿到file将name传递至后端 请求接口获取桶、session、key

等值 */

      let formData = new FormData();

      formData.append('filename', file.file.name);

      const { data } = await awsary(formData);

      state.data = data;

/* 赋值至开头的object里后面会用的到 作用是方便其他方法调用 */

      let obj = data;

/* 将后台返回的相关身份信息等数剧赋值给 credentials 参数名称不可变为亚马逊固定 参数是后台返回 */

      var credentials = {

        accessKeyId: data.accessKey,

        secretAccessKey: data.secretKey,

        sessionToken: data.sessionToken,

      };

      //秘钥形式的登录上传

endpoint:为请求地址必须得改 在请求时注意异步 若异步可在服务器设置相关权限 具体请求有 post put get等 若有写上传失败等方法需要delete权限

      AWS.config.update(credentials);

      var bucket = new AWS.S3({

        s3BucketEndpoint: true,

        region: data.region,

        endpoint: data.endpoint,

      });

      if (file) {

/* params 为创建上传请求的参数ACL可传可不传 参数名称不可更改 参数值具体以后台接口返回为准 */

        var params = {

          Bucket: data.bucket,

          Key: data.oss_path,

          ACL: 'public-read',

        };

切片处理 在uploadPart里需要转成二进制方法进行上传然后list方法才会返回上传列表

        const size = file.file.size; // 文件总大小

        const partSize = 1024 * 1024 * 50;// 要分的文件大小 这里是50MB

        let partNumber = 0;//分片ID可自定义 是为了在合并时找到对应的文件和顺序

        let forNumber = Math.ceil(size / partSize); // 向上取整、确保不会有分片文件遗漏

        state.PartForNumber = forNumber; // state是VUE3 TS的写法JS可用this 写在return下

createMultipartUpload // bucket是上文中定义的对象 内包含了请求地址等信息 这一步是创建上传请求 获取上传唯一ID 后面都会用到

        bucket.createMultipartUpload(params, function (err, data) {

/* data.UploadId:是正确上传后返回的data值 若为返回则打印err 获取具体的上传失败的原因后面的可以用if(!err){}else{}包起来防止报错后代码继续执行 */

          state.upload_id = data.UploadId;

/* 此处循环为处理分片上传的方法 */

          for (let i = 0; i < forNumber; i++) {

            partNumber++;//上传的ID

            window.console.log(i, forNumber);

            var blob = new Blob([file.file], { type: file.file.type }); 将文件转为二进制流准备切片以及上传

            window.console.log(blob);

            const blob2 = blob.slice(i * partSize, i * partSize + partSize);// 上传处理 i * partSize相当于开始的参数,i * partSize + partSize为结束的参数 建议像我这样写否则切片出来的文件size会丢失 导致后面下载的文件无法播放等问题

            window.console.log(blob2);

/* 上传文件参数参数名不可更改为亚马逊固定必传参数 */

            const uploadPart_params = {

              PartNumber: partNumber, // 1 ~ 10,000

              UploadId: data.UploadId, // s3.createMultipartUpload

              Body: blob2,// 次数必须是二进制文件流 不要用formData 需要自己处理好

              Bucket: obj.bucket,//桶名 一直都需要传

              Key: obj.oss_path,

            };

            window.console.log(uploadPart_params);

/* 开始上传 我在写的时候无法用.then()所以单独拉出来一个方法去做判断是否执行、大文件循环结束后但是上传的请求还是在处理中、所以我单独拉出来一个方法、用来走后续的方法 */

            bucket.uploadPart(uploadPart_params, function (err, data) {

/* 我是判断了有没上传成功然后去做后续的处理、若没有上传成功调用abortMultipartUpload()、去删除这个ID下的文件、因为是分片所以每一个都需要判断、一个失败则全部失败*/

              if (err) {

                ElMessage.warning('上传失败请重新上传');

                var params = {

                  Bucket: obj.bucket,

                  Key: obj.oss_path,

                  UploadId: state.upload_id,

                };

                bucket.abortMultipartUpload(params, function (err, data) {});

              }

              object.push('err');

              window.console.log('partNumber == forNumber', partNumber == forNumber);

              window.console.log('err', !err);

/* 我自己定义的方法、用来调用后面的步骤 */

              getListData();

            });

            // };

            // }

            // uploadPart();

          }

        });

      } else {

        window.alert('');

      }

    };

    const getListData = () => {

这里因为上边我不是全局定义所以这里又重新定义了一次

      /*var credentials = {

        accessKeyId: state.data.accessKey,

        secretAccessKey: state.data.secretKey,

        sessionToken: state.data.sessionToken,

      };

      //秘钥形式的登录上传

      AWS.config.update(credentials);

      var bucket = new AWS.S3({

        s3BucketEndpoint: true,

        region: state.data.region,

        endpoint: state.data.endpoint,

      });*/

判断是我成功请求的长度是否等于我分片的长度等于则执行 不等于就不要让执行了 因为执行了也是失败 获取到的list里的上传列表是不全的所以还是不要执行了后续拿到的文件也是有问题的

      if (object.length == state.PartForNumber) {

        window.console.log('err', 'err');

        var paramslist = {

          Bucket: state.data.bucket,

          Key: state.data.oss_path,

          UploadId: state.upload_id,

        };

        window.console.log(paramslist);

/* 获取上传列表 */

        bucket.listParts(paramslist, function (err, data) {

          if (err) window.console.log(err, err.stack);

          else {

            window.console.log(data);

            let eTagParts = [];

            data.Parts.map((item) => {

因为最后一步是将分好的片合起来 所以我们这里需要拿到每一个的ETag和PartNumber(上传时每一个分片的ID)

              eTagParts.push({

                ETag: item.ETag,

                PartNumber: item.PartNumber,

              });

            });

            // window.console.log(uploadPart_params);

            const params_com = {

              Bucket: state.data.bucket,

              Key: state.data.oss_path,

              MultipartUpload: {

                Parts: eTagParts,

              },

              UploadId: state.upload_id,

            };

            window.console.log(params_com);

最后一步合分片 注意上面的参数部分MultipartUpload的格式否则会报错  

bucket.completeMultipartUpload(params_com, function (err, data) {

到了这一步那就是成功不远了 如果失败了则返回err信息 成功则返回data信息

              window.console.log(params_com);

              window.console.log(data);

              window.console.log(err);

            });

          }

        });

      }

    };

 

当你最后一步打印出来的data是这样的 那么恭喜你 你的分片

做好了 [烟花][烟花][烟花][烟花][烟花][烟花]

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

京东云前端JS分片上传完整版 的相关文章

  • PCtoLCD2002使用方法

    PCtoLCD2002是一款免费的取字模的软件 xff0c 支持多种取模方式 xff0c 可以生成中英文混合的字符串的字模数据 xff0c 非常方便 在使用的过程中很多功能无法发掘 xff0c 现在小编就把详细的使用指南为大家陈列一下 PC
  • 驱动--入门实例hello驱动(一)

    一 基本理论 二 基本数据结构和实例 三 总结 一 基本理论 虽然基本的linux内核是一个大的Image档 xff0c 也可以当做是一个bin档 xff0c 可执行文件 但是内核是模块化组成的 xff0c 它允许在内核运行时向其中动态的插
  • 在Windows中自动压缩备份文件和目录的脚本

    1 准备工作 在Windows系统中首先需要安装 WinRAR 压缩和解压程序 xff0c 并记录下exe文件的安装目录 xff1a D tools WinRAR WinRAR exe 2 编写脚本 64 echo off 需要进行备份的源
  • source.list 更换源

    123 64 123 System Product Name sudo apt update 获取 1 http cn archive ubuntu com ubuntu bionic InRelease 1 122 B 错误 1 http
  • ubuntu 18.04安装vulkanSDK

    官方教程 https vulkan tutorial com Development environment 方法一 安装工具包 1 sudo apt install vulkan utils 2 sudo apt install libv
  • linux amd显卡使用情况查看

    针对amd显卡可使用radeontop查看显卡使用状态 一 使用工具radeontop 1 安装 radeontop sudo apt install radeontop 2 运行radeontop 打开终端 xff0c 输入radeont
  • linux 格式化磁盘

    一 格式化一般磁盘 1 sudo fdisk l 查看磁盘信息 找到你要格式化的磁盘 2 sudo mkfs ext4 dev sdb 一般sda为系统盘 xff0c 确认好自己要格式的磁盘 xff0c 假设这里为sdb 选ext4格式 二
  • ubuntu net-tools

    刚刚重新安装完系统 xff0c 使用ifconfig xff0c 1 查询可以正常apt安装信息 2 下载net tools对应的deb包 打开https ubuntu pkgs org 18 04 ubuntu main amd64 5
  • std::vector的指针用法

    include lt QCoreApplication gt include lt vector gt include lt iostream gt int main int argc char argv QCoreApplication
  • git 常用命令

    一 clone 代码 二 查看分支 三 切换分支 假设分支名test 1 第一次创建并切换分支 git checkout b test remotes origin test 2 已有本地分支下切换分支 git checkout test
  • UE5分辨率

    一 r setRes 后缀 xff1a f 全屏 w窗口化
  • 高频算法题

    排序 冒泡排序快速排序选择排序归并排序堆排序 912 排序数组 力扣 xff08 LeetCode xff09 数组中重复的数字 数组 删除有序数组中的重复项 26 删除有序数组中的重复项 力扣 xff08 LeetCode xff09 最
  • explorer.exe被关掉,桌面黑屏

    电脑黑屏 但有鼠标显示标识 此时有可能是资源管理器进程不小心被关掉所致 打开任务管理器 xff0c 新建一个任务 xff0c 输入cmd xff0c 在弹出的命令窗口中输入explorer exe 桌面GUI又被召唤出来啦
  • 在Ubuntu/Linux中自动备份MySQL数据库

    一 编写备份脚本 login user 61 34 root 34 数据库登录账户 login passwd 61 34 34 数据库登录密码 vDate 61 96 date 43 Y m d 96 当前日期 xff0c 用作目录名 ba
  • nvidia jetson nano nx 嵌入式设备频率设置

    单位做研发 xff0c 之前用的设备是jetson TX2 NX xff0c 偶尔会有CPU使用率占满的状况 xff0c 后来更换NX xff0c 发现CPU在各个功率模式并不能在满功率运行 xff0c 于是开始寻求解决方法 xff0c 以
  • 自己动手写一个通信协议

    什么是通信协议 我们常用的聊天软件比如 xff1a 微信 xff0c 都是基于一组通信协议进行服务端与客户端数据交互 协议指的就是客户端与服务端事先约定好的 xff0c 每个二进制数据包中 xff0c 每一段字节分别代表什么含义的规则 如下
  • 虚拟机的MAC地址分配与修改

    虚拟世界的MAC地址 先看一下真实世界的MAC地址是如何分配 xff0c 如何保证没有重复的 每块网卡都有一个MAC地址 xff0c MAC地址是一个6字节 也即48bit的数据 前3字节称为OUI xff0c 是由IEEE组织注册给网络设
  • ride关键字的使用

    一 工程 测试套和案例 为了方便管理测试案例 xff0c 我们在创建测试案例时 xff0c 必须知道这条案例是属于哪个产品 xff08 即项目 xff09 xff0c 以及这个案例按照自己测试团队的要求 xff0c 是要放在哪个测试套下 x
  • python之requests

    简介 requests是用python语言基于urllib编写的 xff0c 采用的是Apache2 Licensed开源协议的HTTP库 xff0c 使用方法比urllib更加方便 安装 pip快速安装 xff1a pip install
  • python常用函数或库

    range range start stop step 描述 xff1a 返回开始数值start xff0c 结束数值为stop xff0c 数值间隔为step的迭代器 xff08 非列表 xff0c 是迭代器 xff09 参数说明 xff

随机推荐

  • python基本数据类型

    Python3 中有六个标准的数据类型 xff1a Number xff08 数字 xff09 String xff08 字符串 xff09 List xff08 列表 xff09 Tuple xff08 元组 xff09 Set xff0
  • python之json库

    JSON是用于存储和交换数据的语法 xff0c 是一种轻量级的数据交换格式 经常用于接口数据传输 序列化 配置文件等 json的形式有2种 xff1a 键值对形式 数组形式 json的数据形式与python的还是有差别的 xff1a pyt
  • python内置库csv

    csv文件 xff1a csv xff0c Comma Separated Values的缩写 xff0c 以英文逗号 分隔值纯文本形式存储数字和文本文件由任意数目的记录组成每行记录由多个字段组成 python内置了csv库 列表数据读写
  • docker入门教程

    Docker是一个开源的应用容器引擎 xff0c 基于Go语言开发 xff0c Docker可以打包应用及其依赖包到一个轻量级 可移植的容器中 xff0c 然后发布到任何流行的系统 docker相关资源 xff1a Docker 官方主页
  • 解决阿里云盾占用80端口的问题

    一 检查端口 输入以下命令 xff0c 检查服务器上的所有端口 netstat anput grep 80 嗯 xff0c 很好 xff0c 看到第一排明晃晃的出现了被占用的80端口 xff0c 特此截图为证 xff0c 免得所谓的 大厂
  • flask入门教程之请求与响应

    Flask是一个轻量级的web开发框架 xff0c 依赖jinja2和Werkzeug WSGI服务的一个微型框架 官方文档 xff1a https flask palletsprojects com en 2 0 x 中文文档 xff1a
  • Jenkins入门

    Jenkins是一个开源的 提供友好操作界面的持续集成 CI 工具 持续集成 xff08 CI xff09 是在源代码变更后自动检测 拉取 构建和 xff08 在大多数情况下 xff09 进行单元测试的过程 可以简单将jenkins理解为一
  • python常用库random

    random是python自带的库 xff0c 用来生成随机数 xff0c 或随机取值等 随机生成值 随机浮点数 random random random random xff1a 生成 0 1 之间的随机浮点数并返回 span class
  • Jenkins之allure测试报告邮件通知

    Jenkins入门教程 xff1a Jenkins入门 一般情况下 xff0c 我们想让Jenkins将构建结果或构建中的代码执行结果 xff08 比如跑批数据 xff09 通知我们 xff0c 这个是构建后的操作 经常用的是邮件通知 邮件
  • 按键控制电机控制窗帘

    include lt reg52 h gt define uchar unsigned char define uint unsigned int sbit in1 61 P0 0 sbit in2 61 P0 1 sbit in3 61
  • CentOS 8上安装Docker

    参考连接 https www cnblogs com famine p 14065690 html 参考连接 https www a5idc net helpview 591 html 参考连接 https blog csdn net zh
  • OpenCV第七篇:车牌识别

    目录 1 调整图片大小 xff0c 并获取灰度图 2 双边滤波去除噪音 xff1a cv2 bilateralFilter 3 边缘检测 xff1a cv2 Canny xff08 image xff0c threshold1 xff0c
  • gitee如何添加仓库成员

    1 进入gitee项目中 xff0c 如图 xff0c 点击 管理 2 点击 仓库成员管理 xff0c 展开该节点 3 点击 所有 xff0c 也可以选择其他选项 xff0c 比如 开发者 4 点击 添加仓库成员 xff0c 邀请用户 5
  • A*寻路算法之解决目标点不可达问题

    在游戏世界的寻路中 xff0c 通常会有这样一种情况 xff1a 在小地图上点击目标点时 xff0c 点击到了障碍物或者建筑上 xff0c 然后游戏会提示我们目标地点无法到达 玩家必须非常小心的在小地图上点击目标区域的空白部分 xff0c
  • Windows访问samba共享时,提示:“你不能访问此共享文件夹,因为你组织的安全策略阻止未经身份验证的来宾访问”

    此问题需要修改Win10 网络策略 按window 43 R键输入gpedit msc 来启动本地组策略编辑器 xff0c 如下 xff1a 依次找到 计算机配置 管理模板 网络 Lanman工作站 这个节点 xff0c 在右侧内容区可以看
  • 解决XCode错误:Command PhaseScriptExecution failed with a nonzero exit code

    一 环境 XCode版本 xff1a 14 3 二 错误场景信息 使用模拟器或真机调试 编译等都不出错 xff0c 唯独在进行Archive时 xff0c 会出现以下错误 xff1a Command PhaseScriptExecution
  • ubuntu+nvidia显卡驱动安装+(顺带)解决rviz卡顿/CPU使用率过高问题/compiz占用CPU过高问题

    前言 我原本安装nvidia显卡驱动的方式为 xff1a 从官网下载 run文件 xff0c 参考教程link 虽然安装成功 xff0c 运行深度学习相关代码没有出状况 xff0c 但仍然存在一些问题 重新通过ppa方式安装后 xff0c
  • Docker与ROS可视化(RViz)

    提示 xff1a 文章写完后 xff0c 目录可以自动生成 xff0c 如何生成可参考右边的帮助文档 文章目录 前言一 Docker中构建ROS环境二 Docker内ROS与主机ROS通信三 Docker内开启RViz1 OpenGL2 n
  • 卡尔曼滤波

    文章目录 前言一 初印象二 基本概念三 公式及参数四 其他总结 前言 之前看Fast LIO的时候 xff0c 了解过卡尔曼滤波的知识 xff0c 重新整理下 同时推荐一个很棒的Kalman Filter讲解网站 xff1a https w
  • 京东云前端JS分片上传完整版

    京东云上传我是写了以下几步 注 xff1a 京东云分片上传时成功则有data返回 失败则返回err 1 请求后台接口获取身份信息等数据用于访问 2 createMultipartUpload创建上传请求 身份信息 data为第一步时请求后台