s3cmd put文件的过程
时间:2022-07-22
本文章向大家介绍s3cmd put文件的过程,主要内容包括其使用实例、应用技巧、基本知识点总结和需要注意事项,具有一定的参考价值,需要的朋友可以参考一下。
通过 s3cmd 上传文件的命令是 s3cmd put
,s3cmd 可以上传目录或者文件,不过需要注意的是,如果直接上传的是文件,在 s3cmd put
的过程中是比上传文件夹省去很多步骤的,具体可以看下源码里的 cmd_object_put
这个方法。
Put file into bucket
s3cmd put FILE [FILE...] s3://BUCKET[/PREFIX]
查看 s3cmd 的源码。可以留意到 fetch_local_list
。这个方法主要是解析用户 s3cmd put
之后的参数。
解析参数的意义是用来判断上传的是文件还是文件夹,如果是文件夹,则需要加上 --recrusive
参数,然后去对文件目录去做遍历,获取文件夹下面所有的文件。从这个方法可以看到,如果是文件夹,那么耗时主要是在 _os_walk_unicode
遍历文件夹上。
而网上是有人推荐采取下面的这种方式去 put
文件夹的。
find . -type f | xargs -I {} s3cmd put {} s3://runzhliu/kevintest/{}
个人认为,不管是哪种方法,对于上传文件夹,最后都是要遍历整个文件夹的,但是下面的方法,是直接通过调用 linux 的命令来去做遍历,相对效率会比在 s3 中更高,而且省了很多计算 md5 类的过程。
- Flash/Flex学习笔记(31):对象拖拽与投掷
- 如何评价张小龙在2016微信公开课的演讲
- VS2010如何做WAP开发
- (原创)详解KMP算法
- Flash/Flex学习笔记(30):不用startDrag和stopDrag的对象拖动
- JS代码和网页的混用
- Flash/Flex学习笔记(29):MovieClip帧/时间轴的控制
- Oracle日常运维操作总结-数据库的启动和关闭
- Python中Json解析的坑
- Flash/Flex学习笔记(28):动态文本的滚动控制
- CentOS7下Elasticsearch集群部署记录
- Flash/Flex学习笔记(27):摄像头/麦克风的视频/音量指示器
- Flash/Flex学习笔记(26):AS3自定义右键菜单
- Python27中Json对中文的处理
- JavaScript 教程
- JavaScript 编辑工具
- JavaScript 与HTML
- JavaScript 与Java
- JavaScript 数据结构
- JavaScript 基本数据类型
- JavaScript 特殊数据类型
- JavaScript 运算符
- JavaScript typeof 运算符
- JavaScript 表达式
- JavaScript 类型转换
- JavaScript 基本语法
- JavaScript 注释
- Javascript 基本处理流程
- Javascript 选择结构
- Javascript if 语句
- Javascript if 语句的嵌套
- Javascript switch 语句
- Javascript 循环结构
- Javascript 循环结构实例
- Javascript 跳转语句
- Javascript 控制语句总结
- Javascript 函数介绍
- Javascript 函数的定义
- Javascript 函数调用
- Javascript 几种特殊的函数
- JavaScript 内置函数简介
- Javascript eval() 函数
- Javascript isFinite() 函数
- Javascript isNaN() 函数
- parseInt() 与 parseFloat()
- escape() 与 unescape()
- Javascript 字符串介绍
- Javascript length属性
- javascript 字符串函数
- Javascript 日期对象简介
- Javascript 日期对象用途
- Date 对象属性和方法
- Javascript 数组是什么
- Javascript 创建数组
- Javascript 数组赋值与取值
- Javascript 数组属性和方法
- 如何在CentOS8上安装和配置Postfix邮件服务器的方法示例
- Linux下设置Vim编辑器里Tab的长度行号
- Centos定制rpm包、搭建yum仓库的教程
- linux手动、自动更改网卡MAC地址的方法
- Centos7的Firewalld防火墙基础命令详解
- Linux下安装或升级Python 2.7的操作方法
- Linux中git用https连接时不用每次输入密码的方法
- Centos7.3 RabbitMQ分布式集群搭建示例
- Ubuntu16.04环境下搭建FTP服务器的教程
- Linux 查看空间使用情况的实例详解
- CentOS 6.8 安装vsftpd的方法步骤
- centos7下搭建ZooKeeper3.4中间件常用命令小结
- Linux性能测试 pmap命令详解
- Linux7.7设置交换分区SWAP的方法
- 在Linux里安装和启动nginx的方法