对象存储是ctoos
社区干货
ECS 云服务器自定义镜像导入
## 实验名称云服务器自定义镜像导入## 实验介绍本期实验练习介绍了如何向火山引擎导入一个自定义镜像文件,并转换为镜像。在开始实验前需要先进行如下准备工作:- TOS对象存储中创建存储桶- 安装VirtualBox虚拟... 执行:qw保存修改。```bashusers:- default disable_root: 0ssh_pwauth: 1growpart: mode: auto devices: ['/'] ignore_growroot_disabled: falsemount_default_fields: [~, ~, 'auto', 'def...
如同使用Python脚本实现TOS的API签名
# 问题描述如何通过TOS API实现对存储对象的GetObject # 问题分析对象存储会对每个访问的请求进行身份验证,因此您需要在请求中包含签名信息,如何通过Python脚本实现API的签名机制# 解决方案下面展示如何使用Python实现API签名并执行GetObject操作#### 完整Get Object示例代码如下:```pythonimport sys, os, base64, datetime, hashlib, hmacimport requests # pip install requestsimport json# *************...
如何使用Python脚本实现TOS的API签名
# 问题描述如何通过TOS API实现对存储对象的GetObject# 问题分析对象存储会对每个访问的请求进行身份验证,因此您需要在请求中包含签名信息,如何通过Python脚本实现API的签名机制# 解决方案下面展示如何使用Python实现API签名并执行GetObject操作#### 完整Get Object示例代码如下:```pythonimport sys, os, base64, datetime, hashlib, hmacimport requests # pip install requestsimport json# ************* REQUE...
火山引擎 Iceberg 数据湖的应用与实践
(https://p6-volc-community-sign.byteimg.com/tos-cn-i-tlddhu82om/3f1739c58dc4406d8e46f35c374b0611~tplv-tlddhu82om-image.image?=&rk3s=8031ce6d&x-expires=1714580471&x-signature=xGS943qe2Iq4Ryr9OPttuTnJgGY%3D)Iceberg 是一种适用于 HDFS 或者对象存储的表格式,把底层的 Parquet、ORC 等数据文件组织成一张表,向上层的 Spark,Flink 计算引擎提供表层面的语义,作用类似于 Hive Meta Store,但是和 Hive Meta Store 相比...
特惠活动
对象存储是ctoos-优选内容
对象存储是ctoos-相关内容
管理桶 ACL(Python SDK)
桶(Bucket)是 TOS 的全局唯一的命名空间,相当于数据的容器,用来储存对象(Object)数据。本文介绍如何设置和获取桶的读写权限(ACL)。 设置桶的访问权限注意 设置桶的读写权限,您必须具备 tos:PutBucketACL` 权限,或具备 WRITE_ACP 桶 ACL权限,具体操作,请参见权限配置指南。 桶 ACL 说明桶 ACL 权限包含以下五类。 访问权限 描述 访问权限值 READ 允许被授权者列出存储桶中的对象 tos.PermissionType.Permission_Read WRIT...
获取桶地域(Python SDK)
桶(Bucket)是 TOS 的全局唯一的命名空间,相当于数据的容器,用来储存对象(Object)数据。本文介绍如何获取桶所在的地域信息。 注意事项默认只有桶的所有者才能查看桶所在的区域。 示例代码以下代码用于获取桶 bucket... os.exceptions.TosServerError as e: 操作失败,捕获服务端异常,可从返回信息中获取详细错误信息 print('with server error, code: {}'.format(e.code)) request id 可定位具体问题,强烈建议日志中保存 ...
获取桶地域(Go SDK)
桶(Bucket)是 TOS 的全局唯一的命名空间,相当于数据的容器,用来储存对象(Object)数据。本文介绍如何获取桶所在的地域信息。 注意事项默认只有桶的所有者才能查看桶所在的地域。 使用 TOS Go SDK 对桶以及桶内对象进行管理时,您必须使用桶所在地域的域名。关于地域与访问域名的更多信息,请参见地域和访问域名。 示例代码以下代码用于获取存储桶的地域(Region)。 go package mainimport ( "context" "fmt" "github.com/volc...
获取桶元数据(Python SDK)
桶(Bucket)是 TOS 的全局唯一的命名空间,相当于数据的容器,用来储存对象(Object)数据。本文介绍如何获取桶元数据,和判断桶是否存在。 注意事项获取桶元数据之前,您必须具有 tos:HeadBucket 权限。具体操作,请参见权... 强烈建议日志中保存 print('error with request id: {}'.format(e.request_id)) print('error with message: {}'.format(e.message)) print('error with http code: {}'.format(e.status_cod...
管理桶策略(Python SDK)
桶(Bucket)是 TOS 的全局唯一的命名空间,相当于数据的容器,用来储存对象(Object)数据。TOS 中权限控制通过 IAM Policy、Bucket Policy、桶和对象ACL实现,其中桶策略和 ACL 都是基于 TOS 资源的权限控制策略,桶策略... osServerError as e: 操作失败,捕获服务端异常,可从返回信息中获取详细错误信息 print('fail with server error, code: {}'.format(e.code)) request id 可定位具体问题,强烈建议日志中保存 print('...
列举桶(Python SDK)
桶(Bucket)是 TOS 的全局唯一的命名空间,相当于数据的容器,用来储存对象(Object)数据。您可以列举当前账号下所有区域的桶(Bucket)。 注意事项列举桶之前,您必须具有 tos:ListBuckets 权限。具体操作,请参见权限配置... osServerError as e: 操作失败,捕获服务端异常,可从返回信息中获取详细错误信息 print('fail with server error, code: {}'.format(e.code)) request id 可定位具体问题,强烈建议日志中保存 print('...
目录场景(Go SDK)
TOS 中只有对象的概念,内部使用扁平结构存储数据,为方便您对对象进行分组并简化权限管理,您可以使用目录层次来组织对象。 创建目录go package mainimport ( "bytes" "context" "fmt" "github.com/volcengine/ve-tos-golang-sdk/v2/tos")func checkErr(err error) { if err != nil { if serverErr, ok := err.(*tos.TosServerError); ok { fmt.Println("Error:", serverErr.Error()) fmt.Println(...
火山引擎 Iceberg 数据湖的应用与实践
(https://p6-volc-community-sign.byteimg.com/tos-cn-i-tlddhu82om/3f1739c58dc4406d8e46f35c374b0611~tplv-tlddhu82om-image.image?=&rk3s=8031ce6d&x-expires=1714580471&x-signature=xGS943qe2Iq4Ryr9OPttuTnJgGY%3D)Iceberg 是一种适用于 HDFS 或者对象存储的表格式,把底层的 Parquet、ORC 等数据文件组织成一张表,向上层的 Spark,Flink 计算引擎提供表层面的语义,作用类似于 Hive Meta Store,但是和 Hive Meta Store 相比...
管理桶存储类型(Python SDK)
降低存储费用。 tos.StorageClassType.Storage_Class_INTELLIGENT_TIERING 冷归档存储 属于冷数据类型,适用于极少访问、需要长期保存数据的业务场景。最少需要存储 180 天;访问冷归档数据前需要先恢复数据。 tos.StorageClassType.Storage_Class_Cold_Archive 设置存储类型注意 设置桶存储类型,默认只有桶拥有者具备此权限。 设置桶存储类型后,若上传对象、复制对象和初始化分片上传任务时,未指定对象存储类型,则该对象继承...
