对象存储功能支持数据中心
社区干货
火山引擎存储产品双月刊-2023年11&12月
火山引擎存储产品双月刊涵盖存储和中间件所有产品的新品发布、功能更新、最佳实践和平台最新活动等多个模块内容。每双月更新,欢迎查阅体验。> 【邀测】产品或功能暂未对全部用户开放,如需使用,请[提交工单](https://console.volcengine.com/workorder/create/)或联系客户经理申请。# 功能更新## 对象存储- [【邀测】数据透视](https://www.volcengine.com/docs/6349/1184041):支持通过数据透视功能统计总存储量、总对象...
跨云迁移神器——火山引擎存储迁移服务正式上线
跨云的数据迁移及数据同步成为常见的业务场景。然而,传统通过命令行工具或脚本进行数据传输的方法,存在迁移速度慢、实施成本高、易用性差等缺陷。为此火山引擎云存储团队推出了存储迁移服务,将其他云服务商或自建对象存储中的数据,方便快捷地迁移到**火山引擎对象存储 TOS**中。火山引擎存储迁移服务具有以下功能:* **多种数据源**:支持国内外主流云厂商对象存储及其他兼容S3协议的对象存储;* **免输密钥**:当源端/目...
免费公测|火山引擎大数据文件存储公测现已开启!
因计算集群中包含数据,导致不能实现真正的弹性计算。企业可以通过云上存算分离架构,以低成本的对象存储作为存储底座,完美地解决以上问题。而针对在大数据和机器学习场景下,由对象存储带来的诸如存储性能(IO ... 助力更多企业改善云上大数据体验。 **现已开放免费公测,欢迎申请试用。** **CloudFS** **大数据文件存储**大数据文件存储是面向大数据和机器学习生态的统一文件存储。支持对...
免费公测|火山引擎大数据文件存储公测现已开启!
3. 在云计算场景下,因计算集群中包含数据,导致不能实现真正的弹性计算。企业可以通过云上存算分离架构,以低成本的对象存储作为存储底座,完美地解决以上问题。而针对在大数据和机器学习场景下,由对象存储带来的... 助力更多企业改善云上大数据体验。**现已开放免费公测,欢迎申请试用。**# 大数据文件存储 CloudFS大数据文件存储是面向大数据和机器学习生态的统一文件存储。支持对接多云对象存储,并提供统一数据管理和数据缓...
特惠活动
对象存储功能支持数据中心-优选内容
对象存储功能支持数据中心-相关内容
新功能发布记录
相关功能的最新动态。新特性将在各个地域陆续发布,欢迎体验。 说明 新功能发布记录中的 发布地域 用于记录该功能首次发布时开放的地域,当前实际支持的地域以控制台显示为准。 2024年03月功能名称 功能描述 发布地域 发布时间 相关文档 TOS 对象存储挂载 支持为函数挂载 TOS 对象存储。通过指定 Bucket 子目录与函数本地目录的映射关系,函数可对 Bucket 子目录进行读写操作,突破本地磁盘空间的限制,实现数据持久化存储和多函数共...
使用存储迁移服务将友商对象存储迁移至TOS
或在火山引擎对象存储的存储桶之间做数据迁移时,您可以使用存储迁移服务进行迁移。 关于实验 预计部署时间:30分钟 级别:初级 相关产品:TOS 受众: 通用 实验说明 点击此链接登录控制台。 如果您还没有账户,请点击此链接注册账户。 实验步骤 总体步骤如下: 准备友商对象存储环境 准备火山引擎目的存储桶,配置存储迁移服务进行迁移并观察结果 注意 存储迁移服务支持以下源端云服务商或数据源类型: 阿里云腾讯云华为云七牛云金山云...
对象存储事件通知功能接口变更说明
为了给您提供更加优质的服务,火山引擎对象存储产品预计将于 2024 年 01 月 15 日优化事件通知功能,将同一事件仅支持推送至一个目标,优化为支持推送至多个不同的目标。 预计变更时间2024 年 01 月 15 日,具体变更时间请以控制台变更为准。 变更说明TOS 事件通知功能当前仅支持将同一事件推送至一个目标,变更后,支持将同一事件推送至多个不同的目标(通过新增 V2 版本接口实现)。接口变更影响如下: 如果您希望将事件推送至多个目标,...
将 vePFS 中的数据定时备份到对象存储
适用场景保存在 vePFS 的训练的核心数据,对数据安全性要求比较高,需要把数据进行定期备份。 训练过程中的 checkpoint 数据,定期同步到对象存储中,及时释放 vePFS 的存储空间。 前提条件ECS 和 TOS 带宽均满足备... 备份流程 操作步骤步骤一:设置 vePFS 数据的定时备份登录云服务 ECS。 执行以下命令,创建用于存放备份脚本和备份日志信息的目录。本文以创建 backp 目录为例。 bash cd /optmkdir backup 执行以下命令,创建备份...
对象存储账单功能优化通知
为了更好地支持根据 Project 分账的功能,火山引擎对象存储产品将于 2023年 6 月 27 日 13:00 优化变更用量的推送出账逻辑。 优化上线时间2023年 6 月 27 日 13:00 账单优化说明账单功能优化点如下: 账单明细优化点如下: 优化前账单明细:扩展字段体现桶信息。 优化后账单明细:扩展字段将不再体现桶信息,账单明细中的用量为所有桶的合计用量,价格等不做调整。 如果您希望获取单独桶及相应的分账用量信息,请提前在费用中心-分账账...
对象存储资源包功能迁移说明
为了给您提供更加优质的服务,火山引擎对象存储产品预计将于 2024 年 05 月 13 日 09:00 ~ 05 月 15 日 00:00 优化资源包功能,将您的存量资源包商品迁移到新的资源包商品。本次资源包功能优化,不影响您已购资源包的... 账单明细页面的实例ID/名称将发生变化: 迁移前:格式为 TOS<随机数字>。 迁移后:格式为 TOS-Package<随机数字>。 注意 如果您在业务中依赖了实例ID/名称字段,建议您根据迁移情况尽早改造,避免迁移后影响您的业务运行...
数据透视概述
数据透视支持统计总存储量、总对象数量、历史版本字节数、未合并的分片上传字节数等数据,帮助您了解对象存储的使用情况。本文介绍数据透视支持的功能、指标类别、数据保留时间。 支持的功能通过数据透视看板,您可以了解存储容量增长趋势、增长最快的桶和前缀等内容,从而可以判断存储容量增长是否符合预期,优化存储成本。具体支持的功能如下: 数据统计:支持按天统计数据,并支持以区域、存储类型、存储桶和前缀为维度统计总存储量、...
对象存储日志分析功能免费额度变更说明
为了给您提供更加优质的服务,火山引擎对象存储产品的日志分析功能将于 2023 年 8 月 30 日开始限制免费使用额度,超出额度后,将由日志服务单独收费。 计费开始时间2023 年 8 月 30 日 计费说明TOS 与日志服务深度结合,免费提供最近 7 天内的 TOS 实时日志查询。TOS 将于 2023 年 8 月 30 日开始限制免费使用额度,免费额度如下: 每日日志写入流量:900GiB 每日日志索引流量:900GiB 免费天数内超出免费额度的部分或者使用超出免费天...
实现 vePFS 与对象存储 TOS 之间数据流动
本文介绍如何实现文件存储 vePFS 与对象存储 TOS 之间的数据流动。 适用场景加载数据集场景(TOS->vePFS):数据集从 TOS 流动到 vePFS,用于数据清洗和 GPU 训练。 训练数据归档场景(vePFS->TOS):GPU 训练的 CheckPo... 请参见拷贝对象。 tosutil 支持通过 -j 及 -p 参数调整并发数来优化传输性能,详细建议,请参见拷贝对象。 参数 说明 bucketname 对象存储 Bucket 名称。 sourcedir 需要拷贝数据的目录名称。 -r 表示执行批量操作...
