开源对象存储平台
社区干货
基于火山引擎 EMR 构建企业级数据湖仓
主要介绍了数据湖仓开源趋势、火山引擎 EMR 的架构及特点,以及如何基于火山引擎 EMR 构建企业级数据湖仓。作者:辛现银,火山引擎开源大数据平台 E-MapReduce 技术架构师 数据湖仓开源趋势... 数据不局限于某种存储底层,支持包括从本地、HDFS 到云对象存储等多种底层。* **Table 格式**:本质上是基于存储的、 Table 的数据+元数据定义。具体来说,这种数据格式有三个具体的实现: **Delta Lake** 、 ...
Apache Iceberg 中引入索引提升查询性能
是火山引擎数智平台(VeDI)旗下的云原生开源大数据平台产品, 提供了企业级的 Hadoop、Spark、Flink、Hive、Presto、Kafka、StarRocks、Doris、Hudi、Iceberg 等大数据生态组件,100% 开源兼容,可以帮助企业快速构建企... 将数据 HFDS 或 TOS(火山引擎对象存储产品)上,然后采用 Trino 或者 Spark 去做分析。
特惠活动
开源对象存储平台-优选内容
开源对象存储平台-相关内容
对象存储日志分析功能免费额度变更说明
为了给您提供更加优质的服务,火山引擎对象存储产品的日志分析功能将于 2023 年 8 月 30 日开始限制免费使用额度,超出额度后,将由日志服务单独收费。 计费开始时间2023 年 8 月 30 日 计费说明TOS 与日志服务深度结合,免费提供最近 7 天内的 TOS 实时日志查询。TOS 将于 2023 年 8 月 30 日开始限制免费使用额度,免费额度如下: 每日日志写入流量:900GiB 每日日志索引流量:900GiB 免费天数内超出免费额度的部分或者使用超出免费天...
基于火山引擎 EMR 构建企业级数据湖仓
主要介绍了数据湖仓开源趋势、火山引擎 EMR 的架构及特点,以及如何基于火山引擎 EMR 构建企业级数据湖仓。作者:辛现银,火山引擎开源大数据平台 E-MapReduce 技术架构师 数据湖仓开源趋势... 数据不局限于某种存储底层,支持包括从本地、HDFS 到云对象存储等多种底层。* **Table 格式**:本质上是基于存储的、 Table 的数据+元数据定义。具体来说,这种数据格式有三个具体的实现: **Delta Lake** 、 ...
对象存储带宽流控优化说明
为了更好地提升服务体验,火山引擎对象存储产品将优化读写带宽触发流控后的表现。 优化生效时间2023 年 7 月 30 日 23:59 优化说明对象存储产品存在读写带宽限制,达到阈值后将触发流控,流控行为如下所示: 优化前:触发流控后会直接响应 429 错误,拒绝请求。 优化后:触发流控后会整体降速,不会拒绝请求。 TOS 的带宽限制说明,请参见约束限制。
对象存储服务等级协议变更公告
为了给您提供更优质的服务并合法保障您的权益,对象存储将于 2023 年 7 月 10 日变更服务等级协议。 生效日期2023 年 7 月 15 日 变更说明服务等级变更点如下所示: 术语和定义:优化了有效请求和失败请求的场景说明。 服务可用性:明确了存储类型的冗余条件。 赔偿方案:明确了存储类型的冗余条件。 服务等级协议地址最新的服务等级协议地址,请参见对象存储服务等级协议(SLA)。
对象存储事件通知功能接口变更说明
为了给您提供更加优质的服务,火山引擎对象存储产品预计将于 2024 年 01 月 15 日优化事件通知功能,将同一事件仅支持推送至一个目标,优化为支持推送至多个不同的目标。 预计变更时间2024 年 01 月 15 日,具体变更时间请以控制台变更为准。 变更说明TOS 事件通知功能当前仅支持将同一事件推送至一个目标,变更后,支持将同一事件推送至多个不同的目标(通过新增 V2 版本接口实现)。接口变更影响如下: 如果您希望将事件推送至多个目标,...
对象存储计费变更说明
为了给您提供更加优质的服务,火山引擎对象存储产品预计将于 2024 年 05~06 月优化计费功能,提供更灵活的计费形式。此次计费变更不会影响您的业务和计费,如您对本说明有任何问题,请您及时与我们联系。 预计变更时间05 月 20 日 ~ 06 月 30 日 变更详情变更完成后,您的订单管理、账单明细及账单详情页面将出现以下变化: 订单管理TOS 会生成一个新购订单和 N 个退订订单(后续执行,不在此变更期间),您可以在订单管理页面查看订单详情...
对象存储资源包功能迁移说明
为了给您提供更加优质的服务,火山引擎对象存储产品预计将于 2024 年 05 月 13 日 09:00 ~ 05 月 15 日 00:00 优化资源包功能,将您的存量资源包商品迁移到新的资源包商品。本次资源包功能优化,不影响您已购资源包的正常抵扣。重点告知您,在本次资源包功能优化期间,您将无法新购资源包,无法对已购资源包执行续费、退订操作。如您对本说明有任何问题,请您及时与我们联系。 预计迁移时间05 月 13 日 09:00 ~ 05 月 15 日 00:00 迁移说...
Apache Iceberg 中引入索引提升查询性能
是火山引擎数智平台(VeDI)旗下的云原生开源大数据平台产品, 提供了企业级的 Hadoop、Spark、Flink、Hive、Presto、Kafka、StarRocks、Doris、Hudi、Iceberg 等大数据生态组件,100% 开源兼容,可以帮助企业快速构建企... 将数据 HFDS 或 TOS(火山引擎对象存储产品)上,然后采用 Trino 或者 Spark 去做分析。