You need to enable JavaScript to run this app.
优惠活动
大模型
产品
解决方案
定价
更多

如何使用storey与pandas双引擎向同一ParquetTarget写入数据?

问题:使用storey和pandas双引擎Ingest写入同一ParquetTarget失败,单引擎多目标写入可行

尝试使用storey和pandas两个不同引擎的Ingest向同一个ParquetTarget写入数据,但未能成功实现。

通过feature_set.set_targets实现单个引擎向两个不同目标并行写入是可行的,示例代码如下:

project = mlrun.get_or_create_project(name, context='./', user_project=False)
feature_set = fstore.FeatureSet(feature_name, entities=[fstore.Entity("km", description='km description')], engine="storey")
feature_set.set_targets(targets=[mlrun.datastore.ParquetTarget(), mlrun.datastore.NoSqlTarget()], with_defaults=False)
...
fstore.ingest(feature_set, frm)

注:这么做的主要动机是节省v3io文件系统的存储空间。

内容的提问来源于stack exchange,提问作者XiongChan

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.07.20 06:12:36