Azure Synapse Analytics中Spark作业活动能否向管道返回值？

我正在使用Azure Synapse Analytics，在管道中通过Spark作业活动执行Python脚本。目前已通过Python的sys.argv成功获取Spark作业的输入参数，但希望找到类似方式从Spark作业活动向管道返回输出值。

我曾尝试使用sys.exit()传递返回值，但只要返回值非整数0，Spark作业活动就会报错终止，不符合我的需求。

补充信息 #

• 我已在Microsoft Learn问答平台提交相同问题，截至2022年12月暂无解决方案，微软已开启内部工单处理该问题。
• 目前我采用的临时解决方法是：将输出写入湖数据库，之后在管道中通过查询获取该输出值。

内容的提问来源于stack exchange，提问作者Dario Ant