使用Spark、Livy、Sparkmagic时出现type_ignores缺失的TypeError

• 降级IPython至7.x版本。IPython 8.x与Sparkmagic 0.20.5存在兼容性冲突，Sparkmagic未适配IPython 8的AST语法树更新，导致触发type_ignores字段缺失的检查，7.x版本可避免该问题。
• 升级Sparkmagic到最新版本。后续版本的Sparkmagic大概率修复了该兼容性bug，替换现有0.20.5版本即可。
• 临时规避写法：在同一单元格中给sys.version添加print()调用，代码改为：

  import sys
  print(sys.version)
  

  该写法会改变代码执行路径，绕过AST解析时的type_ignores字段校验。
• 对齐Livy与本地Python环境版本。确保Livy端的Python 3.8.9和本地Notebook的Python 3.8.13版本尽量统一，减少版本差异引发的潜在问题。

内容的提问来源于stack exchange，提问作者yeov