macOS下MIDI控制输入转虚拟按键适配Blender等软件的方案咨询

第三方MIDI转虚拟按键方案可行性 #

该方案完全可落地。虚拟按键生成不需要调用a11y API，主流桌面平台都有原生的系统级输入模拟接口：Windows平台可调用SendInput接口、macOS平台可调用CGEventPost系列接口、Linux平台可通过uinput内核模块或XTest扩展实现，这类接口模拟的输入和物理键盘输入特征基本一致，正常情况下不需要额外权限即可被绝大多数软件识别。仅当适配对输入来源有强校验的特殊软件（如带反作弊机制的游戏、DRM加密类软件）时，才需要额外申请a11y相关权限。

「适配所有软件」的优势是否成立 #

该描述不成立，存在两个明显局限：

• 无法匹配MIDI设备的连续值输入能力：MIDI旋钮、滑杆输出的是0-127范围的连续数值，转成虚拟按键只能实现步进式触发，对于Blender这类有大量无级调节需求（笔刷大小、参数调整、视角缩放）的软件，操作精度和效率会大打折扣
• 存在适配失效场景：部分全屏运行、有输入安全校验的软件会拦截系统模拟输入，同时全局虚拟按键容易和不同软件的内置快捷键产生冲突，无法保证100%适配

更优解决方案推荐 #

• 针对Blender场景优先使用插件适配：无需修改Blender底层源码，现有公开的MIDI控制类插件已经实现了MIDI事件到Blender内置操作的直接绑定，支持连续值映射到滑杆类参数，适配效率和操作体验远优于转虚拟按键的方案
• 多软件通用场景使用混合适配方案：自研或选用支持多输出模式的MIDI事件处理工具，针对普通快捷键类操作输出虚拟按键，针对Blender这类支持脚本调用的软件，直接通过软件的内置RPC接口/插件接口发送操作指令，跳过系统输入层，既避免快捷键冲突，也能保留MIDI设备的连续值调节能力
• 若需要自研工具，优先做定向软件的插件适配，而非仅做通用虚拟按键转换，对生产力类软件的适配效果会提升很多

内容的提问来源于stack exchange，提问作者tml