近日,美的集团AI创新中心全自主研发的边端AI算法部署工具链Aidget(AI edge toolbox)正式在Github和OpenI两大社区同步上线开放。推进开源开放是美的集团承担建设的智能服务机器人国家新一代人工智能开放创新平台的重要内容,Aidget将有助于美的与开发者推进AI生态共创,赋能行业技术发展。
在各种智能嵌入式边端设备上运行深度学习模型(深度神经网络)已成为AIoT的主流方式,但由于主流深度学习模型部署要求高,且边端设备运算资源受限,直接部署存在大量的计算资源浪费等直接挑战,阻碍了深度学习模型在资源有限的边端设备上的部署。致力于解决AI通用部署落地难题,针对智能家电领域存在的操作系统和芯片工程化部署难度高、效率低、通用工具链对资源极低的家电和IoT设备适配性较差、通用工具链对语音算法支持力度较低,算子实现与优化不足等现实问题,美的集团AI创新中心于2021年发起了Aidget项目。
作为美的全自研高性能深度学习推理部署工具链,Aidget包含模型压缩工具以及推理加速引擎工具,实现从模型压缩,到推理加速全链路优化。Aidget适用于linux/rtos/android/ios等多种不同边端系统,面向armv7/v8及dsp等不同边端平台提供指令级加速;针对多计算单元设备,提供高性能异构计算能力;针对边端小内存设备,在内存管理方面进行优化设计。
Aidget工具链主要工作流程是将模型通过压缩工具进行模型压缩,支持前沿的主流算法技术剪枝、蒸馏及量化。通过多种压缩方式结合应用,实现高压缩比并保持良好的精度性能。经过压缩后的模型通过推理引擎侧转换工具进行解析,进行进一步优化,包括算子消除、算子替换、布局调整等图优化操作。推理时加载模型,然后经过预处理把模型从抽象的图转换为具体的算子和张量连接的描述形式,并进行内存复用和执行调度等运行优化。
目前,Aidget已陆续在智能冰箱、洗碗机、家庭服务机器人等智能家电产品上实现了投产验证和规模化量产,持续发挥了降本增效作用。美的集团希望通过Aidget开源项目,为边端智能提供AI解决方案;同时,美的AI将持续推进语音技术、计算机视觉、机器人学习相关算法/模型的开放服务和开源共创,赋能行业发展。
【艾肯家电网版权与免责声明】:
凡本网注明"转载:其他(非艾肯家电网)"的内容,均转载自其它媒体或企业供稿(包括供稿配图),转载目的在于传递更多信息,不代表本站赞同作者观点,本站不对内容的准确性、可靠性或完整性提供任何明示或暗示的保证。
凡本网注明"原创"的内容,均为艾肯家电网原创,转载时请在显眼位置标注"来源:艾肯家电网"。
如果发现本站有涉嫌抄袭的内容或者使用了版权图片,请与我们联系QQ:1833597079 或者 微信号:abicomcn1130 ,一经查实,本站将立刻删除侵权内容或版权图片。艾肯家电网将不承担任何法律及连带责任。
附则:对免责及版权声明的解释、修改及更新权均属于艾肯家电网所有。