当前位置: 主页 > 社会实践

山东大学“智慧启航”调研团AI模型部署初探

来源:山东大学 蒋议霆 阅读:5175 复制标题和网址

山东大学控制学院“智慧启航”调研团致力于深化成员在计算机视觉、机器学习、控制系统等多学科领域的专业知识,熟练掌握ROS机器人开发平台,并提升编程、系统集成与问题解决的能力。在此次项目活动中,团队面临的一项核心挑战是如何将人工智能模型有效部署至嵌入式开发板,以实现实时推理功能。

针对目标检测任务,团队成员经过深入讨论发现,利用PC本地环境训练的模型(文件后缀为“.pt”或“.onnx”)无法直接移植至RDK x3开发板执行实时推理。这是因为开发板的环境和资源与PC本地环境存在差异,需要进行特定的适配和优化。

图片

为此,团队成员在地平线技术交流社区广泛搜集资料,深刻认识到人工智能模型部署前需进行量化和校准处理,将模型格式转换为“.bin”后缀,以适应开发板的运行环境。此外,在上板运行前还需进行模型校验,以确保模型中不包含开发板不支持的算子。对于实时性要求较高的模型,还可以采用模型蒸馏、剪枝等技术进行优化,以提高推理速度并减少资源消耗。团队成员深入学习开发板厂商地平线公司发布的官方视频教程,并尝试构建Docker容器环境,配置好模型转换需要的工具链。他们选取了数据集中的约100张图片进行校准,以减少量化过程中的模型精度损失,并输入特定命令进行模型格式转换。

然而,在配置过程中,团队遇到了文件目录错误、环境版本过于老旧、模型文件传输损坏、模型参数非法等一系列问题。但经过团队成员的积极研讨与多次尝试,耗时将近一个星期,最终成功编译出可在开发板上执行目标检测任务的Yolo模型,推理帧率稳定在约15帧,达到了实时推理的要求。

   此次问题的解决,不仅让团队成员深刻体会到人工智能嵌入式应用开发的复杂性与挑战性,也使他们掌握了其中的关键技术与门道,为未来的研究和开发工作奠定了坚实的基础。

相关内容

智慧启航:山东大学控制学院智能车协会实践团智能电表再探寻

本次活动我们划分为两个主要阶段:基础理论学习、功能初步开发。在活动初期,团队成员集中学习了嵌入式系统的基础知识,包括环境搭建、核心概念理解、以及熟悉常用的开发工...

山东大学“智慧启航”调研团智能电表研发初探

根据我国2030年前实现碳达峰、2060年前实现碳中和的目标,在“双碳战略”和我国电力能源转型的大背景下,本研究旨在开发基于嵌入式系统的智能电表。这项技术能够提供实时的...

山东大学“智慧启航”调研团AI模型部署初探

山东大学控制学院“智慧启航”调研团致力于深化成员在计算机视觉、机器学习、控制系统等多学科领域的专业知识,熟练掌握ROS机器人开发平台,并提升编程、系统集成与问题...

智慧启航:山东大学控制学院智能车协会实践团暑期学习活动

山东大学控制学院的“智慧启航”智能车协会实践团,致力于深化项目成员在计算机视觉、机器学习、传感器技术、控制系统等多学科知识上的理解,熟练掌握ROS机器人开发平台...

推荐内容

以青春之声 筑强国之基

语言,是文明赓续的根脉,亦是山海互通的桥梁。为积极响应大学生...

青春护淮践初心实地调研察水情

为践行“青春护淮,碧水安澜”实践主题,7月12日至7月16日,安徽...

武科大学子走入盛隆电气,连电气也接入AI了!

通讯员(赵文博龙凌波马明羽)“401,合闸自检。”“警告,断路器...

曲园学子寒假实践——为健康饮食寻踪觅源

随着社会的发展,志愿者服务在社会生活中发挥着越来越重要的作用...

山东大学筑福“社”计师协助稚成开展手机讲堂志愿活动

稚成公益手机讲堂:点亮银发族的P图新世界2025年1月9日,一场别...

最新发布

广州城市理工学院Young 实践团开展醒狮武术专题视频拍摄
溯源甲骨润童心 规范语脉育新人——“四只耳朵”青年推普团金厂小分队走进文山州马关县金厂镇老寨小学推普
聆听戍边英雄事迹 笔墨寄情普及雅言——“四只耳朵”青年推普团金厂小分队开展戍边故事宣讲暨明信片书写推
青春无“邪”,护航平安社区:浙邮院无邪先锋实践团开展分层反邪教宣教服务
情景普法融雅言 法治同心守边疆——“四只耳朵”法治边疆行小分队进校园演绎边境线的法律课开展法治推普活
职业情景润雅言 趣味推普暖边疆——“四只耳朵”青年推普团金厂小分队走进边境校园开展职业演绎情景剧推普
知行赴通关 ,青春助乡兴——玉溪师院学子走进墨江通关开展暑期社会实践活动
从村民走访到数字赋能:浙理学子调研山区农产品品牌化发展
塔大学子赴新源社区开展影像与电脑公益服务
赶集悟乡情 烟火润初心——“文传官渡·九州同行”探乡纳韵文创赋能实践团
E之光志愿服务队带领“青葵学堂”小朋友走进东风汽车博物馆
汽院学子走进青葵暑托课堂:歌声相伴,童趣课堂点亮缤纷夏日
执笔绘安全童心 护航少年暑假时光 —— 武科大实践团开设工业安全绘画公益课
“百千万工程”大学生突击队 | 华南农业大学穗悦赋能队:穗悦润苗助成长,赋能童心向朝阳
一刀琢木承古韵,一芯青春续文脉——湘潭大学不经意“巷”遇实践团探寻洞庭木雕传承新韵

海报

投诉

扫码分享