“云”养熊猫是一种怎样的体验?

在广工,一群腾创班的同学们

为大熊猫开发了一个

智能行为识别算法模型

将这个想法变成了现实

这是全球首个

大熊猫行为识别数据库

行为智能识别模型

智慧系统

能够准确识别圈养大熊猫的

进食、喝水和睡觉等日常行为

识别准确率超过了80%

产教融合项目驱动

广工与腾讯云

创新产学研合作新范式

助00后大学生研发大熊猫“AI奶爸”

打开网易新闻 查看更多图片
大熊猫“AI大模型奶爸”

“大熊猫今天吃东西正常吗?”“大熊猫更喜欢吃什么东西?”“大熊猫今天喝够水了吗?”……过去需要大熊猫奶爸现场查验甚至需要24小时观察记录的问题,迎来了AI的远程解答。

打开网易新闻 查看更多图片

“全球首个大熊猫行为智能识别模型”由广工信息工程学院电子信息工程(腾创班)(下简称“广工腾创班”)十余名00后大学生训练开发,可智能识别圈养大熊猫进食、喝水和睡觉等日常行为,准确率超过了80%。算法模型可将大熊猫日常行为的记录过程智能化、数字化,填补该研究领域的空白,对大熊猫保护具有重大意义。5月17日,该模型在腾讯云生成式AI产业应用峰会上展出。广工腾创班师生应邀参加峰会,受到央视网等多家媒体采访报道。

打开网易新闻 查看更多图片
图 | 腾创班师生参加峰会并接受现场采访
打开网易新闻 查看更多图片

“AI+大熊猫保护”项目源于2023年暑假。在一次人工智能专业课结束后,广工腾创班的几名同学找到蔡念教授提出“为大熊猫开发一个智能行为识别算法模型”,能够智能识别大熊猫异常行为并及时预警。在蔡念教授的鼓励下,项目组组长蓝学深,组织10多名同学分成前端组、后端组、算法组、云端组四个小组,展开了数据采集、算法训练、智慧系统开发等工作。

2024年1月,大熊猫项目组在广工腾创班负责人蔡念教授带领下前往中国大熊猫保护研究中心进行技术交流。

打开网易新闻 查看更多图片

在大熊猫专家、腾讯导师、学业教师指导下,从盛夏到寒冬,跨越200多个日日夜夜和无数场线上会议。广工“AI+大熊猫保护”项目组同学们从5000小时的原始视频数据中精选出120小时有效行为视频,在腾讯云TI-ONE平台快速抽帧得到220万张大熊猫图片,构建起业内首个高质量的大熊猫行为数据集。借助腾讯云TI-ONE平台,同学们对数据集进行筛选、数据标注、清洗以及算法训练,最终训练出首个大熊猫行为智能识别模型。识别圈养大熊猫进食、喝水和睡觉等日常行为,准确率超过了80%,成为照看大熊猫的AI超级奶爸。

打开网易新闻 查看更多图片

腾讯云基于公有云、人工智能开发服务平台腾讯云TI-ONE及一站式研发管理平台CODING DevOps等产品和资源,为项目组提供从底层算力、训练环境部署、数据标注到模型训练的全链路技术与平台支持,帮助同学们了克服大熊猫行为标注、算法模型训练、协同开发、代码优化等难题,缩短算法模型训练时长,加速成果落地。

打开网易新闻 查看更多图片

新型产学研助力创新人才培养

腾讯云教育行业高级架构师刘永杰介绍,腾讯云TI平台为数据标注的质效提升提供了关键的技术支撑。采用平台半自动标注功能,同学们得以提前完成大熊猫行为标注,并快速清晰筛选出具有鲜明行为特征的帧级图像数据,不仅提高了效率,也比手工标注更加精准。

打开网易新闻 查看更多图片

“项目的顺利推进,离不开同学们的努力,离不开中国大熊猫保护研究中心专家的专业知识指导,也离不开腾讯云提供的技术指导和开发平台支持。” 腾创班负责人,项目指导老师、广工教授、博士生导师蔡念表示,行业出题,院校答题,腾讯助力,共建共享。

“名师引领,真实场景,以赛促学,朋辈碰撞,这是一次产教融合教学模式的生动案例”, 广工信息工程学院张俊副院长表示,项目制是广工腾创班拔尖人才培养的模式,在实践情境下锻炼学生的思维方式,激发内生动力,培养解决复杂工程问题的能力。广工腾创班将继续努力构建“面向学科前沿、行业产业、区域发展”的协同创新模式,紧密贴合产业实际案例和技术前沿,全力培养AI领域创新人才。

打开网易新闻 查看更多图片
打开网易新闻 查看更多图片

素材|信息工程学院

编辑 | 袁立群

运营团队|学生新闻中心

责编|王宇涵

初审|李成瑶

复审|杜清