金研成果│智能AI、翻译、导航……这款眼镜何以受青睐?
编者按:
浙江大学金华研究院是浙江大学与金华市全面战略合作的重要平台,是集科创中心、人才中心和智库中心三位一体的省级新型研发机构,也是服务和推动浙中科创走廊建设发展的重要科创平台。自2021年成立以来,研究院依托浙江大学的技术和人才等优势,重点围绕生物医药与智慧医疗、智能感知与芯片技术等领域开展前沿关键技术研发创新、高层次人才引育和高科技企业孵化,同时围绕金华经济社会发展需求开展政策研究和决策咨询,取得了多项突破性成果。
为了进一步提高科技成果的转化效率和产业化进程,研究院遴选了一批高质量的科技成果进行推介。本期,我们将重点推介由信息技术创新中心轻量化AR眼镜ODM项目团队研发的创新产品——轻量化AR智能眼镜。
Micro LED技术是在硅基芯片上叠加微小尺寸(微纳级)LED阵列,并通过硅基芯片电路驱动微米级LED阵列自发光的技术。相比于已经大规模量产的其他显示技术(LCD、OLED、Micro OLED、LCoS、DLP),Micro LED几乎在各个技术维度上都有着非常优越的性能优势:更长的使用寿命、更高的对比度、更高的分辨率、更快的响应速度、更宽广的视角效果、更丰富的色彩、更高的亮度以及更低的功耗。
浙江大学金华研究院信息技术创新中心的轻量化AR眼镜ODM项目团队,正致力于开发一款以下一代显示技术Micro Led和衍射光波导技术为核心的智能眼镜。
“这款眼镜融合了超低功耗芯片平台与端云结合的大模型AI技术,嵌入了同步翻译、智能AI、导航等功能,旨在实现轻量化、全天候、智能化以及时尚感的增强现实体验。”项目负责人张南介绍,该眼镜采用衍射光波导及Micro LED技术构建了近眼显示系统,显示距离可达8米,画面相当于一个132寸的大屏幕。此外,它还配备了低功耗RTOS系统芯片平台,能够连续使用长达10小时,并且待机时间可达到7天。整机重量仅为49克,采用人体工学设计,确保了90%的目标人群能够舒适佩戴。该眼镜还支持智能语音交互、触摸交互以及与戒指结合的多元交互体验,并且能够适用于运动、商务等多种场景,具备端云结合的大模型能力,兼容消费级应用和企业级应用。
团队自主开发的VenusOS是一款适用于近眼显示场景的人机交互操作系统,它拥有独立的抽象层,便于移植到各种嵌入式系统内核和不同芯片上,为未来在近眼投影领域建立完整应用生态奠定基础。VenusOS配备了完整的内存管理系统、传感器管理框架、文件系统和显示系统等,同时实现了基于蓝牙通信的高效通讯协议,具备低功耗和短通讯时延的特点。在此系统之上,团队还独立开发了一套手机应用开发套件(SDK)和应用程序(安卓、IOS),已经实现了包括语音转写(辅听)、翻译、导航、提词、音乐等在内的多种功能开发。
“基于Micro LED光引擎以及轻量化智能眼镜,我们已经申请了多项知识产权(发明专利或实用新型专利),并与数字光芯、海信视像、诺视科技、鸿石智能等Micro LED设计制造厂家建立深度合作关系,并积极参与下一代全彩显示技术的调试工作。”张南表示,未来将围绕这套操作系统,在通讯协议、群组网络等方面开发多种具有独特知识产权的应用场景,同时加强在于AI相结合的研发投入,将新一代显示技术与人工智能技术更好的融合,让智能眼镜真正成为人类的AI助手。
“前来研究院参观的各界人士都对这款智能眼镜表现出极大的兴趣,为了加快智能眼镜的产业化进程,项目进驻后,我们几乎是同步孵化了觉远创智这家公司。”信息技术创新中心执行主任单国峰表示,产品获得了省、市各级有关领导的肯定,省经信厅要求专人跟进,包括浙江卫视、金华日报在内的多家主流媒体都对团队的成果进行了报道。
今年9月,在金华举办的一场信创大会上,这款智能眼镜成功收获了一家芯片龙头企业的投资意向。对此,项目联合创始人吴君杰说:“当地政府和研究院都提供了很多资源,帮助我们创造了一些与企业对接的机会,大大加快了项目的产业化进程。团队成员都是从五湖四海来到金华,大家都希望在这片沃土上把自己的梦想播种发芽。”
轻量化AR眼镜ODM项目团队简介:
浙江大学金华研究院信息技术创新中心轻量化AR眼镜ODM项目团队是专注于基于Micro LED显示技术提供核心光引擎和应用级解决方案的ODM项目团队,团队成员均来自消费类电子领域和微纳光学制造领域头部企业和国家先进实验室。团队通过复制通讯行业ODM模式的成功经验,实现基于Micro LED芯片对应用场景提供Turnkey(交钥匙)级的解决方案,并在提供方案过程中,自主研发针对不同规格芯片以及不同应用场景的多种规格光引擎,逐步形成从芯片端到应用端完整的泛投影解决方案和核心技术,提升市场竞争力。
文稿|水盈盈
初审|毛 俊
复核|单国峰
终审|徐新民