株式会社日立植物服务(代表取缔役社长:武藤 修,总公司:东京都台东区,以下简称「日立植物服务」)与株式会社日立制作所(以下简称「日立」)的研究开发集团合作,开发了手部动作AI解析解决方案「FREEDi - SHUGY*1」,以支持在病理检查流程或制造生产在线,包含一系列操作与动作的手部作业,实现安全、高品质且高效率的业务运行。 本解决方案将现场作业员的手部与对象物(工具)的动作及位置关系,作为时间串行的3D信息进行测量与数据化,从而定量解析手部动作信息。它作为支撑次世代AI解决方案群「HMAX Industry」的数字化资产,将以内置于株式会社日立产机系统(以下简称「日立产机系统」)安全柜的形式提供。此外,通过活用累积的数据,还将作为教育解决方案服务展开,协助提升现场作业人员的技能。目前,除了通过制药与新药研发现场的PoC(概念验证)确认其有效性外,也正在国立癌症研究中心东医院(病理・临床检查科及临床检查部)进行部分病理流程作业可视化与评分化的验证,正式推动在制药与医疗现场的实用化进程。 未来,将推进本解决方案在现场应用的商业化,并扩展至生技、医疗等产业界的广泛领域。最终目标是将熟练工人的手部动作信息数据化、标准化,并将其知识应用于作业支持与自动化,实现人与机器人协作的现场优化(实验室编排)。通过链接研发、制造至现场的各个环节,加速实现客户终身价值最大化。日立植物服务未来将把本解决方案作为Lumada*2解决方案提供,协助客户解决课题。 隶属于日立互联工业(CI)部门工业解决方案事业部的日立植物服务,正致力于发展「HMAX Industry」次世代解决方案群,该方案结合了丰富产品安装基础(数字化资产)的数据、领域知识以及先进AI。通过提供以这些为内核的「工业解决方案」,致力于最大化客户终身价值,并在全球范围内推动产业变革,以实现富裕的社会。 *1 FREEDi - SHUGY:FREE your Data input - Spatial Human-object Understanding for Guidance & AutonomY *2 Lumada:日立为从客户数据中创造价值、加速数字创新,所提供的先进数字技术解决方案、服务与技术的总称。详情请见 (https://www.hitachi.co.jp/products/it/lumada/)。 ■ 背景与课题 在要求严格品质管理的安全柜内无菌操作,或是制造生产线等手工作业现场,步骤上微小的差异都可能对品质与安全产生重大影响。然而,要将基于熟练工人经验与感觉的作业技术,在不依赖特定个人的情况下进行分享并非易事。此外,过去主要仰赖人眼确认,难以累积定量的作业纪录,导致问题发生时的事后验证十分困难;加上劳动人口减少,经验不足的作业人员承担作业的情况增加,这些都成为了现场面临的课题。 ■ 手部动作AI解析解决方案的事业构想与技术特征 日立植物服务与日立及日立产机系统合作,以「One Hitachi」的理念推进本解决方案的开发,并目标通过「纪录、解析、支持、自动化」的四阶段方法来解决现场课题。目前,以细胞培养中的分装作业(搅拌、采液、送液等)为对象,正在推进以下技术的验证与实作。 1. 集成多台摄影机实现无死角的3D测量与「人・物」交互解析(纪录) 从设置于安全柜等作业环境内的多台摄影机影像中,侦测作业员的「手部动作」与「对象物的姿态(利用AR*3标记等)」,并将其转换为时间串行的3D座标信息数据(数字双生)。通过在统一的座标系中捕捉两者的信息,提升对死角的稳健性,并定量纪录作业员的动作及与之连动的对象物动作,精确掌握人与物之间的交互。