OAK - 带有可操作知识的入职培训-计算机科学-知识图谱嵌入-增强现实.pdfVIP

OAK-带有可操作知识的入职培训

DevènesSteveCapalleraMarineCherixRobin

InstituteofSystemsEngineering,HEI-VSHumanTechInstitute,HEIAHumanTechInstitute,HEIA

HES-SOUniversityofAppliedSciencesHES-SOUniversityofAppliedSciencesHES-SOUniversityofAppliedSciences

andArtsWesternSwitzerlandandArtsWesternSwitzerlandandArtsWesternSwitzerland

SwitzerlandSwitzerlandSwitzerland

steve.devenes@hevs.chmarine.capallera@hefr.chrobin.cherix@hes-so.ch

MugelliniElenaAbouKhaledOmarCarrinoFrancesco

HumanTechInstitute,HEIAHumanTechInstitute,HEIAInstituteofSystemsEngineering,HEI-VS

HES-SOUniversityofAppliedSciencesHES-SOUniversityofAppliedSciencesHES-SOUniversityofAppliedSciences

andArtsWesternSwitzerlandandArtsWesternSwitzerlandandArtsWesternSwitzerland

SwitzerlandSwitzerlandSwitzerland

elena.mugellini@hefr.chomar.aboukhaled@hes-so.chfrancesco.carrino@hevs.ch

本

译摘要—技术熟练的操作人员离职时知识的流失对公司构成成部分（实体和关系）整合到连续向量空间中，简化它

中一个关键问题。这种技能知识是多样且非结构化的。我们提出了们的操作同时保留知识库[3]–[5]的内在结构。存储、处

1一种结合知识图嵌入和多模态界面的新方法来收集和检索专业理和索引多样化的数据需要专门设计用于媒体的管理

v知识，使其得以应用。我们的方法支持车间决策制定。此外，我

4们利用大语言模型提高查询理解能力并提供适应性答案。作为应系统（MM-DBMS）[6],[7]以及管理和理解用户查询

1的工具。

9用案例研究，我们在高精度制造的质量控制中开发了一个概念

2验证。要具有“可操作性”，存储的信息必须通过最适合

0.IndexTerms—知识图谱嵌入，多模态界面，本体论，增的模态（例如，文本、语音）方便地为操作员所访问，这

7强现实，ML应用，工业5.0

0取决于个人和环境限制（个人防护装备、噪声、照明条

5

2I.介绍和相关工作件等）。多模态界面的使用，特别是人机协作[8]，[9]和

:“三个月前招聘的员工培训三周前招聘的员工”。虽增强现实（AR）在工业环境中的应用已在科学文献中

v

i然有点夸张，但在一次研讨会上收集到的这句话清楚地进行了探讨[10]。Saidi等人[11]研究了将教育AR应

x

r

a说明了各行各业（冶金、化工、制药等）目前面临的一用与现有的维护软件集成以轻松检索维护数据。然而，

个挑