做女装网站应怎么定位,芜湖网站公司,美团后台管理系统登录,网络推广营销软件论文链接#xff1a;https://arxiv.org/pdf/2009.12030.pdf动机传统的KGE使用附加的类型信息改善实体的表示#xff0c;但是这些方法完全依赖于显式类型#xff0c;或者忽略了特定于各种关系的不同类型表示#xff0c;并且这些方法目前都不能同时推断出对称性、反演和组成的… 论文链接https://arxiv.org/pdf/2009.12030.pdf动机传统的KGE使用附加的类型信息改善实体的表示但是这些方法完全依赖于显式类型或者忽略了特定于各种关系的不同类型表示并且这些方法目前都不能同时推断出对称性、反演和组成的所有关系模式以及1-N、N-1和N-N关系的复杂性质。所以为了探索任何知识图谱的类型信息我们提出了通过将每个关系作为具有关系感知投影机制的两个实体类型之间的转换操作来学习每个实体的潜在类型嵌入。此外我们设计的模型是一个可插拔模块因此可以很容易地与任何KGE模型合并。亮点1从特定实体的三元组和特定类型的三元组中学习实体、关系和实体类型的嵌入。类型嵌入可以与实体嵌入一起合并以进行推理。2首次建模和推断所有的关系模式包括对称、反转和组成以及KG推理的1-N、N-1和N-N的复杂关系。概念以及模型 提出的模型是AutoETER它的目的是自动学习一种语义上兼容各种关系的类型表示的变体并推断出所有的关系模式和复杂关系。整个流程分为四个部分分别是1. 通过具有超平面投影策略的实体特定的三重编码器将实体和关系嵌入到复杂空间中。2. 特定类型的三重编码器来学习与关系感知投影机制相结合的类型嵌入。3. 提出了受相关关系导出的相似性约束。4. 提出了具有实体特定的三重表示和类型特定的三重表示的总体优化目标和类型嵌入的相似性约束。 模型整体结构如下图所示。实体的三重编码器 我们将实体和关系嵌入到复杂空间中并将关系视为从头实体到尾实体的旋转操作。为了推断复杂关系我们将实体投影到其相关关系超平面中以确保每个实体都有关于特定关系的各种表示。根据实体三元组hrt得到能量函数E1(h,r,t) 由于特定于实体的三元组的嵌入我们的模型可以通过从头到尾实体的旋转操作来推断出所有的关系模式。关系的三重编码器 给定实体e和关系r首先利用关系感知投影机制学习类型和关系嵌入。因此在特定类型的三元组所涉及的能量函数定义为关于等式中的能量函数我们期望这样此外随着在真实空间中学习的类型和关系嵌入我们的模型将花费更少的参数建模和推断所有的关系模式。定理1我们的模型可以通过特定类型的三重嵌入来推断对称的关系模式。证明过程如果关系r为对称的则将保留两个三元组h、r、t和t、r、h根据等式5可知根据等式6可推理得到 证明了对称关系的嵌入应为零向量头尾实体的类型嵌入应相等。定理2我们的模型能够通过特定类型的三重嵌入来推断出反演的关系模式证明过程对于反关系r1和r2两个三元组h、r1、t和t、r2、h保持不变。根据等式3,4,5可得到 然后我们定义一个转移矩阵P把等式9带入等式10中可得到 再把等式11带入8中可得到 因此我们的模型可以通过特定类型的三重嵌入来推断出反演的关系模式。 定理3我们的模型能够通过特定类型的三重嵌入来推断组成的关系。 证明过程由于组合模式r3a、c⇐r1a、b∧r2b、c的关系对应的三元组a、r1、b、b、r2、c和a、r3、c保持不变。根据等式3,4,5可得到 然后我们定义一个转移矩阵P和Q将等式16带入1317带入14中我们可以得到 把等式18带入19中可以得到 结合等式15和20我们可以将组合模式的关系嵌入之间的相关性建模为 因此证明了我们的模型能够通过特定类型的三重嵌入来推断组成的关系。类型编码相似度约束 具有相同关系的三元组中涉及的头实体的类型嵌入彼此更接近与尾实体的类型嵌入相同。因此对于两个具有相同关系的三元组我们希望 任意两个三元组(h1、r1、t1)和(h2、r2、t2)我们设计了能量函数来评估类型嵌入的差异为 优化目标 我们根据一个三分量的目标函数来优化我们的模型 L1和L2是两个成对损失函数分别对应于实体特定的三重编码器和类型特定的三重编码器L3是用于约束类型嵌入的三重损失函数。α1和α2表示在实体特定的三重、类型特定的三重和类型相似度约束之间的权衡的L2和L3的权重。其中L1,L2,L3的具体定义为:实验 使用了四个标准数据集来进行链路预测任务分别是FB15K、WN18、YAGO3-10、FB15K-237。模型的评估指标是MR正确三元组的平均排名MRR正确三元组的平均顺向排名Hitsn前候选三元组中正确三元组的比例。实验结果如下图所示这些结果证明了用我们的模型来建模和推断所有关系模式和复杂关系的优越性。 因为FB15K存在更多不同的关系我们选择FB15K通过映射1-1、1-N、N-N和N-N关系来评估链路预测性能。结果见下图。我们的模型在头实体预测和尾实体预测方面都比其他基线特别是RotatE取得了更好的性能这说明了捕获针对关系感知投影机制的不同关系的不同表示来表示实体类型的优越性。总结和未来工作在本文中我们引入了两类编码器来学习实体特定的三重嵌入和类型特定的三重嵌入它可以建模和推断所有对称、反转和组成的关系模式以及复杂的1-N、N-1和N-N关系。我们还根据类型的相似性来约束类型嵌入。在未来的工作中我们打算扩展我们的方法以获得包含本体监督的更好的类型表示。 OpenKGOpenKG中文开放知识图谱旨在推动以中文为核心的知识图谱数据的开放、互联及众包并促进知识图谱算法、工具及平台的开源开放。点击阅读原文进入 OpenKG 网站。
