We formalise some aspects of the neural-symbol design patterns of van Bekkum et al., such that we can formally define notions of refinement of patterns, as well as modular combination of larger patterns from smaller building blocks. These formal notions are being implemented in the heterogeneous tool set (Hets), such that patterns and refinements can be checked for well-formedness, and combinations can be computed.
Language Models Refine Mechanical Linkage Designs Through Symbolic Reflection and Modular Optimisation
Idiap Research Institute(Idiap研究 institute);Honda Research Institute Europe(本田欧洲研究机构);Department of Computer Science, University of Manchester(曼彻斯特大学计算机科学系);National Biomarker Centre, CRUK-MI, University of Manchester(曼彻斯特大学国家生物标记中心)
PEIRCE: Unifying Material and Formal Reasoning via LLM-Driven Neuro-Symbolic Refinement
University of Manchester(曼彻斯特大学);Idiap Research Institute(伊迪亚普研究所);National Biomarker Centre, CRUK-MI, University of Manchester(英国癌症研究中心曼彻斯特研究所国家生物标志物中心,曼彻斯特大学);University of Galway(戈尔韦大学)
A modular architecture for transparent computation in Recurrent Neural Networks
Plymouth University(普利茅斯大学);Bernstein Center for Computational Neuroscience Berlin(柏林伯恩斯坦计算神经科学中心);Humboldt-Universität zu Berlin(柏林洪堡大学);Inria Sophia-Antipolis Méditerranée(法国国家信息与自动化研究所索菲亚-安蒂波利斯地中海研究中心)
视觉问答(VQA)的主要方法依赖于使用“黑盒”神经编码器对图像和问题进行编码,并将单个令牌解码为“是”或“否”等答案。尽管这种方法有很强的定量结果,但它很难为预测过程提出直观的、人类可读的证明形式。为了解决这个不足,我们重新制定VQA作为一个完整的答案生成任务,这需要模型来证明其预测在自然语言。我们提出了LRTA [看,读,想,答],一个透明的神经符号推理框架的视觉问答,解决问题的一步一步像人类一样,并提供人类可读的形式的理由在每一步。具体来说,LRTA学习首先将图像转换为场景图,并将问题解析为多个推理指令。然后,它通过使用递归神经符号执行模块遍历场景图来一次执行一个推理指令。最后,它生成一个完整的答案,给定的问题与自然语言的理由。我们在GQA数据集上的实验表明,LRTA的性能大大优于最先进的模型(43.1% vs. 28.0%)的完整答案生成任务。我们还通过删除问题中的语言线索(属性和关系)来创建扰动GQA测试集,以分析模型是否具有表面数据相关性的智能猜测。我们表明,LRTA向真正理解这个问题迈出了一步,而最先进的模型往往从训练数据中学习表面的相关性。
MaxSAT-Based Feedback for Guiding Vision-Language Models in Sudoku
Artificial Intelligence Research Institute (IIIA), Consejo Superior de Investigaciones Científicas (CSIC)(人工智能研究所(IIIA),西班牙科学研究高级理事会(CSIC));Institut de Robòtica i Informàtica Industrial (IRI-CSIC-UPC)(工业机器人与信息学研究所(IRI-CSIC-UPC))
NeuroSymActive: Differentiable Neural-Symbolic Reasoning with Active Exploration for Knowledge Graph Question Answering
University of Macau(澳门大学);University of Chinese Academy of Sciences(中国科学院大学);The Australian National University(澳大利亚国立大学);Juntendo University(静冈大学);Guangdong Institute of Intelligence Science and Technology(广东智能科学与技术研究院);Central South University(中南大学);Southeast University(东南大学);China Agricultural University(中国农业大学);Adelaide University(阿德莱德大学)
APTree: Extended Behavior Trees for Adaptive and Scalable Automated Robotic Task Planning in Construction
University of Stuttgart(斯图加特大学);Institute for Computational Design and Construction(计算设计与建造研究所);Institute for Control Engineering of Machine Tools and Manufacturing Units(机床与制造单元控制工程研究所)