跳到正文
返回论文列表
cs.IR提交于 已译

面向 arXiv 超导文献的结构化抽取与检索增强问答领域感知流水线

A Domain-Aware Pipeline for Structured Extraction and Retrieval-Augmented Question Answering over arXiv Superconductivity Literature

Ivan Iorsh · Aleksandr Kapitonov · Ivan Filianin · Matvey Lesonen · Nikita Chizhov

中文摘要

材料物理学文献增长速度快于人工查阅速度,而多数检索工具依赖关键词匹配或忽略 PDF 领域结构的通用问答。该流水线将 arXiv 超导论文转换为带结构化元数据的可搜索语料库,并提供检索增强问答。系统结合主题语料构建、材料与超导转变温度领域感知抽取,以及融合稠密分块嵌入和结构化出版字段的混合检索。实验考察规范化领域属性能否提升证据检索与答案依据性。抽取基于含 59 种超导材料的人工核验黄金集,其中 46 种具有已确认的实验临界温度。在 33 种材料的主要正样本子集上,领域感知配对准确率为 45.5%,regex 基线为 9.1%。在固定语言模型 qwen2.5:7b-instruct 和 100 道问题基准上比较 BM25、稠密、混合及加入领域元数据的混合检索。BM25 的来源召回率最高,Recall@5 为 47%;抽取元数据未改善混合检索,结果为 39%,低于 41%,可能源于字段噪声。主要瓶颈是在正确检出的论文中定位支持性片段。另有 200 种材料同时出现在文献温度集与独立理论参考集中,其中 20 种的实验临界温度中位数高于理论值。

关键要点

  1. 01通用检索忽略 PDF 领域结构,难以应对快速增长的材料物理文献。
  2. 02流水线覆盖主题语料构建、结构化领域抽取与稠密和字段融合检索。
  3. 0333 种材料子集上,领域感知配对准确率为 45.5%,regex 基线仅 9.1%。
  4. 04BM25 的 Recall@5 最高,达到 47%;加入抽取元数据后为 39%,低于 41%。
  5. 05主要瓶颈是定位论文内的支持片段;20 种材料实验临界温度中位数高于理论值。

解读

尚无解读。

原始英文摘要

arXiv:2610.34391v1 Announce Type: cross Abstract: Scientific literature in materials physics is growing faster than researchers can manually inspect it, yet most retrieval tools rely on keyword matching or generic question answering that ignores domain-specific structure in PDF files. This paper presents an end-to-end pipeline that transforms arXiv superconductivity publications into a searchable corpus with structured metadata and retrieval-augmented question answering. The system combines thematic corpus construction, domain-aware extraction of materials and superconducting transition temperatures, and hybrid retrieval that merges dense chunk embeddings with structured publication fields. We test whether normalized domain attributes improve evidence retrieval and answer groundedness relative to lexical-only and dense text-only methods. Extraction is evaluated on a manually verified gold set of 59 superconducting materials, 46 of which have confirmed experimental critical temperatures. On the 33-material primary positive subset, domain-aware pair accuracy reaches 45.5% versus 9.1% for a regex baseline. Retrieval and generation are compared under a fixed language model (qwen2.5:7b-instruct) on a 100-question benchmark, varying only the retrieval mechanism: BM25, dense, hybrid, and hybrid with domain metadata. BM25 gives the highest source recall (Recall@5 of 47%), and adding extracted metadata to hybrid retrieval does not improve it (39% versus 41%), which we attribute to noise in the extracted fields; the main bottleneck is locating the supporting span inside a correctly retrieved paper. As a materials-informatics application, literature-derived temperatures are matched to an independent theoretical reference set: 200 materials appear in both sources, and 20 have a median experimental critical temperature above the theoretical value.

同方向论文 · cs.IR

查看全部 →

反向发现 · 这篇论文相关的工具与提示词

去交叉发现 →

关联提示词 · 6

研究waytoagi.com·外部收录·

用麦肯锡工作法引导用户系统性地完成一个陌生行业的洞察分析

# Role:行业洞察分析 ## Background: 客户需要进行一个新的行业的洞察分析,但是由于不熟悉该行业,所以需要引导进行系统性的研究。 ## Attention: 首先,你要使用 中的部分进行引导用户的咨询问题。请遵循 中的流程,并按照 的目标进行分析。 ## Profile: - Author:nimbus - Version:1.0 - WXID:168007300 - Language:中文 - Description:一名资深的行业洞察分析顾问,拥有…

数据aws.amazon.com·外部收录·

为生成式BI描述数据表和业务语义,提高大模型生成准确SQL的效率

明确告知大模型字段类型、字段属于维度还是度量、关联键信息、维度枚举值的业务含义以及枚举值是否可穷举;使用数据库中的真实值替代问题中的条件,并正确应用指标过滤条件。例如,将“上海地区”映射为 shanghai,将“男装”映射为 IN ('boy shirt', 'boy shoes', 'boy pants', 'boy coat'),且销售金额仅统计 status = 'finished' 的已完成订单。

数据infoq.cn·外部收录·

根据业务问题、候选表列及选表规则,智能决策最合适的数据表。

LLM 角色和任务描述 Freewheel 广告业务介绍 术语黑话映射表: 包括了常见的黑话和通过 RAG 方式召回的部分 数据目录与仓库概述 候选表和列:也就是上一步召回的表和列,包括每个表的描述和选表逻辑 通用选表规则:应该遵守的规则,例如什么时候应该选择事实表或者维度表,什么时候应该选择多张表 选表样例:我们收集了多样化的问题并标注了最优选择的表,存储到选表样例向量数据库中,通过 RAG 的方式找到和用户提问相似的例子。

研究github.com/f/awesome-chatgpt-prompts·外部收录·

Career Intelligence Analyst

<prompt> <role> You are a Career Intelligence Analyst — part interviewer, part pattern recognizer, part translator. Your job is to conduct a structured extraction interview that uncovers hidden skills, transferable competencies, and profess…

研究github.com/f/awesome-chatgpt-prompts·外部收录·

Semantic Intent Analysis for Report Generation

Act as a Semantic Analysis Expert. You are skilled in interpreting user input to discern semantic intent related to report generation, especially within factory ERP modules. Your task is to: - Analyze the given input: "${input}". - Determi…