(含源码)「自然语言处理(NLP)」Question Answering(QA)论文整理(一)

来源: AINLPer 微信公众号(每日更新...
编辑: ShuYini
校稿: ShuYini
时间: 2020-03-02

引言:下面是作者整理的关于Question Answering(QA)相关的论文文章,下面这10篇文章都顶会ICLR发表的文章,能找到源码的作者也直接贴出来了,如果你对Question Answering(QA)感兴趣或者也在找一些相关的文章,希望能够帮助你~~

TILE: Pretrained Encyclopedia: Weakly Supervised Knowledge-Pretrained Language Model
Author: Wenhan Xiong, Jingfei Du, William Yang Wang, Veselin Stoyanov
Paper:https://openreview.net/pdf?id=BJlzm64tDH
Code: None
论文简述:提出了一个简单而有效的弱监督预训练方法,该方法明确地迫使模型包含关于真实世界实体的知识。用我们的新方法训练的模型在实际任务上产生了显著的改进。



TILE: Differentiable Reasoning over a Virtual Knowledge Base
Author: Bhuwan Dhingra, Manzil Zaheer, Vidhisha Balachandran, Graham Neubig, Ruslan Salakhutdinov, William W. Cohen
Paper:https://openreview.net/pdf?id=SJxstlHFPH
Code: http://www.cs.cmu.edu/~bdhingra/pages/drkit.html
论文简述:本文使用一个语料库作为虚拟知识库来回答复杂的多跳转问题。本文主要描述了一个神经模块DrKIT,它像KB一样遍历文本数据,并遵循在语料库中提到的实体之间的关系路径。



TILE: Generative Question Answering: Learning to Answer the Whole Question
Author: Mike Lewis, Angela Fan
Paper:https://openreview.net/pdf?id=Bkx0RjA9tX
Code: None
论文简述: 本文介绍了问题和答案的联合分布的生成模型,这些模型被训练来解释整个问题,而不仅仅是回答它。我们的问题回答(QA)模型是通过学习先验而不是答案来实现的,并且通过条件语言模型生成给定答案的问题——允许在逐字生成问题时进行可伸缩和可解释的多跳推理。


TILE: FlowQA: Grasping Flow in History for Conversational Machine Comprehension
Author: Hsin-Yuan Huang, Eunsol Choi, Wen-tau Yih.
Paper:https://openreview.net/pdf?id=ByftGnR9KX
Code: None
论文简述:会话机器理解需要对会话历史有深刻的理解。为了使传统的单轮模型能够全面地对历史进行编码,本文引入了Flow机制,通过交替的并行处理结构,可以将在回答前面问题的过程中生成的中间表示然后合并到一起。与将之前的问题/答案作为输入串联起来的浅层方法相比,Flow更深入地集成了会话历史的潜在语义。


TILE: Coarse-grain Fine-grain Coattention Network for Multi-evidence Question Answering
Author:Victor Zhong, Caiming Xiong, Nitish Shirish Keskar, Richard Socher
Paper: https://openreview.net/pdf?id=Syl7OsRqY7
Code: None
论文简述: 端到端神经模型在回答问题方面取得了重大进展,但最近的研究表明,这些模型隐含地假设答案和证据在一个文档中紧密地出现。在这项工作中,我们提出了粗粒度细粒度协同注意网络(CFC),这是一种新的问题回答模型,它结合了来自多个文档的证据信息。


TILE: Mastering the Dungeon: Grounded Language Learning by Mechanical Turker Descent
Author:Zhilin Yang, Saizheng Zhang, Jack Urbanek, Will Feng, Alexander Miller, Arthur Szlam, Douwe Kiela, Jason Weston.
Paper:https://openreview.net/pdf?id=SJ-C6JbRW
Code: None
论文简述: 人类是在环境中交互式地学习语言的。本文提出了一个交互式学习过程,称为Mechanical Turker Descent (MTD),训练代理人执行自然语言命令植根于幻想文本冒险游戏。



TILE: DCN+: Mixed Objective And Deep Residual Coattention for Question Answering.
Author:Caiming Xiong, Victor Zhong, Richard Socher.
Paper:https://openreview.net/pdf?id=H1meywxRW
Code: None
论文简述: 传统的问答模型使用交叉熵损失进行优化,这种方法寻求精确的答案,但代价是惩罚有时同样精确的邻近答案。为此本文提出了一种交叉熵损失与自惩罚策略学习相结合的混合解决方法,利用词重叠产生的激励来解决评价指标与优化目标之间的偏差。



TILE: FusionNet: Fusing via Fully-aware Attention with Application to Machine Comprehension.
Author:Hsin-Yuan Huang, Chenguang Zhu, Yelong Shen, Weizhu Chen.
Paper:https://openreview.net/pdf?id=BJIgi_eCZ
Code: None
论文简述: 本文介绍了一种新的神经结构FusionNet,它从三个方面扩展了现有的自注意力方法。首先,提出了一个新的“词史”概念,将注意力信息从最低的词级嵌入到最高的语义级表征中。其次,它确定了一个自注意力评分函数,该函数更好地利用了“词史”概念。第三,提出了一种全意识的多层次注意力机制,可以在一个文本(如一个问题)中捕获完整的信息,并在其对应的文本(如上下文或文章)中逐层加以利用。


TILE: Ask the Right Questions: Active Question Reformulation with Reinforcement Learning
Author: Christian Buck, Jannis Bulian, Massimiliano Ciaramita, Wojciech Gajewski, Andrea Gesmundo, Neil Houlsby, Wei Wang.
Paper:https://openreview.net/pdf?id=S1CChZ-CZ
Code: None
论文简述: 本文将问答(QA)作为一种强化学习任务,称之为主动问答。这里提出一个介于用户和黑箱QA系统之间的代理,并学会重新组织问题以获得最佳答案。代理通过对最初问题的自然语言重新表达来探测系统,并收集返回的证据来获得最佳答案。


TILE: Query-Reduction Networks for Question Answering.
Author:Minjoon Seo, Sewon Min, Ali Farhadi, Hannaneh Hajishirzi.
Paper: https://arxiv.org/pdf/1606.04582.pdf
Code: None
论文简述:本文介绍了一组可微图转换,并使用它们来构建一个具有图内部状态的模型,该模型可以从文本中提取结构化数据并可以使用它来回答查询。


Attention

更多自然语言处理相关知识,还请关注AINLPer公众号,极品干货即刻送达。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,463评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,868评论 3 391
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 161,213评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,666评论 1 290
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,759评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,725评论 1 294
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,716评论 3 415
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,484评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,928评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,233评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,393评论 1 345
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,073评论 5 340
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,718评论 3 324
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,308评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,538评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,338评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,260评论 2 352

推荐阅读更多精彩内容