Multi-Task Learning with Multi-View Attention for Answer Selection and Knowledge 笔记
论文链接Abstract答案选择和知识库问答(KBQA)是问答(QA)系统的两个重要任务。现有方法分别分开解决这两个任务,这需要大量的重复工作,而忽略了任务之间的丰富的相关信息。在本文中,我们基于以下动机,通过多任务学习(MTL)同时解决答案选择和KBQA任务。首先,答案选择和KBQA都可以视为排序 ...
Read more
Text Style Transfer via Learning Style Instance Supported Latent Space 阅读笔记
本文为biendata视频笔记,仅用来学习,侵删。 开源地址 Background风格转换:在不改变原来句子语义情况下,将原句子x和目标风格sj输入,生成含有目标风格sj的句子 Applications 文本润色,将非正式句子转为正式句子 评论、对话的自动生成 风格特征写作 Previous P ...
Read more
CoCon A Self Supervised Approach for Controlled Text Generation 阅读笔记
论文链接Abstract基于Transformer的LM展现了显著的自然语言生成能力。由于其巨大的潜力,控制这些LMs的生成文本正受到关注。虽然已经有了不少研究去控制被生成文本的高级属性(情感、主题等),但仍然缺少对内容上词级别、短语级别的准确控制。本文中,我们提出了Content-Conditio ...
Read more
PLUG AND PLAY LANGUAGE MODELS A SIMPLE APPROACH TO CONTROLLED TEXT GENERATION
论文链接Abstract在大型文本语料库上训练的大型基于transformer的语言模型(LMs)已经显示出无与伦比的生成能力。然而,如果不修改模型结构或对特定属性数据进行微调,并且需要大量的再训练成本,那么控制生成语言的属性(例如,切换主题或情感)是困难的。我们提出了一个简单的可替代方案:可控制语 ...
Read more
Style Transfer from Non-Parallel Text by Cross-Alignment 阅读笔记
论文链接Abstract本文主要研究基于非平行文本的文体转换。这是一个包括机器翻译、破译和情感改写在内的一系列问题的例子。关键的挑战是将内容与风格等其他方面分开。我们假设一个共享的潜在内容分布在不同的文本语料库中,并提出了一种利用潜在表达的精确对齐来进行风格转换的方法。从一个语体转换过来的句子应该和 ...
Read more
Towards Fine-grained Text Sentiment Transfer 笔记
论文链接Abstract本文专注于细粒度的情感迁移(FGST),该任务的目标是在保留原始语义内容的同时,修改输入序列以满足给定的情感强度。不同于传统的情绪传递任务,它只反转文本的情绪极性(正/负),FTST任务需要更细致和细粒度的情绪控制。为了解决这个问题,我们提出了一个新的Seq2SentiSeq ...
Read more
图神经网络相关学习
只用于记录学习,图侵删。 图学习算法分类结构图 Deep Walk & Node2vec GraphSAGE
Read more
Style Transformer:Unpaired Text Style Transfer without Disentangled Latent Representation 笔记
论文链接Abstract在未配对的文本风格转换中,对潜空间中的文本内容和风格进行消解是一种普遍现象。然而有两个主要的问题存在现在的大多数神经网络中:1)从一个句子的语义中完全剔除风格信息是很困难的;2)基于递归神经网络(RNN)的编码器和解码器,在潜在表示的中介下,不能很好地处理长期依赖的问题,导致 ...
Read more
常见的评估指标
准确率,精确率,F1值,ROC,AUC,P-R,mAP(图来自网络,侵删)
Read more
搜索中的NLP技术
搜索技术除了涉及基础的搜索算法,也涉及到很多NLP技术,本文转载于,只是做个学习记录,侵删。 推荐系统被捧为目前算法领域的主流,推荐系统不需要用户主动进行操作就能获取自己喜欢的东西,但是实际上,搜索系统在很长一段时间占据了重要位置,大到百度的大搜,小到音乐、视频、电商、应用商店等,都有各种各样的搜索 ...
Read more