🍊句子表征优化小结 转载自《前沿重器[28] | 前沿的向量召回都是怎么做的》 向量召回本身是个新潮的东西,这次给大家小小的总结一下,工业界和科研界中常见的向量召回方案,希望能给大家一些启示吧。 前沿首先,什么是向量召回,核心的流程是什么样的,先介绍下。首先,所谓向量召回,就是把物料和用户query都进行向量表征,物料可以构造索引供query向量进行检索,本质还是在库里检索和query最接近的那些物料,相当于推荐 2021-11-09 #句子 embedding
语义匹配前言:对比学习 1.引言近两年,对比学习(Contrastive Learning)在计算机视觉领域(CV)掀起了一波浪潮,MoCo[1]、SimCLR[2]、BYOL[3]、SimSiam[4]等基于对比学习思想的模型方法层出不穷,作为一种无监督表示学习方法,在CV的一些任务上的表现已经超过了有监督学习。同时,自然语言处理(NLP)领域近来也有了一些跟进的工作,例如ConSERT[5]、SimCSE[6]等模型 2021-11-09 度量学习 #对比学习
语义文本相似度方案 文本匹配是自然语言理解中的一个核心问题,它可以应用于大量的自然语言处理任务中,例如信息检索、问答系统、复述问题、对话系统、机器翻译等等。这些自然语言处理任务在很大程度上都可以抽象成文本匹配问题,比如信息检索可以归结为搜索词和文档资源的匹配,问答系统可以归结为问题和候选答案的匹配,复述问题可以归结为两个同义句的匹配,对话系统可以归结为前一句对话和回复的匹配,机器翻译则可以归结为两种语言的匹配。 本文 2021-11-09 #语义匹配 #语义相似度
对话系统之NLU 核心思路 意图识别NLU,一般作为多分类问题,需求是对给定query进行分类,找到最可能的主问题类别。 对话系统之NLU2.0,核心思路是以搜代分(检索+排序): 离线: 训练一个语义相似度表征模型。 用表征模型预测每一个知识库内标准问的语义向量。 将语义向量入库,即存入检索es库中 在线(来了一个query请求): 用上面训练的表征模型预测query的向量。 通过传统检索方法召回top n 2021-10-31 #NLU #以搜代分
对话系统之槽位提取 槽位提取是NER(Named Entity Recognition)技术在对话系统的应用,要想了解槽位提取的细节,本篇文章会先对NER进行系统介绍,然后再对槽位提取在龙小湖对话系统中的一些应用进行汇报。 2021-10-31 #槽位提取
对话系统之智能客服 对话系统之智能客服 简述对话系统的组成和逻辑,以及如何应用于智能客服 一、对话系统的定义 二、对话系统的概述 三、对话系统的组件架构 四、智能客服的实现 五、龙小湖 对话系统开源框架 2021-10-31 #对话系统 #智能客服
58智能客服QABot 本文根据58同城AI Lab负责人詹坤林在DataFunTalk人工智能技术沙龙所分享的《五八同城智能客服系统“帮帮”技术揭秘》编辑整理而成,在未改变原意的基础上稍做整理。 2021-10-31 #58 #智能问答系统
OPPO小布深度语义问答FQA技术实践 OPPO 旗下的人工智能助手“小布助手”月度活跃用户数突破一亿,成为国内首个月活用户数破亿的手机语音助手。 经过 2 年多的成长,小布助手在能力上实现大幅升级,也融入了我们身边便捷的服务功能。小布团队亦克服了诸多技术难点,为用户带来了更智能的服务。为此,小布团队撰写了一系列文章,详细介绍小布助手背后的技术支撑,本文是揭秘小布背后技术的第三篇。 第一篇:对话系统简介与OPPO小布助手的工程实践 第二 2021-10-31 #智能问答系统 #OPPO小布
来也对话机器人平台智能问答技术拆解 在我们的生活中,智能对话被广泛应用在客服、营销等重复性对话频繁发生的场景,或者作为GUI的补充,为用户提供高效、个性化的体验,甚至是直接集成到智能音箱、智能家居、智能导航等硬件设备中,独立承载人机交互的重担。 按照对话的智能程度,我们可以把智能问答分为5个阶段:单轮问答、多轮会话、意图推理、个性化以及情感互动。 而从问答的种类来讲,我们又可以将其分为Community QA、KBQA、TableQ 2021-10-31 #智能问答系统 #来也
平安人寿智能问答系统 平安在ROCLING 2019上发表了一篇有关智能问答系统的论文,比较全面的讨论了一套智能问答的方案,这篇文章的特点在于详细系统地讲解了FAQ任务的常规方法和体系,对我们构造单论检索式对话、智能问答等任务的建设有很大意义,加之平安本身有非常强的问答需求,文章对智能问答的理解深度也体现的非常明确。 知乎上平安官博给了文章的中文版解释:https://zhuanlan.zhihu.com/p/1113 2021-10-31 #智能问答系统 #平安人寿