NLP自然语言处理系列-week6-Seq2Seq+Attention
处理 系列 NLP 自然语言 ATTENTION Seq2Seq
2023-09-27 14:26:47 时间
NLP自然语言处理系列-week6-Seq2Seq+Attention
序列到序列模型
序列到序列模型是一种框架结构，从一个序列转换输出另一个序列，由编码和解码两部分构成。包括序列转换、机器翻译、语音识别、文本到语音转换等。如图所示，输入用绿色表示，模型用蓝色表示，输出用紫色表示。
序列到序列算法
编码器+解码器:
编码器处理输入序列中的每一项，将捕获的信息编译成一个向量（对输入序列的编码）。
在处理完整个输入序列后，编码器将上下文发送给解码器，解码器开始逐项生成输出序列。
适用于机器
相关文章
- ElasticStack系列之六 & 版本冲突处理之乐观锁
- WebRTC系列-Qos系列之接收放RTX处理
- sqlplus乱码处理
- 自然语言处理NLP星空智能对话机器人系列：贝叶斯Bayesian Transformer论文源码复现课程片段1至片段9
- 自然语言处理NLP星空智能对话机器人系列：NLP on Transformers 101 第18章：BERT CommonLit Readability Prize比赛中的高分思路及源码解析
- 自然语言处理NLP星空智能对话机器人系列：NLP on Transformers 101 第8章 轻量级ALBERT模型剖析及BERT变种中常见模型优化方式详解
- 自然语言处理NLP星空智能对话机器人系列：NLP on Transformers 101第三章
- 自然语言处理NLP星空智能对话机器人系列：论文解读 How Good is Your Tokenizer? (你的词元分析器有多好？多语言模型的单语性能研究)
- 自然语言处理NLP星空智能对话机器人系列：业界动态信息分享 Transformer 的性能瓶颈分析与优化
- 自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 Architecture of the T5 model
- 自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 T5-large transformer model
- 自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 Training a GPT-2 language model Steps 10
- 自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 Text completion with GPT-2 step 9
- 自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 It‘s time to make a decision
- 自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 Translations with Trax
- 自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 位置编码（positional_encoding）
- NLP自然语言处理系列- week6-文本生成案例（2）（Attention）
- NLP自然语言处理系列-Google BERT源码学习
- NLP自然语言处理系列-算法基础- 相交链表、环形链表 三数之和
- NLP自然语言处理系列-时间序列数据分析-创建时间序列
- NLP自然语言处理系列-业界动态-比Transformer更有效的预测方法
- NLP自然语言处理系列- week7- 检索模型（排序、整合）（10）
- NLP自然语言处理系列- week7- 检索模型（精排）（8）
- C#组件系列——又一款Excel处理神器Spire.XLS，你值得拥有
- 【Java基础系列】JAVA8日期处理