自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 Text completion with GPT-2
2023-09-27 14:26:47 时间
自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 Text completion with GPT-2
目录
Text completion with GPT-2
本文将克隆OpenAI GPT-2库，下载345M参数 GPT-2 transformer模型，并与之交互。我们将输入上下文句子并分析transformer生成的文本， 观察transformer如何创造新的内容信息。
代码引用
Reference: OpenAI Repository
模型引用
Alec Radford, Jeffrey Wu, Rewon Child, David Luan, Dario Amodei, Ilya Sutskever,2019,‘Language Models are Unsupervised Multitask Learners’
相关文章
- 没人陪你聊天？教你使用java制作专属智能陪聊机器人
- AI医生，智能导诊机器人
- 数据挖掘威力初显：新华社启用智能写稿机器人
- 《21世纪机器人》——我在制作非理性的机器人
- 自然语言处理NLP星空智能对话机器人系列：NLP on Transformers 101问
- 自然语言处理NLP星空智能对话机器人系列：NLP on Transformers 101
- 自然语言处理NLP星空智能对话机器人系列：NLP on Transformers 101 第6章
- 自然语言处理NLP星空智能对话机器人系列：NLP on Transformers 101第三章
- 自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 Semantic Role Labeling (SRL).
- 自然语言处理NLP星空智能对话机器人系列：论文解读 How Good is Your Tokenizer? (你的词元分析器有多好？多语言模型的单语性能研究)
- 自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 T5 Bill of Rights Sample
- 自然语言处理NLP星空智能对话机器人系列：业界动态信息分享 京东零售数据智能探索实践沙龙
- 自然语言处理NLP星空智能对话机器人系列：业界动态信息分享 自然语言处理中的小样本学习
- 自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 Text completion with GPT-2 step3-5
- 自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 Pattern-Exploiting Training (PET)
- 自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 BLEU smoothing
- 自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 KantaiBERT ByteLevelBPETokenizer
- 自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 位置编码（positional_encoding）
- 自然语言处理NLP星空智能对话机器人系列：深入理解Transformer自然语言处理 多头注意力架构 Concatenation of the output of the heads