chihungchan.com
[TG#2] (Arxiv 2019) Ctrl: A conditional transformer language model for controllable generation
1. 背景 动机:(1)充足数据以及模型能力让生成模型能从复杂的domain进行sample从而进行生成,计算机视觉中研究者现在致力于进行控制生成;(2)在nlp中如何更加显式地进行控制生成。 工作:受到了图像生成中控制生成和多任务学习的启发,设计了一个能够基于多种控制形式的条件Transformer。Control可以是task-specific的还可以是关于不同domain的。 2. 语