正史中这样涂抹了赵飞燕与赵合德之后，后世的小说家就更甚一步，将赵飞燕与赵合德的祸水形象进一步夸大。
最早影响比较大的小说就是署名“汉代伶玄”撰写的《赵飞燕外传》。鲁迅已经指出，这是伪托的，不是汉代人所写，大约是唐代或宋代人所写。小说基本改变了《汉书》中的情节。