说到赵飞燕，就不能不说赵合德，因为她们既是双胞胎，也是私生女。赵飞燕一生的荣辱祸福，都是和她的妹妹赵合德连在一起的。起初，她们生活在社会最底层，受尽人间辛酸苦楚;后来，她们生活在社会最高层，享尽人间荣华富贵。她们的生平遭际，充满了传奇色彩，就连身世也像谜团一样，让人看不清晰。也不知为何，虽然姊妹俩始终在一起，可世人只知有赵飞燕，而不知有赵合德。
有资料说，赵飞燕的父亲是汉代官奴赵临;也有资料说，赵飞燕是其母嫁给江都中尉赵曼后，与舍人冯万金私通而生;就连正史《汉书.外戚传》的记载也是十分笼统的：“孝成赵皇后，本长安宫人。初生时，父母不举，三日不死，乃收养之。及壮，属阳阿主家，学歌舞，号飞燕。”
什么叫“不举”?“不举”就是不要了，就是赵飞燕姊妹刚生下来，就被父母抛弃郊野，三天后，母亲心中不忍，去遗弃处查看时，姐妹俩还未死，由是，又抱回家中收养。为什么会这样?《汉书》没说，而西汉人伶玄所作的《赵飞燕外传》则给出了答案。《赵飞燕外传》是伶玄根据与赵飞燕同时期在宫中服务的樊姓女官，出宫后的叙述，而整理成书的。此书可信度很高，《资治通鉴》亦引用了该书不少的文字。
赵飞燕的母亲是江都王(今江中尉赵曼为妻。谁知赵曼“早有私病”(见《赵飞燕外传》)，这私处的病，大概是先天性阳痿或者性生理一类的疾病，因此，婚后不能行房事。尽管如此，中尉的婚后生活也还算是平静的。
可是不久，中尉府平静的生活发生了变化，引起这一变化的是一个叫冯万金的人。冯万金的父亲冯大力，因精通音律，在江都王府任音律舍人。冯万金继承家传，除精通音乐外，