公元592年，宰相杨素将心爱的夫人乐昌，许配给一叫花子。
这桩婚事，在当时看来，无疑是令人瞠目结舌的。杨素，权倾朝野的隋朝宰相，竟将自己的爱妻嫁给了一个乞丐！乐昌公主，低着头，一言不发，任由那乞丐牵起她的手。杨素却放声大笑，吩咐下人好酒好菜款待这名男子，还慷慨地赏赐了大量的盘缠。
这看似荒唐的举动，实则暗藏玄机。杨府的后院，如同一个热闹非凡的集市，各类“偷花贼”屡见不鲜。先是乐昌公主与旧情人私奔，接着是杨府的歌姬被官员之子“拐走”，就连杨素的贴身侍女也被老友李靖“劫持”。这些“窃贼”行事如此大胆，竟不加掩饰，简直把宰相府当成自家后花园了。杨素虽然怒火中烧，却始终保持着风轻云淡的态度，每次都大手一挥：“带走吧，嫁妆我包了！”有人戏言，杨府人多难管，需要志愿者帮忙“减负”。这并非空穴来风，《隋书》中记载，杨素家僮数千，后院侍妾成千上万。如此庞大的后宫，一个年过半百的男子，如何应付得来？
第一个“偷心贼”徐德言，原是陈朝的官员，如今在隋朝担任一个小官。他慧眼识珠，看上了杨素最珍贵的乐昌公主。两人在陈朝时曾是夫妻，陈朝灭亡后，公主成了杨素的妻子，徐德言则乔装打扮，在长安城寻找机会。最终，通过一枚刻有诗句的半面铜镜，两人重逢，并得到了杨素的祝福。其后，太子舍人李百药因与杨府美姬私会而被抓，杨素却以诗歌作为考验，最终不仅放过了他，还将其许配给了美姬。更令人不可思议的是，红拂女张氏，杨素的贴身侍女，竟然与李靖私奔。民间传说众多，但这些故事大多源于野史，与史实多有出入。实际上，杨素与郑夫人情深意重，七子皆出其手。那些关于杨府的流言蜚语，多半是敌对势力编造的。杨素一生功勋卓著，即使与妻子发生争执，也只是受到皇帝的责罚，并未留下任何其他风流韵事。 所以，那些关于杨府后院的传闻，多半是捕风捉影，不足为信。
