想到此，杨坚决定将计就计，抬起头来，说道：“皇上，臣有罪，臣不能为皇上分忧，除此奸臣，实是寝食不安，皇上……”
皇上点点头，用眼睛制止他继续说下去，有他这句话，就好像表了忠心一般，皇上知他可用，但如今宇文护权势熏天，已经弑君三人，到处都是他的爪牙，所以话点明即可，须知隔墙有耳，若是让宇文护发觉皇上有意对付他，就怕他狗急跳墙，再做出大逆不道的事情来。
当下杨坚与杨勇告辞出宫，杨坚既知道皇上心意，便知道该怎么办了，此时唯等待机会而已。
皇上对杨勇极为喜欢，从此常召他相见，与之谈论，杨勇虽然声音稚嫩，说出的话也聪明大胆，海阔天空，初听似孩子无知之语，细品却也极有趣味，称之神童，看来倒也并不为过。
杨勇近来最爱钻到书房里看书，随公府中书房极大，藏书极多，什么经史子集，应有尽有，杨勇就好像一个穷汉进了宝山，常流连忘返，他前生便极爱看书，尤喜读史，此时自然更是对那史书极为钻研，所以对自己所处的时代，这个时代的人物，都已经有了大概的了解。
只是一个四五岁的孩子对书如此痴迷，未免太不合情理，因此他总是偷偷摸摸的去书房，若有人来则故意装作淘气的样子，把书搞得凌乱不堪，然后偷偷把自己喜欢的书拿走，有几次还遭到了杨坚的训斥。
只是孩子喜欢读书，不管读不读得懂，杨坚还是极为欣喜，所以倒也并不禁止。
杨丽华对这个弟弟理旬极为溺爱，觉得这个弟弟美丽而聪明，调皮却又知礼。
然而就在这时，坊间街头，朝庭民间都开始有一种流言，更有四句民谣满天飞。
木易杨，硬梆梆，
生个儿子似神仙，
神仙都是天之子，
天子之父坐江山。
当杨坚听到这四句话的时候，几乎没有吓得魂飞魄散，虽然是谣言，但谣言杀人不见血，有哪个帝王不在乎自己的江山？曾经便有人进谗言，说他普六如坚貌非常人，只怕其志非小，他为了避祸，这才深自隐晦，谁知自己隐忍了，这个儿子不过五岁，却再一次把自己掀上了风口浪尖。
难道这个儿子真是个祸胎？他似乎又记起儿子出生时候，那几个稳婆丫鬟的惊呼，不正常，确实不正常，家有异象，实在是招祸之兆呀。
聪明，要聪明有什么用？都是聪明惹的祸啊。
谣言这种东西，是不能去辩白的，何况事泄造反，皇上往往是宁可信其有而不信其无，当杨坚合家为此事惶恐不安的时候，杨勇却没事人一般，他毕竟还是可孩子，纵然聪明，又如何懂得这其中的利害？然而他无意中嘟哝的一句话：“谣言止于智者。”让杨坚听到后却不禁又惊又怒，这孩子说的话，其中哲理，竟是大人也说不出来，这不妖孽是什么？
“智者，智过屁，你小小年纪便自恃聪明，在皇上面前胡乱说话，现在惹祸现身，眼看便有家亡族灭之祸，你看如何是好？”
杨坚气无处出，对着杨勇大吼，杨丽华忙把杨勇抱进怀里，独孤夫人本也发愁，可是见丈夫如此窝囊样，却也不禁有气，怒道：“你对着孩子吼什么吼？孩子聪明难道不好吗？别人要传谣言祸害咱家，那是冲着你来的，关孩子什么事？难道孩子是笨蛋，是傻瓜，宇文护就会放过你了？有事就拿孩子出气，你算什么本事？”
杨坚见夫人发怒，不敢再拿孩子出气，却听杨勇头伏在杨丽华怀中咕哝道：“是啊，聪明又不是我的错。”
杨坚听了这句话，几乎没有气得晕过去。