這事传到文帝杨坚那里，龙颜大为不悦。第二天早朝，文帝面对群臣正色道：“昨日冬至节，朕听説百官相率朝见东宫，不知道這是遵循的哪朝规制礼仪？”
殿下一时无人应答。少顷，尚书仆射高熲出列奏道：“陛下，百官去东宫应为祝贺，不应用朝见一词。”
“是吗？”文帝冷冷地反问道，心中不免有些反感。他认为殿下群臣之中，无论是谁出来为杨勇説话都情有可原，惟独你高熲不该出头。因为高熲的儿子已娶了太子的女儿，两人就是儿女亲家。看来高熲是自恃功高权重，竟连這些嫌疑都不顾忌了。文帝想，既然你无所顾忌，朕也就不给你留面子了。于是説道：“既然是节日祝贺，按常理应该是三三两两，至多也不过十个八个的相随同行，而且是陆陆继继，你来我去，随便哪个时辰都行，为什么百官同时集合起来列队同行？是有人征召，还是巧合？为什么太子还身穿礼服，鼓乐喧天地迎接百官？這又是哪国的礼制？”
皇上這连串的发问，殿下群臣鸦雀无声。
文帝故意停顿了一会儿，观察了一眼殿下群臣面色，一个个都诚惶诚恐的样子，高熲也耸了一下眼皮。于是他提高了嗓音，大声説道：“自古以来，朝纲礼制等级森严，上下内外有别，君王臣属才不至于混淆。太子勇虽然将继承大位，但目前仍是朕的臣子。正冬节令，文武百官列行朝贺东宫，不合朝廷典章制度，应当立即停止。下不为例，如有违者，一律按谋反问罪。那时候，朕就不管他与太子有何关系了。”
群臣听得明白，這最后一句显然是有所指。接着，文帝又道：“当然，擅以礼乐迎接百官是太子之过，朕自然不免追问教训的……”
听了张衡的讲述，杨广沉呤半响，心中暗暗思忖：依父皇的脾气看来，对于太子已不是有些不信任，而是心中早已有了猜忌。他自思自叹着説：“唉，单就這件事而论，太子也是做得有些过分了，其实对他自己也不利，比如高熲……”
“大王説得很对。”张衡接过话茬，“乐队受贺一事过了没几天，陛下传旨，挑选宗卫侍官充实皇宫禁卫，一下子就从东宫禁卫中选了一批精悍校尉。這回又是高熲急急奏道：‘若皇宫尽选取强者，恐怕会使东宫禁卫力量太弱了。’陛下一听更是恼火，説：‘朕随时行动，禁卫必须雄毅。太子毓德东宫，左右何须强武？’几句话便把尚书左仆射呛得额头冒汗，垂头丧气地退下。大王您想，這怎能不让人猜疑太子与高熲大人串通一气呢？”
杨广一拍大腿，似有感慨地説：“唉，這个高熲，怎么這么不看眼色。他果真以为功高可以震主吗？嗨，总管掾，刚才説的這些事，与你开始提到的要本王进京相见又有什么关系？”
“哈哈哈……”张衡笑道：“大王一世聪颖，不要假装糊涂，还非要下官説出来吗？”
杨广仍然是摇了摇头。
“大王，依下官之见，若皇帝陛下真的思谋废立之事，那最有希望立为太子的就是———”张衡説着，伸出右手的食指指了指杨广。
杨广慌忙伸手将他的手指按下，説：“太子废立是大事，只有父皇可以言説，除此以外，任何人都不可以胡乱猜测。”
张衡道：“這些道理下官自然明白。不过大王，人生之中要成就几件大事，就要有成大事的时机。机遇到了，立刻伸手抓住，事就成了。若稍有疏忽犹豫，时机错过了，就会一去不复返。下官以为，目前正是该大王伸手去抓一抓试一试的时候。”
杨广觉得，张衡説出的每一句话，每一个字，都好似火镰敲击火石迸发出的一簇簇火星直射自己的胸膛。腹内仿佛有一堆干柴，哪怕有一点火星溅上去，定会燃起熊熊烈火。杨广明白，這烈火一旦燃烧起来，是会烧塌苍穹的。所以他一直躲闪着，他不知道自己为什么要躲闪，或许這是人的一种本能。
于是他对张衡説道：“咱们俩今天説的话绝不能再和任何人提起！”
张衡点头道：“大王尽管放心。下官跟随大王多年，该説什么，该做什么自己心中还是有数的。”张衡的确心中有数，因为他早已看出了杨广心中想着什么。