这时已入九月末，天气转凉，秋风瑟瑟。依依惜别了众人，黄明远带着郑言庆和尧君素等人，踏上了回扬州的路。
众人返程的路上，没了来时的燥热和梅雨，好不舒爽，一路飞驰，很快就来到扬州。
令众人自行归建，黄明远没有停歇，立刻就到杨广的总管府中复命。
刚到总管府前厅门口，迎面就碰到了扬州总管府司马张衡。张衡是杨广的核心谋士，也是杨昭和黄明远的老师。黄明远笑着给对方见礼，这张衡却满脸怒容的看着黄明远。
张衡毫不留情地训斥道：“明远啊明远，我知你为人素来谨慎，行事也极其严谨，可这次你怎么这么糊涂，那于谙是能随随便便就杀的人吗？”
杀于谙的事，一直到现在都没有什么说法，黄明远最近都差点忙忘了。
“张先生，这于谙手握重兵，不思报国，婺州危在旦夕，我派的信使驰奔数百里求救，他却视若无睹，不仅不即刻救援，反而还要诛杀信使。不杀了他从他手上夺过兵权，如何能救援婺州。”
张衡却是一脸不以为然的样子。
“要救援婺州，就非得杀了于谙？你到底知不知道，于谙是谁，他是于家的人。”
“他要不是于家的人也不敢明目张胆的不遵将令。”
“谁的将令，你的吗？”
黄明远拿出腰中的令箭。
“张先生，明远临走之前，晋王给了我便宜行事之权。若非当时情况紧急，明远决计是不会出此下策的。”
“什么时候也不能莽撞，你杀的是大隋的正五品车骑将军你知不知道。”
“先生，明远知错了。”
看到黄明远果断认错，张衡的气也消了不少，毕竟黄明远自幼时就跟着他读书，二人关系及其亲近。
张衡为人鲠正，于谙的做法本就违令，张衡不怪黄明远杀了于谙，而怪黄明远行事过于草率。