散朝后吴扬一直等到朝臣们都走得差不多了，这才慢慢向殿门外走去。
作为皇帝的鹰犬和爪牙，宋朝的皇城司虽然没有后世锦衣卫那般威风八面，臭名昭著，可也着实没有几个正经的朝臣愿意正眼相看。
作为兴州节度使、开府仪同三司、吴璘吴少保家的十公子，吴扬原本可以在兴州府做一个无忧无虑的衙内，每日斗鸡走狗，跑马观花，什么家国天下、家族责任，都有父兄一力承担。可他偏偏在十七岁那年离家出走，来到临安城，入了皇城司，成了皇帝的爪牙，也成了世人眼中的异类。
果不其然，吴扬没走几步就发现有几个文官不住拿眼觑他，还与旁人嘀嘀咕咕。至于武官，都像避瘟疫似的，恨不得离他八丈远。这些人倒不是瞧他不起，皇城司有宿卫皇宫大内之责，负责皇城与皇帝的安危，武官与之走得太近恐怕受人猜忌，百口莫辩。
吴扬对此早已习惯，他低垂了眼默默地往外走去，偏偏有人将他叫住了。
“吴指挥使慢走，且等等老夫——”
吴扬侧头一看，竟是吏部天官张焘，他赶紧让到道旁，躬身拱手道：“下官见过张大人，不知大人唤住下官有何见教？”
张焘将他扶起，笑道：“小吴大人不必多礼。昔年老夫在四川任官时多亏令尊照拂，贤侄若不嫌弃，唤老夫一声世伯就好。我与令尊暌违多年，不知他身体可好？”
吴扬心里惊讶，面上却半点不显，他又深深施礼道：“多谢世伯记挂，前些日子家兄有书信来，告知家大人一切都好，只是去岁母亲亡故，大人不免仍时时伤感。可惜我皇命在身，不能侍奉在大人身侧，实在是不孝之极。”
去年秋天，吴璘的发妻王氏因病亡故，追封吴国夫人。吴扬原本要辞官回家丁忧，哪知赵构竟舍不得吴扬离开，只给了他一月假期回家奔丧，然后“夺情”，特意组建了皇城司第五指挥使司，任命吴扬任上五指指挥使。