安政五年（1858年）正月，幕府终于对直秀下达了处置命令。
在前一年的和历七月，白主奉行所大败鲁西亚战船队，之后奉行崛直秀赶到江户等候处置。在等了小半年后，他终于等来了一个不是结论的结果：
“安心养病、白主一切事务由江川英敏代为署理。”
说是惩罚吧，却没有撤掉直秀白主奉行的役职；说是放过吧，实际上又将直秀软禁在江户。
这样模棱两可的决定，当然引起了朝野之间的争议：
自嘉永六年（1853年）六月三日米人黑船第一次来访以来，幕府步步退让，这自然引发了很多人的不满。
要求对外国采取强硬态度的势力很多，这些人以水户老藩主德川齐昭为首，平时相互呼应——其中比较活跃的是御三家里的水户和尾张、御三家的一桥、德川亲藩的福井、外样大名中的宇和岛、鹿儿岛、。
同时，在谱代大名、外样大名和幕臣中也有相当一部分人支持这一系。
在这些人看来，“白主这一战不但占理而且赢得干净漂亮，大涨了扶桑威风，理应大力褒奖才对。”
所以，闲置直秀的处理方式引发了不小的**。
对此，齐昭等人上书，“鲁西亚无理在先，白主有功无过。且大破敌寇，理应褒奖。闲置之举，令人费解。”
说实话，这些奏章说的合情合理——因为之前鲁西亚和幕府没有任何约定，所以鲁西亚入侵白主就是入寇！白主反击真没错，而且还打赢了，可以说是大快人心。因此幕府闲置直秀真的有点说不过去。
不过，做出这个决定的幕府老中们却觉得委屈，“直秀只是被养病，又没被没被降职撤职，这就不错了！”
说到底，自黑船来访这四五年来，幕府重臣们的涉外态度愈发缓和，所以人人都知道直秀做的对、干的漂亮，但说起奖励直秀，哪个老中也不敢。