安政二年（1855年）四月初，长崎奉行小栗忠顺拜访了伊豆下田港，和下田奉行江川太郎左卫门交谈后坚定了“以扶桑金易海外银”的决心，之后他便继续前往江户述职——“以金易银”的牵扯甚多，老中们在去年就收到了小栗的提议，但直到最近才召集他回江户当面商议。
坦庵先生知道，既然幕府特召小栗返回，那可能是中枢已经对此已经有了定论，此策十有八九必然施行，但自己在之前从未收到任何风声。小栗特意过来通报，也只是为了避免日后事泄造成猜疑和隔阂。
虽然自从小栗忠顺荣任长崎奉行后，自己早就预料到这一天，但真发生这样的事情，事后他还是唏嘘不已：
小栗父子如今都是远国奉行，其声势已经超出江川家太多了，以前是人家配合自己，如今轮到自己配合对方了。
自从黑船两次来访后，幕政动**不安，自己急流勇退，从中枢返回伊豆国，外人看来，自己是明哲保身，但自家一片发展西洋产业、挽救幕府颓势的苦心，却很少有人能理解。
在大事将行前，小栗能特地前来通告一声，足见盛情，也不能再要求更多了。
他提点了儿子几句，英敏点头称是——自从参与白主机密后，英敏的心态不知不觉发生了变化，压力使人成熟，他也长进了不少，因此这些他都能理解。
虽然在治政和生意上，大家是亲密盟友，但各自都有自身的顾忌，好些事做得说不得，比如“彼得罗巴甫洛夫斯克包围战”自己就没全盘托出，这次只是告知小栗，“听说鲁西亚在北方受到了英佛联军的攻击，损失惨重。”
“谁还没有点小秘密”，直秀说的话，现在自己深有体会——幕府暮气深重，做事顾忌太多，大家都不容易啊。
装上船这次小栗忠顺给的两门线膛炮、三十只后膛枪，带着老爹和弟弟给凑的二百余家臣领民，英敏踏上了回白主的航程——这些军械不是挪用的，而是咸亨洋行的返@点，相当于扶桑的“漂没”。