小栗忠顺见政令不行，于是使上了无往不利的大棒加萝卜，萝卜指的是幕府会把他们转封到河内领十万石，要知道虽然在以前对马府中藩在幕府内部是接受十万石大名的待遇的，但是实际的石高不过两万石，现在给他真真正正的十万石，可以说是一个大升级了，而大棒则是小栗忠顺告诉他们此地马上就要成为英国和俄国的交战之处，如果他们不走，战火一旦波及，这些洋人可不会管你们的死活。
或许十万石并能够打动宗家和他的家臣但是洋人要在他的地上打仗这件事情就有的商议了，在经过小栗忠顺出示幕府和英国的交易以及俄罗斯人的举动以后，虽然宗家对于幕府的“背信弃义”感到了异常的愤怒，但是也不得不相信这里很有可能马上就要成战场了，虽然有这样的那样的理由，但是什么都比不上自己的命重要最后宗家决定走人，宗家一动那连带着他的家臣家臣的家臣都要走了，这是很大的一批人么，怎么可能，虽然宗家是十万石的家格但是只勉强有两万石的实际石高，所以他能拥有的家臣实在是少之又少，把下级武士都算上不过勉强超过三百来人，小栗忠顺的一艘船就能够带走。
藩主的离开让其下的岛民也感到恐慌，于是他们闹了起来，本来小栗忠顺并不打算管他们的死活，但是经过几天以后小栗忠顺似乎是想到了什么，想要离开的可以离开但是只要离开了对马岛那就不再是对马府中藩的领民，而是直属于幕府的领民将会直接带往江户，这些领民一下就不闹了，有的愿意有的就不愿意了，就这样还是走出了不少人，小栗忠顺在把宗家和他们的家臣送到岸上以后，又从长崎租来了不少船，农民还是有一些的，于是一只巨大的船队浩浩荡荡的航向了江户，对马岛上此时就剩下了俄罗斯人。
又过了十几日，两艘悬挂着英国国旗的军舰驶向了对马岛，俄罗斯人也早早就的就发现了这一幕，双方一触即发。