反倒是跟着于秀吉，虽然于秀吉很少跟郭襄玩那些小孩子的玩意，但是平常很认真地跟她切磋和指点武功，有时也跟郭襄讲讲一些在现代耳熟能详的故事，偶尔也还唱歌给她听，郭襄渐渐地觉得跟于秀吉在一起，有着不一样的乐趣。
于秀吉也根本不想跟郭芙在一起，由于熟悉金庸各本小说的剧情，于秀吉早就了解主要的人物。像郭芙，智商和情商都很低。智商方面，她资质差，头脑也笨，学东西的速度也就慢；在情商方面，自私，以自我为中心，性格和脾气也很很不好，还很懒惰。本身郭芙资质就差，又不刻苦练功，武功方面一直都徘徊在二流水平。
反观跟她同一父母所生的郭襄，就不大相同了。聪明、机智、富有爱心、平易近人等。
自从黄药师出去以后，足足有七个多月才回来，于秀吉也想不出他有什么事情。唯一有可能想到的就是，他还是跟原来的神雕剧情一样，收了程英为徒弟，当他不在桃花岛的时候，就在其他地方传授程英武功。此后，黄药师有六七成的时间在外面，只有三四成的时间留在桃花岛，这对于于秀吉来说，已经足够了，黄药师传授武功给他，是需要时间去消化练习的，没有必要黄药师天天都在自己身边。
在于秀吉来到桃花岛第四年的时候，郭靖、黄蓉收到现任丐帮帮主乔峰的飞鸽传书，辽国大军集合大军，即将攻打襄阳，希望他们两人可以来襄阳相助。
郭靖本就是正直之人，异族要侵占汉人的江山，他肯定不能袖手旁观，决定前往襄阳相助。黄蓉见夫君决意前往，自己当然也要跟着去。在叮嘱好几个小辈好好练武之后，两人动身前往襄阳。
冬去春来，花开花落，在不知不觉之间，于秀吉来到桃花岛已经整整五年。在这五年时间里，黄药师对他倾囊相授，而于秀吉也没有辜负黄药师的期望，把他的所有武功都练成了，包括弹指神通、劈空掌、碧海潮生曲、玉箫剑法、落英神剑掌、兰花拂穴手、奇门五转、玉漏催银剑等等。他现在的武功跟黄药师这些绝顶高手相比，相差的只是内功和实战经验。
不知道什么时候才能出去闯荡江湖呢？于秀吉心中一直充满了期待。