这几年间，相良家多事之秋，剑豪丸目藏人佐为雪大口城砥上之耻，大小各战虽亦迭建奇勋，但“永不召见”的禁令却仍未因此解除。但藏人佐与其说是战场上的勇将，毋宁说是超绝的兵法家——剑客，在这期间，与恩师伊势守仍不断地文札往来，以炽热之心，在钻研兵法方面下功夫。而且在新阴流中，掺入自己从实战上所获的经验和研究心得，另创了“泰舍流”一派。他的剑术声望本来已经很高，各藩子弟投入他的门下，不远千里前来受业的人便慢慢地多起来了。
日月如逝，他的年龄已逾五十岁。这一代剑豪，似乎在这山国的小藩里终其一生，别无建树了。但庆长三年，当他五十六岁的时候，因偶然的机缘，使他名震京洛，赢得关西日本第一剑客的荣誉。
藏人佐的门下，有一个叫有濑外记的徒弟，心想新阴流的始祖既是上泉伊势守，倒不如从伊势守直传来得简捷，上江户投入了伊势守门下。其时，德川家康已从三河播迁江户，伊势守便是因家康之邀，担任着武艺师范的。
有濑外记习艺数年，回来时给藏人佐带来伊势守的亲笔函。略云：
前年入京，曾将新阴流奥秘悉数相传，以西国传道授艺之事委诸吾弟，谅已洞察……余于最近又参悟另一刀法，亟待相授，适吾弟门下有濑外记就余习艺，略有心得，乃嘱其回国时，辗转相授，幸垂察焉。
对于如海师恩，藏人佐虽是铭诸肺腑，但向曾是自己徒弟的有濑传授刀法，终是耿耿于怀，便决心上京亲灸师训，带着两弟——寿斋和吉兵卫，弟子木野九郎右卫门、神濑军助及小田六右卫门三人，日夜兼程到了江户。但迟了一步，伊势守已于前一月病逝了。悲痛之余，他便去找到师兄——柳生但马守的府邸去了。
但马守这时已继伊势守之后，做了家康的武艺师范，在木挽町的邸宅是够堂皇的，俨然是诸侯的身份了。
藏人佐却不管这些，带着一伙人踏入府邸。
“喂，新左卫门！”
他仍用少年时的称呼嚷着说：“好久不见了。要在你这里耽搁一个时期哩。”