鸟居和江川虽然互相看不顺眼，但役职不同也找不到机会掐架。但在天保九年（1838年）十二月，幕府为了防止南蛮船侵入扶桑沿海，命令鸟居和江川联合测量江户附近海岸和加强警戒工作。在工作过程中，鸟居和江川龌蹉不断。
先是江川找了“尚齿会”的一群兰学者做助手，接着是鸟居找茬，在巡视海外的伊豆七岛之时，尚齿会渡边华山推荐了两名兰学者随行，但鸟居不准，而与渡边华山私交甚好的江川英龙绕过他直接向老中水野忠邦请示，还得到了批准，从此鸟居和江川的矛盾公开化。
天保十年（1839年），在联合任务结束后，鸟居和江川分别向老中水野忠邦提交了工作报告，鸟居是儒学者，那里懂得什么测量和炮台“ 台场”，更别说大筒和铁炮了，报告写的一塌糊涂，老中水野公开对江川的报告予以充分肯定，鸟居恼羞之下派人诬告兰学者去海外的伊豆七岛是为了勾结南蛮人。
于是“蛮社(洋学党)之狱”事件发生，幕府在渡边华山的私人笔记中找到了对幕府的诸多不满言辞，因此兴起大狱，结果是包括渡边华山、高野长英等二十余人被逮捕，小关三英“畏罪”自杀。
受蛮社之狱之累，负有“失察”罪责的江川被剥夺了五国代官的官职，最后他只剩下了世袭的伊豆韭山代官。江川家族是传承了六百余年的名门，根基深厚，这点挫折不算啥，江川一怒之下，经常请假不去韭山，在江户开私塾厮混。他于天保十二年（1841年）从高岛秋帆处学了西洋炮术和军制，天保十三年（1842年）高岛因“私蓄党徒，图谋不轨”被鸟居耀蔵等人逮捕，江川坦庵索性广召学生，开始公开讲授西洋炮术和军制。
他的私塾取名为江川塾，别名绳武馆，直到幕末，绳武馆培养的学生近千人，其中较为著名的有佐久间象山、桥本左内、木户孝允、中村熙光、大山岩、大鸟圭介、伊东祐亨、本岛藤太夫等人。
直秀之前能拜师坦庵先生，除了邻居中村正一是坦庵先生的远方亲属的原因，也和江川塾广招兰学学生有关。
今年鸟居耀蔵被免职了，坦庵先生高兴之余，对仕途又热衷起来，这不，蜡月二十三日还在韭山操劳公务——直秀心中哀嚎，“老师啊，你这完全搞反了，升官发财要在江户多和贵人亲近啊，靠工作努力完全是南辕北辙、徒劳无功啊。”
直秀也不知道坦庵先生啥时间回江户，他也不敢问，于是只好跑到另外一个老师伊东玄朴家去拜访。师母伊东夫人也是头铁的很，坚决不回佐贺那个
本章未完，请点击下一页继续阅读！