后来因不满三好长庆放逐幕府将军足利义辉和管领细川晴元，而被从幕府内罢黜，因而返回儿岛郡。
他本就是上野氏族人，担任幕府役职时也多出言为本家牟利，而今落魄回乡，上野信隆自无不接纳的道理，并且授予对方郡司职役，依仗其带回来那些久经合战的郎党众，来稳定郡内局势。
只不过，随着这两年三好长庆屡次挫败幕府公方的讨伐军，势力如日中天，淡路水军更是频繁往儿岛郡方向靠近，同盐饱倭寇厮杀不断，让上野信德深为惶恐，因此生出降服之心，以来谋求自保，结果却惹恼了心向管领细川晴元的上野高秀，故此才有了今日的杀身之祸。
宇喜多直家心念急转，考虑可能由此会出现的种种变故，对自家是否有利可图。虽然他眼下还在备中国，可看看目前的处境，能待多久还真不好说。
上野高秀算是个厉害人物，明显是要比上野信徳更难对付，不过对方的幼子松鹤丸落入自家手中，倒是可以考虑一下，打着拥立对方的幼子鹤松丸之名，杀入儿岛郡。
凭借此数千之众，足可以与之分庭抗礼，而后再想办法以大义旗号，拉拢顺从的国人众为己所用，剪除不驯豪族，夺其家业分与儿玉党内武士，以来窃取儿岛郡。
他虽不知“奇货可居”一语，但却明白“立国家之主，所赢无数”的道理。远有镰仓幕府执权北条时政，窃夺源氏天下；近则有室町幕府几次公方废立，管领争权，甚至是他翁祖谋立浦上宗景，都是他可以效仿的例子。
他迟迟不敢杀入儿岛郡，固然道路不通，担忧庄为资追击之故，更重要的则是师出无名。
无论何事，总要讲究个名正言顺，不然如何能够压服那些郡内的豪族、国人众，武断霸道终究只能逞一时之凶，难为郡司国主，虽然军中一揆众多呼他为“纯友公”，但他却不能真个去学藤原纯友跑去海上当一辈子的倭寇。
他沉浸思考，忽视了帐内其他人，等户川通安轻轻呼喊自己几声，这才回过神来。
略带歉意地向儿岛直光拱手一礼：“实在是民部大辅遇害的消息，有些让人唏嘘，这才有些恍惚失神，并非有意怠慢，还请叔父务要责怪。”
不看僧面看佛面，毕竟儿岛直光当年救护过自己数年，而今所带的松鹤丸对儿玉党来说更是大大的有用。
所以想要将之劝留在军中，虽然武力囚禁也一样可以达到目的，但在稳固占据儿岛郡以前，他还不想这么快翻脸反目，若能够名正言顺的以家宰身份把持上野家，那可谓是再好不过了。
一向来，儿岛直光对这个外侄都十分喜爱，虽然双方血缘疏远，但在他看来却是心思纯良，是个知恩图报之人。
更何况能够大难逃生，还是多亏了对方的家臣相助，他不应该有所怀疑才对，可宇喜多直家方才沉凝无言的模样，让他觉得甚是阴厉可怖，心中顿生出犹豫离去之感。
正在他心中纠结之际，宇喜多直家开口问道：“儿岛郡内扰乱，事关重大，并非我这个外人所能够插手评论，只是逝者如斯，容我斗胆问上一句，儿岛叔父下一步又该作何打算？”
“主公以去，儿岛郡内上野秀高的党羽甚多，想来时回不去了。我欲挟幼主远投他乡，寻一国大名出面庇护，只是尚未想好去寻那家，不知和泉守……三郎可有议计。”儿岛直光思略片刻，半真半假的用言语试探道。
“叔父所言极是！”宇喜多直家点头应道：“投奔明主，乃是事关家名存亡的大事，并非侄儿一介外人可以妄言，不过还请儿岛叔父宽心，侄儿虽然现在声势不振，但到时不论去往何方，我必然鼎立相助。”
“这……”儿岛直光又犹豫起来，他欲投奔大名，以来借力复兴家名不假，可没有想好该去哪里同样也是真的。
他说是儿岛郡司家中老臣，除了为人老实诚恳意外，实则能力亦是平平，只看他连艘逃出海外的渔船都找不到，便能够管中窥豹，可见不一斑了。