六代義時にいたり、兄義光との家督争いから不和となり、さらに天正３年（１５７５年）義時方の義光呪詛一件が露顕して、義光方の夜襲に会い、中野城や寺院は灰じんと化したという。義時は切腹し、その子備中は仙台へ逃れ、中野氏はついに滅亡した。中野領は義光の支配となり、重臣を輪番で中野城に配置し、中野氏の旧臣は、最上氏の家臣団に編入された。
元和八年（１６２２年）最上氏の改易後は、この城も廃城となり、ついに破却された。現在、当時の面影を偲ぶものは、堀形の一部と、楯・北口・中小路・楯坂・袋町・男倉前・築坪山・七日市場・的場・大手窪・馬場宿・馬洗場などの地名である。現在の大郷小学校は、本丸の西部に位置している。