Neskôr patril napríklad Matúšovi Čákovi Trenčianskemu, uhorskému kráľovi Karolovi I., či Stiborovi zo Stiboríc. V roku 1444 sa na hrade usídlil lúpežný rytier Ján Moravanský, no jeho vyčínanie v tomto kraji trvalo len rok. Potom hrad opäť menil majiteľov, až v ňom napokon v 18. storočí zostala len vojenská posádka strážiaca väzňov v hradných pivniciach. Keď odišli aj tí, hrad začal chátrať a dnes sa z neho zachovala len časť múrov horného hradu a súvislejší pozostatok dolného opevnenia. Hrad sa snažia udržiavať dobrovoľníci a vstup naň je voľný.