V době husitství panství vlastnil zapřísáhlý katolík, Jarek ze Železnice, užíval také predikát z Pecky. Majitelem Pecky a Semil byl od roku 1407. Jeho panství bylo ušetřeno husitských vpádů až do srpna 1432, kdy hrad Pecku obléhalo sirotčí vojsko a to patrně až do února 1433. Jarek ze Železnice byl nucen podepsat příměří. Na jeho základě se musel přidat na stranu husitů a šířit na svém panství pod obojí. Ušetřil tak hrad a panství plenění husitskými vojsky. O rok později se v pramenech objevuje nový majitel panství Vaněk z Pecky, který patrně sídlil na sklonku vlády v Semilech. V roce 1463 přešlo peckovské panství do rukou Kateřiny z Pecky, nejspíše Vaňkovy dcery. Jejím manželem byl Protiva z Rožmitálu. Po jeho smrti si na panství dělal nároky jeho bratr Lev z Rožmitálu, který vedl spor s Kateřinou. Lev prodal peckovské panství Mikuláši mladšímu Hořickému z Hořic, avšak bez Semil, které se staly součástí panství Navarov. SEDLÁČEK A., Hrady, zámky, tvrze Království českého V., s. 104, 105
Během husitství a krátce po něm v oblasti Novopacka zanikla řada tvrzí (Bělušice, Stará Paka, Heřmanice, Ústí u Staré Paky, Žďár) a obcí. Některé byly v 16. století obnoveny, ale některé zanikly navždy.
