Falls es nicht an den Fusebits liegt und du in deiner Schaltung einen einfachen Quarz mit 2 Kondensatoren verwendest, kontrolliere mal die Kondensatoren.

Ich hatte dasselbe Problem beim ATS902313. Nachdem ich die beiden Kondensatoren von denen ich dachte sie hätten 22pF gegen welche ausgetauscht habe die wirklich 22pF haben, dauerte "wait 1000" plötzlich nur noch eine Sekunde statt wie vorher knapp 4 Sekunden.