Die Schaltung hat noch ein paar Probleme:
Die Regelung für die 5 V kann nur mit einem externen Netzteil funktionieren. Aus 5 V vom USB kriegt man da bestenfalls etwa 4,8 V raus, eher weniger.

Die Spannungsversorgung über 100 Ohm und Zenerdiode reicht kaum für die Relais aus.

Der Eigenverbrauch wird auch recht hoch sein: mit 2 relais und 2 LEDs mit reichlich Strom kann das schon über 100 mA kommen. So reichlich ist der Strom am USB nicht.

100 Ohm als Basisvorwiderstand ist auch zu klein, vor allem wenn man eine so schwache Versorgung hat.

Die Elkos vor den Schaltreglern, und ggf. auch die dahinter sind relativ knapp bemessen. Der USB anschluß sollte auch noch eine Induktivität gegen Funkstörungen haben.

Insgesamt würde ich eher vorschalgen hier Linearregler zu nehmen. So ein µC bord sollte nicht so viel Strom verbrauchen, und der USB kann ohnehin nicht so viel leifern. Mit low drop Reglern sollte das gehen.
Für den 3.3 V Regler kann man Dioden für das zusammenführen der Quellen nehmen. Man hat dann immer 3.3 V zur Verfügung für die Versorgung des Tiny24. Zum Stromsparen sollte man die Relais wenn möglich durch Transistoren/FETs ersetzen.