Wie sind die Led`s denn genau verschaltet?
Naja ohne die schaltung zu kennen: Ohne Vorwiderstände wird das nichts. Und da brauchst du mindestens einen vorwiderstand pro farbe oder noch besser pro LED einen Widerstand.
Alternative: Pulsweitenmodulation. Damit könntest du die Spannung auch begrenzen (wenn auch nur den spannungsdurchschnitt) aber um einen Widerstand kommst du auch damit nicht rum.