Hallo Flo,
der LM317 zieht weniger als 1 mA beim Steuern. Schalte mal das Poti direkt daran. Das Weglaufen der Spannung per Transistor kommt wie Shaun schon sagte durch den Basis-Emitter-Übergang.
Gruss Klaus.