Du hast aber schon nen Spannungsteiler aufgebaut mit deinem Joystick, nicht einfach nur 5V angeschlossen. (Sprich GND auf den andren Anschluss des Potis, und den Schleifer an den ADC gehängt).

Ist der Joystick evtl. gar nicht mit Potis, sondern hat nur taster?