単純にまっすぐ入力できてないからでしょ
スティックなんてただでさえ無意識に左右に微調整してる癖ついてる人割といるぐらいだし