Switch版かPS4版か知らんけど公式純正のコントローラを使ってないとかではないのよな?
本体のコントローラ設定にスティックの補正とかあると思うけど試してみた?