エンド精度不良があるとホイールの位置が定まらず結果片効きになる場合があるね。
（不良の場合はハブ軸がエンドの奥にカコンと当たる手応えが曖昧になる、ゲージ当てれば一目瞭然）
精度が出てれば特に気にせずクイック締めるだけでど真ん中に来るよ。
ホイール嵌める時はブレーキ無視してフレームに対してホイールが真っ直ぐになっているかだけ見て、
次にブレーキ見て必要なら調整だね。
ブレーキ側に問題があるとしたら固定力が不十分でホイール脱着時にシューにタイヤが当たってズレる事があるね。
ホイール脱着とは関係なく起きる場合はワイヤー長が不適切で引っ張られ/押されてる可能性もあるね。