確定申告の損失繰越控除について質問です

申告が必要orした方がいい場合は
・利益が20万飛んで1円以上の年
・損失が出た年
・損失が出た年の翌年から数えて3年間
で合ってる？

逆に言えば確定申告しなくていい場合は
・過去3年（3回）にわたって損失を出さず、なおかつ利益が20万以下の年
だけって解釈でいい？