人間関係についてのモラル?の質問

職場の人と休みにご飯行くことになって、雨が降りそうだから厳しいと言うことを伝えたら明らかに不快な顔されたんだけど、これってこちらがそんなに悪いのかな?
元々雨なら厳しいと言うことはちょっとだけ伝えてたつもりなんだけど、そこはしっかりとは伝わってなかったかもしれない
お店まで片道3キロちょいあって、晴れなら普通に自転車で行くつもりだったんだけど雨でその距離歩かないといけなくてね
車で送ってくれるとは言ってくれたんだけど、大回りする感じで申し訳なくて断った
状況は以上な感じなんだけど、そんなに印象悪い?
個人的には、それならしょうがないかという感じなんだよね
補足だけど、店の場所が悪くて公共交通機関使うくらいなら歩くほうが早い場所にある