相手から何かを指摘され、「自分でもよくわかっているよ」と言いたいときのひとことです。口調によっては、「わかっているからもう放っておいてくれ」のニュアンスを伝えることもできます。似たフレーズとしては、Of course. / Naturally. / I know. などがあります。

＜SKIT＞

A：We have to be careful not to spend too much money.

B：That goes without saying.

A：お金を使い過ぎないように、気をつけなきゃね。

B：言われるまでもないよ。

『使える英会話鉄板表現 160』（コスモピア株式会社、浦島久著/2016年）より転載