LとFの間なら正常
ボンネットを開けて、ピンクや緑の液体が入った半透明のタンク（リザーバータンク）を見てください。
液面が「F（Full）」と「L（Low）」の間にあれば正常です。「L」ギリギリでも、今すぐオーバーヒートすることはありません。
逆に「F」を超えてパンパンに入れたりすると、熱膨張で溢れ出します。
Lを下回っていたら
明らかに減っている場合は、どこかから漏れているか、自然蒸発しています。
ホームセンターで売っている「補充用クーラント（そのまま使えるタイプ）」を足しましょう。緑色には緑、ピンクにはピンクを入れます（混ぜると変質する可能性があります）。
水道水は？
緊急時は水道水でも構いませんが、冬場に凍結する恐れや、内部が錆びる原因になるので、あくまで応急処置です。
まとめ
エンジンが熱い時にキャップを開けるのは絶対に禁止です。蒸気が噴き出して大火傷します。