万が一、水道管が凍ってしまった場合は、「自然に溶けるのを待つ」。もしくは「凍った部分にタオルを被せ、ぬるま湯をゆっくりかけて溶かしてください」とのこと。いきなり熱湯をかけると、水道管や蛇口が破裂することがあるので要注意です。

東京都水道局 水道管の凍結について