根据一般做法和卫生标准，过夜的茶叶水不建议直接饮用。因为茶叶水在室温下长时间存放，会有细菌和微生物的生长，容易引起食物中毒或导致身体不适。因此，为了保持健康和卫生，建议在饮用茶叶水时及时加热或重新冲泡，或者在饮用前先将其煮沸。