荷叶茶一般来说是安全的，但以下人群应避免饮用：

1. 孕妇和哺乳期女性。

2. 肝脏或肾脏功能障碍的人士。

3. 有出血性疾病的人士，如溃疡、血友病等。

4. 长期服用血液稀释药物的人士。

5. 有花粉过敏的人士。

如有其他疾病或健康问题，应在饮用荷叶茶之前咨询医生。