过夜水壶中的水一般是可以喝的,如果是普通的自来水或者瓶装水,且没有被外界污染,一般是安全的。但是需要注意的是,时间久了水中会有细菌滋生,如果水壶没有密封好或者长时间暴露在室温下,可能会导致水质变差甚至变有害。所以,如果是过夜的水壶,最好在第二天再喝,同时注意保持水壶的清洁和密封性。