Смотря какая температура воды была в чайнике изначально... Вода наибольшую плотность имеет при температуре +4 градуса. Т.е. если бы температура воды изначально была бы ниже +4 градусов, то до достижения этой температуры плотность воды будет увеличиваться, а затем только уменьшаться. Это явление называется "аномалией воды".
