河水结冰后水底温度一直是4℃吗？

是
在冰面上 温度低于0度 冰的下表面冰水混合物为0度
在水最下面 水为4度
水有反常膨胀 在4度是体积最小

对。
因为4℃时水的密度最大，而冰的密度为0.9，所以4℃的 水会沉在最底下

这个是不确定的，决定与冰下水的深浅。如果冰下水的厚度很薄，打个比方只有一厘米厚，这个时候全部水和冰的热交换很容易进行，那水的温度就几乎是一致的，应该在0度左右，只有水的厚度比较大的时候，不同温度的水密度不同，密度大的肯定在最下面，而密度最大的水是4摄氏度，这个时候由于水的厚度很大，完全的上下热交换很困难，所以最下面的水温度会保持在4度。

河水底层的温度是4℃，表层接近冰面是0℃