不管0点还是子时，为什么时间的开始都设在半夜？

这只是一个习惯。
如果把时间的开始设在正午。楼主可以设想一下，把一个白天分在了两天。古代人们都是日出而作，日落而息。把一个工作日分为两天，肯定不方便。
那时间的开始一定要设在晚上。而北温带的季节变化明显，白昼时间也随季节变化。设在傍晚也不太好。就要设在深夜了。也就是半夜

就这么规定
如果你真的钻这样的问题
那么这个世界就疯狂了