怎样只改变Excel中冻结窗口中的列宽，而其它窗口中的列宽不变？

好象不能实现。
Excel里的行、列线是一根贯穿全表整体的线，不能割断的。牵一发而动全身。即是合并了单元格，看上去这根线是断了，其实则不过是隐藏了这部分。当你移动其中一部分时，其另一部分还是根着移动的。
当然，新的版本是否可以割断，我没见过。

只选中冻结窗口中的列，然后调整列宽不就可以了吗？

只能手动调整，只选中冻结窗口的列调整列宽，其它列自然不会改变。