根据2024年多个排名来源的信息， 物理学专业在多个排名中均位列世界第四。具体如下：

2024年全球最好大学专业排名中， 哈佛大学的物理学专业排名世界第四。

2024年软科世界一流学科排名中， 哈佛大学的物理学专业也排名世界第四。

因此，可以确定物理学专业在2024年的世界排名中位居第四。