在北京，提供澡堂的大学主要有以下几所：

北京语言大学：

宿舍中设有自习室、活动室等公共设施，每个宿舍都配有空调、独立卫浴和单独的宽带接口。公共浴室每层楼一个。

东北大学：

研究生宿舍有独立的洗浴室，每层楼有一个公共浴室，公共浴室有隔挡。

北京林业大学：

研究生宿舍为二人间，有独立卫生间和淋浴，因此没有公共澡堂。

北京大学：

本科生宿舍每层楼设有1-2个公共盥洗室和浴室，在31楼楼下设有公共大浴室，均为淋浴。部分宿舍楼配有独立卫浴，但具体情况未详细说明是否有公共澡堂。

清华大学：

有游泳馆，校外人员12块钱一个钟头，学生7块钱一个钟头。

北京航空航天大学：

有澡堂对外开放。

对外经济贸易大学：

有澡堂对外开放。

中国石油大学：

有澡堂对外开放。

北京师范大学：

有代表性的是澡堂，与南方大学不同的是，北师大的宿舍没有独立卫浴，而是使用公共澡堂。

北京交通大学：

有学生提及学校有独立澡堂。

中国传媒大学：

学生中有提及学校有独立浴室的情况。

湘潭大学、湖南科技大学、湖南工程学院、湖南科技大学潇湘学院：

这些大学虽然以提供独立浴室的宿舍著称，但也有部分宿舍或校园设施中包含澡堂。

综上所述，提供澡堂的大学主要是北京语言大学、东北大学、北京林业大学、北京大学、清华大学、北京航空航天大学、对外经济贸易大学、中国石油大学、北京师范大学、北京交通大学、中国传媒大学等。建议直接咨询学校招生办公室或访问学校官网获取最新信息。