圣若瑟修院及圣堂由耶稣会会士兴建，当时人称之为圣若瑟楼。经过三十年经营，院舍陆续落成。修院入口大门设于三巴仔街、大门与圣堂入口成一轴线关系。圣堂的规模仅次于圣保禄教堂，因此中国人称它为“三巴仔”。圣堂内并设有古旧且具相当艺术性的告解亭，右边高塔上有大小铜钟各一，已有近二百年的历史，由意籍铸造家卑他利华建造。