Le bâtiment, qui date d'avant 1894, appartenait à Dona Carolina Cunha. Il a été racheté en 1918 par Sir Robert Ho Tung, un homme d'affaires de Hong Kong qui y vécut de 1941 à 1945.
Description
Il décédera en 1955 et léguera la maison au gouvernement local afin d'y aménager une bibliothèque. Celle ci sera officiellement ouverte en 1958. Une annexe sera construite à l'arrière du bâtiment en 2005, à proximité du jardin. Cette bibliothèque est aujourd'hui la plus grande de Macao.