黄家花园的前身是原英商德记洋行“二写”（副经理）的住宅，名为“中德记”，先是由林尔嘉买下，后于1917年转卖给黄奕住。黄奕住1919年从印尼回国后定居鼓浪屿。当年黄奕住先在“二写”住宅两侧建造对称的两幢别墅，称“南北楼”，用于安置家小。1921年，黄奕住拆去“二写”的住宅，兴建“中楼”，于1925年才全部建成，总占地面积约11988平方米，建筑面积约4500平方米。因一些历史原因，黄家花园现有6栋建筑。 新中国成立前，到黄家花园做客的民国政要有汪精卫、蔡廷锴和蒋介石等；新中国成立后，黄家花园和观海别墅被厦门市人民政府辟为福建省鼓浪屿干部休养所、厦门市高干招待所，1976年改称厦门市第三招待所；1979年黄家花园改称鼓浪屿宾馆，从上世纪50年代至80年代，接待的党和国家领导有王震等；尼克松、李光耀等外国政要也都在这里住过；2017年7月8日鼓浪屿正式申遗成功，2018年1月28日上午“世界文化遗产”授牌仪式在黄家花园举行。 黄家花园于2001年4月被厦门市人民政府公布为重点保护历史风貌建筑；2018年10月被福建省人民政府公布为第九批省级文物保护单位；2019年10月被中华人民共和国国务院公布为第八批全国重点文物保护单位。