呂阿昌先生出生於艋舺頂新街（今西昌街），曾就讀艋舺公學校（今老松國小），1915年從臺灣總督府醫學校畢業後，於康定路與廣州街轉角處（今永豐銀行）開設「懷安醫院」懸壺濟世，專長為內科及小兒科。

呂阿昌醫生宅位於廣州街97號及昆明街298、300、302號，為一整棟的轉角建築，原立面材料以水泥粉光飾面，形式簡單無多餘的裝飾，修復後去除水泥還原為紅磚。昆明街與廣州街轉角的騎樓間柱為磚砌圓柱，上有仿希臘多立克（Doric）形式之柱頭，二樓有小花臺，牌樓面以半圓弧山頭作為造型處理，並於修復後，新作泥塑裝飾。