严氏家族自落户天津后，一直住在城外文昌宫西，旧名倭瓜园，后巷名四棵树。严修曾自题春联：“邻巷四棵树；家江七里滩。”横批作“故园瓜好”（七里滩是严氏远祖严光隐居的地方）。由于严修的崇高声誉，人们把严宅所在的胡同称为“严翰林胡同”。
这所宅院是严修一生大部分时间生活的地方，也是他办学育才、播种文明的试验场，是中国教育史、话剧史、文化史上的圣地。著名的南开系列学校孕育诞生于此，“女学振兴之起点”严氏女塾、天津最早的幼儿园严氏蒙养院、天津最早的幼教师范机构严氏保姆讲习所皆创办于此，近代藏书界、诗坛、书林著名的蟫香馆、枣香书画室、十万卷楼坐落在这里，国学教育机构崇化学会从这里走出，中国北方最早的话剧《用非所学》也正是在这里上演……
