400多年前的明朝末年，金陵（南京）籍进士李致，被土司木增请到丽江，成为其私人汉文化的教师，并被任命为木府“万卷楼”的掌印大把司，掌管整个木府的图书和文字档案。李氏家族迁居丽江，历代担任土司的私人教师，前后历时有200多年。
清朝雍正年间，中央政府在云贵等地施行“改土归流”政策，强化了中央集权，木氏土司自此失去了政治上的统治权，而李氏家族也随之失去了在木府的职位，转而弃文从商。
清同治七年，即公元1868年，李氏族人在丽江创办“恒裕公”商号，逐渐积累并成为当地显赫的大家族，并于1875年开始修建家族宅院。
现在保存下来的“恒裕公”仅是当年鼎盛时期李氏宅院的一角角而已。这是被苍桑岁月浸染的古宅散发的时代气息。