李安的父親是臺灣教育家李升，母親是李楊思莊，胞弟李崗和李安壹樣，既是編劇也是導演。1978年，李安在美國留學期間結識了妻子林惠嘉。1983年，二人在美國註冊結婚。婚後，李安與林惠嘉生有大兒子李涵和小兒子李淳，全家居住在紐約州拉奇蒙特。