Gdy Lee był nastolatkiem, rodzina mieszkała w mieszkaniu przy 1720 University Avenue w Bronksie. Lee opisał je jako „mieszkanie na trzecim piętrze z oknami wychodzącymi na podwórze”. Lee dzielił sypialnię z bratem, podczas gdy rodzice spali na rozkładanej kanapie.
