李藩，字叔翰，赵郡人。曾祖至远，天后时李昭德荐为天官侍郎，不诣昭德谢恩，时昭德怒，奏黜为壁州刺史。祖畲，开元时为考功郎中，事母孝谨，母卒，不胜丧死。至远、畲皆以志行名重一时。父承，为湖南观察使，亦有名。藩少恬淡修检，雅容仪，好学。父卒，家富于财，亲族吊者，有挈去不禁，愈务散施，不数年而贫。年四十余未仕，读书扬州，困于自给，妻子怨尤之，晏如也。杜亚居守东都，以故人子署为从事。