后世的传说中，说李淳风的师父是袁天罡，但事实却并非如此。

在隋仁寿二年，李淳风生于岐州雍。自幼聪慧好学，博览群书，尤其精通天文、历法、数学等。

李淳风的父亲李播，在隋朝时曾任县衙小吏，以秩卑不得志，弃官而为道士，颇有学问，自号黄冠子，注《老子》、撰方志图十卷、《天文大象赋》等。从小被誉为“神童”的李淳风在其父的影响下，博览群书，尤钟情于天文、地理、道家、阴阳之学。