段安节是唐初名将段志玄的后裔。段志玄仕隋为太原司法书佐，其三世孙段文昌即段安节的祖父，唐穆宗时官至宰相。父亲段成式，历官至太常少卿，著有《庐陵宦下记》2卷，已佚；《酉阳杂俎》20卷和续集10卷（今尚存）。段安节官国子司业，“善乐律，能自度曲”（《新唐书·段志玄传》附载）。撰有《乐府杂录》。《序》中谈到他撰作《乐府杂录》的宗旨在于“吁天降神”，“移风易俗”，“重翻曲调”，说他自己“以幼少即好音律，故得生少宫商，亦似闻见数多，稍能记忆。尝见《教坊记》，亦未周详，以耳目所接，编成《乐府杂录》一卷。