北齊文宣在晉陽，太子監國，集諸儒講《孝經》，令楊愔傳旨謂國子助教許散愁曰：「先生在世，何以自資。」對曰：「散愁自少以來，不登孌童之床，不入季女之室，服膺簡策，不知老之將至。平生素懷，若斯而已。」太子曰：「顏子縮屋稱貞，柳下嫗而不亂，未若此翁白首不娶者也。」乃賚絹百匹。