Pagalvės pyragaičiai turi daugiau nei keturis šimtus metų istoriją. Legenda pasakoja, kad jie atsirado kaip arbatos užkandis Li Wencha, Mingų dinastijos pareigūno Imperatoriškoje akademijoje, rezidencijoje. Li Wencha, vardu Yanmo, buvo kilęs iš Houshan, Guanxi, Pinghe apygardos (dabar Xilin Village, Xiaoxi Town, Pinghe apygarda), ir yra žinomas muzikos teoretikas. Li Wencha dirbo Liaozhou ir Jinzhou prefektu. Jis pelnė Jiajing imperatoriaus palankumą „pristatęs savo muzikinį traktatą“ ir buvo įdarbintas imperatoriškosios akademijos pareigūnu.
Wanli eros metu Li Wencha išėjo į pensiją ir grįžo į savo gimtąjį Houshan miestą. Norėdamas pademonstruoti „Pekino pareigūno“ didybę, jis parsivežė iš sostinės konditerijos šefą ir paprašė, kad šis sukurtų unikalų kepinį jo namams, kaip užkandį po gėrimų ir arbatos bei kaip dovaną linksminant gimines ir draugus. Įgudęs ir išradingas šefas sukūrė „pagalvės pyragą“. Didikai rūmuose jo paragavo ir labai žavėjosi. „Xiaoxi pagalvės pyragaičiai“ buvo paskirti kaip duoklė imperijos dvarui ir vėliau pradėjo plisti tarp paprastų žmonių.