Torte s jastucima imaju povijest dužu od četiri stotine godina. Legenda kaže da su nastali kao zakuska za čaj u rezidenciji Li Wencha, dužnosnika dinastije Ming u Carskoj akademiji. Li Wencha, kurtoaznim imenom Yanmo, bio je rodom iz Houshana, Guanxi, okrug Pinghe (sada selo Xilin, grad Xiaoxi, okrug Pinghe), i bio je poznati glazbeni teoretičar. Li Wencha služio je kao prefekt Liaozhoua i Jinzhoua. Stekao je naklonost cara Jiajinga za "predstavljanje svoje glazbene rasprave" i bio je regrutiran kao službenik u Carskoj akademiji.
Tijekom ere Wanli, Li Wencha se povukao i vratio u svoj rodni grad Houshan. Kako bi demonstrirao veličanstvenost "pekinškog dužnosnika", vratio je slastičara iz prijestolnice, tražeći od njega da napravi jedinstveno pecivo za njegovo kućanstvo kao međuobrok nakon pića i čaja, te kao dar za ugošćavanje rodbine i prijatelja. Kuhar, vješt i domišljat, osmislio je "tortu s jastukom". Plemići u palači su ga kušali i divili mu se. "Xiaoxi kolači od jastuka" označeni su kao počast carskom dvoru i kasnije su počeli kružiti među običnim ljudima.
