Svampekagehistorien er knyttet mere end til sin fødsel til tilskrivningen af dette navn.
I midten af det attende århundrede blev der sendt en pro-italiensk ambassadør (Domenico Pallavicini) til retten i Madrid (hvor Ferdinand VI i Spanien var bosat) takket være republikken Genova's handelsforbindelser med den iberiske halvø. I forventning om hans ophold (ca. 2 år) tog Pallavicini sig med at bringe alle de ansatte sammen med ham, herunder køkkenpersonalet.
I anledning af en modtagelse bestilte Pallavicini til sin konditor Giovanni Battista Cabona en anden dessert, som var nyskabende; Cabona startede fra Biscotto di Savoia-formlen og producerede et lysere og blødere produkt. Opskriften blev derfor kaldt Pate Génoise (Pasta Geovese), og først efter en blid metodologisk forenkling (dvs. koldforarbejdning, sammenlignet med Pate Génoise, der er fremstillet i en bain-marie) blev Pan di Spagna.
Efter kun et århundrede overtog svampekagen rollen som forfader (eller bestemt en af salgslederne) af de europæiske konditorier.