Nagrzej piekarnik do 350 F. Wyłóż standardową blachę do muffinów na 12 miejsc papierowymi papilotkami i odłóż na bok.

W średniej misce wymieszaj mąkę, proszek do pieczenia, sodę oczyszczoną i sól. Odłóż na bok.

W misce miksera (lub używając miksera ręcznego), połącz cukier i skórkę cytrynową. Wetrzyj skórkę w cukier, aby zwiększyć jego smak. Dodaj masło i miksuj na średnich obrotach przez około 2 minuty, aż będzie jasne i puszyste. Dodaj jajka i mieszaj aż do połączenia. Dodaj sok cytrynowy i miksuj ponownie (w porządku, jeśli ciasto wygląda lekko zwężone w tym momencie).

Dodaj połowę mieszanki mącznej do mokrych składników i mieszaj tylko do połączenia. Dodaj mleko i mieszaj aż do połączenia. Dodaj pozostałą mieszankę mączną i mieszaj tylko do połączenia. Zeskrobay boki i dno miski w razie potrzeby.

Użyj gałkownicy do lodów, aby przenieść ciasto do przygotowanej blachy, napełniając każdy kubek do około ¾. Piecz babeczki w temperaturze 350 F przez 20 do 22 minut, aż wykałaczka włożona w środek wyjdzie prawie czysta. Pozwól babeczkom wystygnąć w blaszce przez 5 minut przed przeniesieniem do kratki, aby całkowicie wystygły.

Aby przygotować krem cytrynowy, miksuj masło na średnich obrotach, aż będzie jasne i puszyste. Dodaj cukier puder i mieszaj aż do połączenia (może wyglądać sucho na początku, ale później się połączy). Dodaj sok cytrynowy i miksuj aż na gładko. Jeśli wymagana jest cieńsza konsystencja, dodawaj mleko łyżka po łyżce.

Przenieś krem do worka cukierniczego z wybranym końcówką i udekoruj babeczki (użyłem końcówki Wilton 1M). Udekoruj skórką cytrynową i podawaj.