Precalentar el horno a 350 grados F. Forrar los moldes para cupcakes con forros de papel.
En el cuenco de una batidora eléctrica equipada con un accesorio de pala, batir la mantequilla y los 2 azúcares a alta velocidad hasta que esté ligera y esponjosa, aproximadamente 5 minutos. Baje la velocidad a media, añada los huevos de uno en uno, luego añada la vainilla y mezcle bien. En otro bol, bata el suero de leche, la crema agria y el café. En otro bol, tamice la harina, el cacao, el bicarbonato y la sal. A baja velocidad, añada la mezcla de suero de leche y la mezcla de harina alternativamente en tercios al bol de la batidora, comenzando con la mezcla de suero de leche y terminando con la mezcla de harina. Mezclar sólo hasta que se haya mezclado. Doble la masa con una espátula de goma para asegurarse de que está completamente mezclada.
Distribuya la masa entre los moldes para magdalenas (una cucharada de helado estándar redondeada por taza es la cantidad adecuada). Hornee en la mitad del horno durante 20 a 25 minutos, hasta que un palillo salga limpio. Deje enfriar durante 10 minutos, sáquelo de los moldes y déjelo enfriar completamente antes de ponerle el glaseado.