Precalienta el horno a 350 grados F (175 grados C). Forra un molde para muffins de 12 tazas con forros de papel.

Mezcla la harina, el cacao en polvo, el polvo de hornear, el bicarbonato de sodio y la sal en un tazón.

Bate la mantequilla, el azúcar blanco y el azúcar moreno en un tazón grande con una batidora eléctrica a velocidad media hasta que esté suave y esponjoso, aproximadamente 90 segundos. Agrega los huevos, uno a la vez, batiendo hasta que se incorpore después de cada adición. Bate la vainilla.

Incorpora la mezcla de harina un tercio a la vez, alternando con 1/4 de taza de leche, a baja velocidad hasta que se mezcle. Llena cada taza de muffin preparada con 1/4 de taza de masa.

Hornea hasta que un palillo insertado en los centros salga limpio, aproximadamente 20 minutos. Enfría en el molde sobre una rejilla durante 5 minutos. Transfiere a la rejilla para enfriar completamente, aproximadamente 20 minutos.

Mientras tanto, bate el queso crema y la mantequilla en un tazón grande con una batidora eléctrica a velocidad media-alta hasta que esté suave y esponjoso, aproximadamente 30 segundos. Reduce la velocidad a baja; agrega el azúcar en polvo, 1 taza a la vez, batiendo hasta que la cobertura esté suave.