Gaden har navn efter dronning Dagmar (1185-1212), der var hustru til kong Valdemar Sejr.
Sammen med bl.a. Thorsgade, Allersgade og Gormsgade var Dagmarsgade blandt de tidligst anlagte på Nørrebro.
Ved hjørnet af Allersgade ligger ejendommen Allersborg.
Igennem huset har der været adgang til den lille sidegade, Thors Passage, der gik mellem Thorsgade og Allersgade.
På hjørnet at Thorsgade ligger en større beboelsesejendom (herunder), der blev opført omkring 1903. Huset har lidt utraditionelt halvrunde vinduer i stueetagen.
I Dagmarsgade har nyere boliger afløst gadens fabriksbygninger og tømmerpladser.
På hjørnet af Allersgade ligger Bryggerhuset (herunder), der er opført som ungdomsboliger. Navnet er en henvisning til brygger Christian Hansen Aller, der gav navn til Allersgade.
En anden nyere bygning er Kongsgården fra 1974, som ligger Dagmarsgade 17-19.
Overfor ligger i Dagmarsgade lejlighedskomplekset Top House, med lidt større lejligheder. Denne ejendom er også fra 1974.