Området bestod innan den stora branden 1806 av ett gytter av hus för mindre bemedlade uddevallabor. På 1860-talet fanns här Uddgrens garverirörelse. Alla byggnader tillhöriga kvarnen vid Strömbergets vattenfall brann år 1886. En ny kvarn byggdes nästa år och 1901 började den även leverera elström. Dagens elverk etablerades 1916 då staden tog över både kvarn och elverk.
En motion i kommunfullmäktige år 1905 lade grunden till parken som fick sitt namn efter köpmannen Bror Jonas Hasselgren som ägt marken. Mellan Hasselbacken och torget ligger det så kallade Hasselbackshuset som byggdes år 1814 med det holländska tegel som fick införas tullfritt efter den stora branden.
Uddevalla kyrka, som är den fjärde på samma plats, ritades av Gustaf af Sillén och invigdes 1811 medan klocktornet fick sitt nuvarande utseende efter en ombyggnad 1833.