I huset som idag är stadsmuseet låg förut Carl Gustafs stads gevärsfaktori och byggnaden kallas därför Faktoriet. Tillverkningen startade i Eskilstuna i Faktoriet 1813 och fortsatte fram till 1969 då verksamheten flyttade till Svista i utkanten av Eskilstuna. Museet öppnade 1979, då under namnet Faktorimuseet.
Museet ligger vackert till på Faktoriholmarna mitt inne i staden där man på museet berättar om produktionen för olika tidsepoker.
