Sukkerhustoften opføres som udbygning til det første fabriksbyggeri i et lille industrikvarter, der opstår i anden halvdel af 1800-tallet mellem banegården og havnen. Gennem sine første 40 år fungerer bygningen skiftevis som klædefabrik, sukkerraffinaderi og siden kaserne, indtil den i 1892 bliver købt af Aarhus Oliefabrik og brugt som pakhus og produktionsanlæg. Og oliemøllen har virkelig været noget, når det gælder byens industrihistorie. På sit højdepunkt i slutningen af det 19. og begyndelsen af det 20. århundrede er den en af byens største arbejdspladser og beskæftiger hver 10. arbejder i Aarhus på sine to fabriksanlæg, der ligger på havnen og i Jægergårdsgade. Selvom den sidste olie for længst er presset i Sukkerhustoften, har funktionen som lager efterladt sig flere spor, som stadig kan ses i dag i den moderniserede bygning.