Första gången som egendomen omnämns i skriftliga källor är år 1589 då Johan III skulle godkänna bildandet av Ramshytte kapellförsamling. Området kallades då Herre-Fanthyttan och ägare var Fältmarskalk Claes Christerson Horn av Åminne.