Efter det flytta enkan Kerstin Johannesdotter i på torpet, där bor hon tills hon flyttar in på fattighuset 1844.
Torpet är sedan obebott i 10år eller det finns i varje fall inga uppgifter på att någon bodde där mellan 1844-1854.
1854 flyttar snickaren Olof Svensson Hallberg från Nykil in på torpet med sin fru Anna Stina Landström. På torpet föds deras son Carl Johan den 7:e juni 1854. Familjen bor bara två år på Karlsberg och flyttar sedan till Skeda.
1858 flyttar Anders Peter Eloff in med sin familj på torpet. De bodde tidigare på Vinnebergs Soldattorp, som idag bara finns ruiner kvar av i kohagen ett par hundra meter från Karlsberg. Han var gift med Inga-Lisa Persdotter som tidigare bodde på Karlsberg med sina föräldrar. De hade fem barn, men sonen Johan dör 15 år gammal. Äldsta sonen Anders flyttade hemifrån innan familjen flyttade in på torpet Karlsberg. Troligen flyttar han för att utbilda sig eller jobba som lärling han flyttar senare tillbaka då jobbar han som skräddare. 1861-1864 bor den döva pigan Karin Nyström med familjen. 1861 flyttar dottern Johanna hemifrån till Skiestad. Sonen Carl flyttar hemifrån 1868 till Sjögestad. Den yngsta dottern Anna Charlotta flyttar till skolhuset 1873 och sedan till Unnerstad 1975. Johanna får en oäkta son Carl August 1874 men han dör efter bara 6 månader. Så Johanna flyttar då hem till mor och far på Karlsberg. Anders Peter Eloff dör hösten 1875. Då flyttar yngsta dottern Anna Charlotta hem till mor, antagligen för att hjälpa till med huset och gården. Johanna flytta till Göteborg 1876. Inga-Lisa, modern dör sedan april 1890. Efter modern död flyttar äldsta sonen skräddaren Anders Eloff tillbaka till föräldrahemmet med sin fru Katarina Jonsdotter och deras dottern Maria Elisabeth. Då bor fortfarande Anders yngsta syster kvar. Maria Elisabeth gifter sig 23:e december 1900 med Ernst Felix Ekström som också flyttar in på Karlsberg. Paret flyttar sedan till Linköping ett år senare. Anders fru Katarina dör sedan 1903 och Anders själv blev 90år och kvar blir då hans yngsta syster Anna charlotta på Karlsber, som lever till 1925.
1927-1928 bor pigan Elsa Naemi Teresia Hoffman på Karlsberg, hon arbetade hos familjen Jakobsson.
1930 ärver Anna Laura Pettersson Karlsber och tomten styckas då av från den stora gården. Anna bor på Karlsber till 1961. Huset kallas i samband med detta för Annastugan. Bilden visar de dokumenten från avstyckningen av tomten, tomtkarta och lagfartsbrev.
1961-1988 äger Anna Elisabet Holmqvist Karlsberg. Under den tiden används torpet bara som sommarbostad.
1988-2005 ägare Leif Lanto
2005-2007 ägare Anders Rådlund
2007 köper vi torpet och tanken var då att bara använder det som sommarbostad, men så blev det inte nu bor vi här och har en egen brevlåda och allt.
