Skolen
Det var i den tiden mange barn rundt på Jarlsberg Hovedgårds husmannsplasser, og skolen ble bygget for disse. Skolen hadde elever fra 1.-7- klasse og de begynte da de var 7 år gamle.
I følge en trykket innberetning for perioden 1891-95, hadde skolen i 1827 ett klasserom som rommet 35 elever, lærerleilighet på 5 værelser og kjøkken. Dessuten hørte det til en jordvei, 40 mål, hvor man kunne fø en hest og tre kuer.
Dette jordet heter fremdeles Skolejordet og bekken som renner her, heter Skolebekken. Skolen lå rett syd for Jarlsberggata i bunnen av Kjærnesbakken, med fasade mot veien. Skolen fikk et tilbygg i 1859 med et klasserom til, og enda et i 1912, samt sløydsal til guttene. Jarlsberg Bruksskole ble nedlagt i 1932 og elevene overført til Sem Skole.
Skolen brant i 1945. Det er idag ingen spor etter skolen.
Lærere
Av lærere ved Jarlsberg Skole kan nevnes Boye Hansen, ansatt i 1827, Adolf Christian Aaker i 1861, Halvor Johan Jacobsen i 1880 og Anders Jensen i 1883. Han virket ved skolen i 36 år inntil 1919.
Nils Nilsen og Theane Stener-Nilsen var et lærerpar. Han virket ved skolen til sin død i 1934 og hun ble med til Sem Skole i 1939. Det samme gjorde John Kristiansen, mens Ragnar Husum ble overført til Nauen Skole.
Elever (1925)
1. rekke fra venstre: John Litsen, Kristian Beckmann, Anton Eriksen, Magnus Kristiansen, Anne Gjein, Asbjørn Rui, Hilda Pedersen, Unn Nilsen, Aud Nilsen, Ragne Johnsen, Bjarne Freitag, Olaf Steingrimsen, Arne Vigulf Aas, Johan Lensberg og Odd Sannes.
2. rekke: Gunvor Aas, Thordis Rui, Emmy Stigen, Esther Kristiansen, en sykesøster, lærerinne Theane Stener Nilsen, lærer Nils Nilsen, Lilly Fagervold, Anny Beckmann og Astrid Hasle.
3. rekke: Lilly Freitag, Marie Hansen, Ragna Kristiansen, Mary Pedersen, Alfhild Sølvernes, Karen Freitag, Signe Hagen, Karen Gjein, Ingrid Pedersen, Mary Steingrimsen og Eli Torbensen.
4. rekke: Astrid Broen, Mimmi Aas, May Dehnes, Maren Eriksen, Ruth Hasle, Ingrid Iversen, Solveig Hansen, Ingrid Hansen, Johanne Broen, Liv Nilsen og Ester Pedersen.
5. rekke: Harald Broen, Dag Nilsen, Tellef Rui, Paul Fagervold, Henry Pedersen, Leif Hasle, Ole Hagen, Leif Broen, Rolf Beckmann, Peder Pedersen og Inge Hansen.