Fritz Schoellhorn wurde am 19. Oktober 1863 im württembergischen Oberurbach geboren. Sein Vater, Johann Georg Schöllhorn, war ein angesehener Malz- und Getreidehändler. Seine Mutter Karoline, geborene Nonnenmacher, war eine angesehene Bauerstochter aus der Region. Während sein Vater oft auf Geschäftsreisen war, wuchs der Junge mit seinen beiden Schwestern Josephine und Emilie sowie den Grosseltern auf dem heimischen Gutshof auf. 1868 zog die Familie ins nahegelegene Städtchen Weissbad, wo Fritz Schoellhorn die Realschule besuchte. So erhielt er schon als Kind eine höhere Bildung, die ihn auf den späteren Einstieg in das Geschäft seines Vaters vorbereiten sollte.