Od roku 1875 se ustálil název Karlsmühle, uváděné již na II. vojenském mapování.
V roce 1867 koupil mlýn od svého otčíma další z rodu Pfrognerů Josef Pfrogner. Ten dal v roce 1870 vypracovat plány na rozšíření mlýnského zařízení. Do lednice nechal vložit druhé vodní kolo a přidal jedno mlýnské složení, takže mlýn měl nyní 2. V tomto roce byl rovněž zasazen vodní cejch.
Dle sčítání obyvatel z roku 1910 zde hospodařil Johann Pfrogner (narozen roku 1863 na mlýně) s manželkou Theresií původem ze Svobodky. Vedle mlýna provozovali také zemědělství, které byl v té době hlavním zaměstnáním. Manželé měli 7 dětí - Annu, Josefa, Margarethu, Adama, Rosu, Mathyldu a Adelheid. V hospodářství bylo 5 kusů hovězího dobytka, 4 prasat a 41 kusů drůbeže.