V roce 1646 je mlýn uváděn pod názvem Kastenmül unter dem Seu Teich.
V roce 1654 mlýn prodal Mathev Miller svému bříbuznému Simonu millerovi za 350 marek.
V roce 1710 prodal mlynář svůj dům vedle mlýna mydláři Mathesovi Kristelyovi za 900 marek, prodejce si vyhradil právo ve mlýně svobodně mlít.
V roce 1782 mlýn kupuje soukenický cech se záměrem zřídit zde barvírnu. V roce 1784 je dům prodán krasnobarvíři Johannu Christofovi Etzlovi, ten směl sukno barvit pouze s použitím modré a zelené barvy. Po jeho smrti je barvírna prodaná za 2900 marek a majitelem se stává barvířský mistr Franz Xaver Pfundheller.
V roce 1800 barvírnu vlastní Johann Theodor Pfundheller.
V roce 1805 se stal vlastníkem Johann Theodor Pfundheller ml., který barvírnu zcela přestavěl a v roce 1814 neúspěšně žádá o pronájem rybníka Schwemteich. Pronájem by dle názoru rady odporoval veřejnému zájmu. Po jeho smrti v roce 1824 se majiteli barvírny stávají Adalbert Neumaister a Franz Gaebeler, kteří barvírnu vlastní i v roce 1835, kdy má čp. 53. Adalbert Neumaister vlastní i sousední dům čp. 52.