Pada awal pendiriannya, bangunan SD Tumbuh dan bangunan SMA 11 Yogyakarta merupakan bangunan satu kesatuan yang didirikan pada tahun 1894 oleh pemerintah Belanda sebagai Holland Indische Kweekschool (Sekolah Guru). Pemanfaatan bangunan SD Tumbuh adalah sebagai asrama guru dan pengelola, sedangkan bangunan SMA 11 digunakan sebagai tempat belajar mengajar. Saat berfungsi sebagai Holland Indische Kweekschool, bangunan juga digunakan untuk tempat Kongres I Budi Utomo pada tanggal 5 Oktober 1908.
Pada tahun 1927, Kweekschool merupakan sekolah guru Holland Indische Kweekschool (HIK) dan berlangsung hingga Jepang menduduki Indonesia. Pada zaman Jepang HIK dihapus dan bangunannya digunakan sebagai sekolah guru laki-laki. Tahun 1950-an bangunan eks HIK ini digunakan sebagai asrama tentara. Pada tahun 1956 sekolah guru laki-laki diganti menjadi Sekolah Guru A (SGA), dan mulai tahun 1965 digunakan sebagai Sekolah Pendidikan Guru (SPG). Bangunan ini juga pernah digunakan sebagai Kantor Bidang Sejarah dan Nilai Tradisional Kanwil Depdikbud Provinsi Daerah Istimewa Yogyakarta dan Badan Organisasi Wanita (BOW).
