Karl Schmidt Holter var født og oppvokst i Oslo. Ved skjebnens lunefulle innfall kom han til verden i samme leilighet hvor Ylajali i Hamsuns "Sult" etter forfatterens sigende bodde. Familien hadde kunstnerisk bakgrunn, og etter middelskolen begynte Holter på tegneskolen i Kristiania. Han fortsatte sin malerutdannelse med studieopphold i Brüssel, Paris og København, og var i 1907 representert på "De unges Utstilling". Deretter deltok han på Statens Kunstutstilling i 1909, -10 og -11, og hadde dessuten et par separatutstillinger etter å ha fått mange lovord i pressen.