Draco vietti lapsuutensa kotonaan Wiltshiressa upeassa Malfoyn kartanossa, joka on ollut hänen sukunsa hallussa jo monien vuosisatojen ajan. Siitä asti kun hän osasi puhua, hänelle on tehty selväksi, että hän on kolmella tavalla hyvin erityinen: ensinnäkin, että hän on velho, toiseksi, että hän on puhdasverinen, ja kolmanneksi, että hänellä on kunnia kuulua Malfoyn jaloon sukuun.

   Draco kasvoi perheessä, joka tuki vahvasti pimeyden voimien valtaannousua ja joka kuului pimeyden lordin suuriin kannattajiin. Tästä ei kuitenkaan saanut kertoa ulkopuolisille lukuunottamatta perheen läheisiä ystäviä, sillä muuten "isi voi joutua hankaluuksiin". Lapsuudessaan Draco vietti aikaansa pääosin isänsä ex-kuolonsyöjä -ystävien puhdasveristen lasten kanssa ja saapui Tylypahkaan ympärillään pieni ystäväporukka, johon kuului mm. Theodore Nott ja Vincent Crabbe. Hän oppi jo pienenä, kuinka suuri merkitys puhtaalla verellä on ja halveksui jästisyntyisiä.

   Kuten kaikki ikäisensä lapset, Draco kuuli tarinoita "pojasta joka elää" koko nuoruutensa. Siitä, kuinka Harry Potter selvisi hengissä kirouksesta, jonka olisi kuulunut tappaa, kiersi monia tarinoita ja yksi niistä oli, että Harry itse olisi suuri pimeyden velho. Se, että hänet oli poistettu velhojen yhteisöstä tuki tätä teoriaa, ja Dracon isä Lucius Malfoy oli yksi niistä, jotka uskoivat siihen. Lucius uskoi, että vielä jonain päivänä entiset kuolonsyöjät saattaisivat hyvinkin kerääntyä Potterin ympärille.

   Ensimmäisen kerran Draco tapasi Harryn Viistokujalla Matami Malkinin kaapuliikkeessä, muttei silloin tajunnut, kuka tämä oli. Hän kertoo Harrylle heti joitakin mielipiteitään, kuten esimerkiksi että puhdasveriset velhoperheet (kuten hänen omansa) ovat parempia kuin muut, luihuinen on Tylypahkan paras tupa, ja että on rikos ellei häntä valita tupansa huispausjoukkueeseen.