Napriek intenzívnej kariére zostávalo rodinné zázemie dôležitou súčasťou jej života. Keď boli synovia ešte malí, rodina si zaobstarala chalupu a neskôr letný dom na Dobříšsku. Práve tam si Kolářová postupne vytvorila blízky vzťah k záhrade a pestovaniu, hoci sama priznala, že ako mestské dieťa k tomu spočiatku nemala vzťah.
Jej život teda nebol iba sledom úspešných filmov a seriálov. Popri popularite zažila rodinné radosti, stratu manžela aj obdobia, keď musela skĺbiť hereckú profesiu s úlohou matky a partnerky. Aj vo vyššom veku si však zachovala pracovnú aktivitu a kontakt s divadlom i filmom. Pri 80. narodeninách patrila stále k herečkám, ktoré si české publikum spája s niekoľkými generáciami filmovej a televíznej tvorby.