Před volbou prezidenta v roce 2003 uspořádala ČSSD vnitrostranické referendum, koho mají do této volby vyslat jako svého kandidáta. S velkou převahou vyhrál Miloš Zeman. Stranické referendum sice vyhrál, ale 24. ledna 2003 ve volbě prezidenta prohrál Miloš Zeman již v prvním kole s Václavem Klausem. Jednoduché počty odevzdaných hlasů dokazovaly, že mu v tajné volbě nedali svůj hlas ani někteří jeho spolustraníci. Po vyhlášení tohoto debaklu opustil Miloš Zeman kvapně pražský Hrad, následně i politiku a na deset let se usadil na chalupě v Novém Veselí na Vysočině.

Miloš Zeman sám o sobě říkal, že jako starý jezevec zalezl do své nory na Vysočině, kde hlavně čte knihy a pije svoji oblíbenou Becherovku. A když už vyleze z nory, chodí na vycházky do lesa, kde objímá stromy a čerpá z nich sílu.