19世紀末、フランス南東部の村オートリ―ヴ。日々、村から村へと手紙を配り歩く郵便配達員シュヴァルは、新しい配達先で未亡人フィロメーヌと運命の出会いを果たす。結婚したふたりの間には娘が誕生したが、寡黙で人付き合いの苦手な彼は、その幼い生命とどう接したらいいのか戸惑っていた。ある日、配達の途中で石につまずいた彼は、その石の奇妙な形に心奪われ、石を積み上げて壮大な宮殿を作り上げるという奇想天外な挑戦を思いつく。そしてそれは同時に、不器用な彼なりの、娘アリスへの愛情表現でもあった。村人たちに変人扱いを受けながらも、作りかけの宮殿を遊び場に育っていくアリスとともに、シュヴァルの幸せな生活は続いて行くかに見えた。しかし、過酷な運命が容赦なく彼に襲い掛かるのであった…。