Příběh začíná v roce 1802, v době Napoleona Bonaparte, kdy byl zákon, omezující stavby domů pouze v obcích, zrušen. Tehdy se dům farmářské rodiny Montaud stal jedním z prvních, který byl postaven mimo vesnici Saint Auban. Rok 1802, jež je vyryt nad hlavním vchodem statku poukazuje nejen na stáří stavby, ale je především rokem vzniku Le Chatelard. Název je odvozen od místa, kde nyní stojí statek. Rodina Montaud zprvu vyráběla esenciálního oleje pouze z divoké levandule, která rostla v okolních horách. Avšak brzy, kolem roku 1805, začali sami pěstovat levanduli na svých polích tak, aby již nebyli závislí na divoké levanduli.
