Замок был возведен в XVI веке губернатором Орлеана и приближенным короля Людовика XII Ланселотом дю Лаком. Строение напоминало и мощную крепость, и дворец одновременно. Неприступным замок делал ров, наполненный водой, пересечь который можно было только по подъемному мосту.
Стены замка были сложены из кирпичей красного и белого цвета, замок окружали башни с конусообразными крышами. Вокруг замка был разбит парк, а для всего комплекса была присуща симметрия и геометричность.
Во второй половине XVI столетия замок превратился в оплот протестантов, однако наибольший ущерб замку причинили не религиозные войны, а Вторая мировая война, в годы которой он был разграблен. Реставрация замка Шамероль была начата только в 1987 году, и в результате замок снова приобрел свой ренессансный облик.
Музей духов расположен в одном из корпусов замка. В нем представлены не только процесс создания духов и сами духи, но и небезынтересные факты из их истории. Так, к примеру, посетителям расскажут о том, что пахучие жидкости были введены в обиход придворных в приказном порядке королем Людовиком XIV. Дело в том, что от пренебрегающих правилами гигиены дам и кавалеров дурно пахло, а королевский нос не должны были смущать скверные запахи.