Великолепный средневековый замок возвышается на скале, называющейся «Лэй». Вокруг него в виде подковы разместились дома жителей одноимённого города. Когда впервые в этих местах поселились люди доподлинно неизвестно. Так же ученые не могут определенно сказать, римляне или кельты жили здесь в древние времена. В декабре 1944 г. во время Арденнской операции фашистские войска забросали замок фосфорными гранатами и фактически полностью разрушили старинное здание, которое простояло более 400 лет. По окончанию войны здание было заботливо реставрировано люксембургским государством, которому оно сейчас и принадлежит.
В настоящее время в помещениях замка располагается несколько музеев. В одном из музеев демонстрируются макеты практически всех старинных замков Люксембурга. Одновременно можно увидеть двадцать две уменьшенные копии этих сооружений из разных кантонов страны.
Гордостью жителей Клерво является коллекция великолепных фотографий Эдварда Штейхена «Семья Человека», которая с 1994 года также находятся в замке. Этот всемирно известный американский художник и фотограф люксембуржского происхождения подарил государству Люксембург созданную им экспозицию, которую с большим успехом демонстрировал а 1955 году в музее Современного Искусства в Нью-Йорке, а затем во многих других странах мира. В этой коллекции среди снимков неизвестных фотографов-любителей находятся и художественные работы знаменитых фотографов – Анри Картье-Брессона, Анны Ривкин-Брик, Робера Дуано, Доротеи Ланж и других. В музее можно увидеть еще одну выставку фотографий «Город Клерво на снимках».