Замок Вилафамес стоит на самой высокой части города, в районе Ла-Плана-Альта. Арабского происхождения (Бени-Хамес), он был завоеван в 1233 году и построен в XII-XIV веках, а в XIX веке был перестроен. Из него открывается панорамный вид на деревню и окружающие горы. В небольшой скальной впадине на вершине замка можно найти наскальные рисунки.