S’assenta sobre la roca viva, aprofitada a l’edat mitjana per a bastir una gran fortificació (tres recintes), en gran part ben conservada (4 o 5 torres i diversos portals), en la qual els valls són excavats a la roca (pedra tallada), i centrada pel gran castell de Peratallada, que fou centre de la baronia de Peratallada. Centra el castell una gran torre de l’homenatge de base rectangular; en la restauració recent han aparegut restes de decoracions mudèjars i gòtiques, així com són gòtiques les sales nobles i diversos finestrals. La parròquia de Sant Esteve, extramurs, és romànica, de dues naus, amb campanar d’espadanya, restaurada parcialment en 1954-55. Al mig de la vila hi ha una notable plaça porxada i tot el nucli manté l’aire medieval. Moltes de les cases velles han estat recentment restaurades com a segona residència. El castell de Peratallada és esmentat ja el 1065, al límit amb el de Pals; arran de l’enllaç de Guillema de Peratallada amb Gilabert (IV) de Cruïlles (1250) passà a ésser la residència predilecta dels barons de