Город стоит на стрелке Шаранты и Ангиена и окружен крепостными стенами. В центре Ангулема на пл. Отель-де-Виль стоит перестроенная из старинного замка неоготическая ратуша (1858-1868, арх.Абади). От средневековых построек сохранилась башня (XV), где родилась Маргарита Ангулемская, сестра Франциска I. Очень образованная женщина, она играла важную роль во внешней политике королевства, а также написала в подражание Боккаччо популярный роман «Гептамеон».

Собор Сен-Пьер реставрирован арх. Абади в XIX в. Романский фасад здания украшают 75 персонажей скульптурных композиций «Страшный суд» и «Христос во славе» (статуи или барельефы расположены симметрично в аркатурах или на медальонах). Над северным трансептом возвышается колокольня (59 м). Неф украшен четырьмя куполами. Около апсиды — маленький сад с коленопреклоненной статуей Жана Ангулемского, деда Франциска I. Слева от собора — здание бывшего епископства, выдержанное в романском стиле (в нем городской музей). Особенно интересна прогулка по укреплениям, окружающим скальный выступ.

Здесь хранится коллекция мультфильмов и комиксов, выпущенных во Франции с 1946 г. Есть музей, посвященный их персонажам: Астериксу, Снупи и пр. На протяжении всей своей истории Ангулем славился производством бумаги. В окрестностях города в селении Иерсак сохранилась старая «бумажная мельница», где до сих пор вырабатывают бумагу традиционным для XVIII в. способом. На мельнице работает музей.