Город всегда «жить торопился и чувствовать спешил». До новой эры здесь была столица галлов. Одним из первых после римского правления образовал епископство (в IV веке). В 1944 году именно с него началось освобождение Франции. Все произошло очень быстро, так что Байе остался единственным нормандским городом, избежавшим разрушений. Но главное — здесь чувствовали конъюнктуру и умели угадывать желания власть предержащих.

Стоило только Вильгельму Завоевателю вернуться из похода на Британию, так местные умелицы принялись вышивать ковер, посвященный славным батальным подвигам государя. И так классно у них это получилось, что теперь со всего мира ездят смотреть. Суперсайт, называемый «ковром королевы Матильды», висит на стене духовной семинарии в Байе. Чтобы на него посмотреть, надо заплатить 6 €. Ковер представляет собой 58 вышитых рисунков на полосе шириной 50 см и длиной аж 70 метров. По духу рисунки похожи на современные комиксы, которые в состоянии, наверное, нарисовать сейчас любой выпускник художественного училища, но для XI века (а работа над ковром была закончена в 1077 году) это было серьезным культурным достижением.

Заслуживает внимания готический собор Нотр-Дам (сдан в эксплуатацию все в том же 1077 году, 102 м высотой, правда," достраивался в XIV и XIX вв.). Рядом с собором находится бывший епископский дворец, в котором можно осмотреть коллекцию фарфора барона Жерара. Музей нормандской битвы 1944 года (5 €) и Музей де Голля (2,5 €) посвящены событиям Новейшей истории. В целом же город оставляет приятное впечатление своей старинной застройкой и фонарями, а также загадочно выглядящей в сумерках набережной небольшой речки.