Почти триста лет Каменец и построенная на его месте крепость защищали юго-восточные рубежи Речи Посполитой. Крепость приобрела славу не только важнейшего польского опорного пункта, но и одного из самых мощных в Европе. Ранее граничивший с мусульманским миром, Каменец называли «оплотом христианства» и «воротами в Польшу».
Своим стратегическим значением Каменец был обусловлен географическим положением. Крепость была построена в XIV веке и постоянно расширялась на скалистом острове, расположенном в четырехкилометровой петле, образованной рекой Смотрич, опоясывающей город лабиринтом оврагов и ущелий. Немногочисленные защитники крепости смогли остановить здесь могучие армии захватчиков. Природа и усилия многих строителей создали необычный ландшафт, в котором соседствуют оборонительные укрепления, ратуша и религиозные памятники: католический костел, мусульманский минарет, православная церковь и башня армянского собора.
Укрепления Каменца были настолько эффективны, что ни казаки, ни турки долгое время не могли их захватить. Польские короли, епископы и римские папы внесли свой вклад в модернизацию крепости, защищавшей христианскую Европу. Слова турецкого султана во время экспедиции 1621 года, сказанные им о крепости: «Пусть Аллах сам ее завоюет», вошли в легенду.
Вера в силу крепости и внутренние неурядицы в стране привели к тому, что в 1672 году Каменец оказался не готов к обороне. Осознавая это, султан Мехмед IV в августе того же года начал его осаду во главе армии численностью до 300 тыс. человек. Эта армия была оснащена современной артиллерией, которую обслуживали французы. Польский гарнизон насчитывал около 1 600-2 000 человек. 26 августа 1672 г. поляки сдали Каменец захватчикам. Во время эвакуации замка произошел взрыв порохового склада, который впоследствии был истолкован как жест отчаяния артиллерийского майора Хейкинга (в известном романе «Пан Володыёвский» он назван Кетлингом), который якобы поджег двести бочек с порохом. Среди многочисленных жертв взрыва был и командующий обороной крепости Ежи Володыёвский — прототип Михала Володыёвского, героя трилогии Генрика Сенкевича.
К 1699 г. Каменец вместе со всей Подолией находился в руках турок, а затем был возвращен Речи Посполитой. После Второго раздела Польши он отошел к России, а после 1920 г. к Советской Украине.
Во время Второй мировой войны, в 1941 г., немцы устроили в Каменце массовый расстрел еврейского населения, убив за три дня 23 600 человек, в том числе несколько тысяч евреев, депортированных из Венгрии. Это был первый такой масштабный расстрел в рамках Холокоста.