Хамовнические казармы находятся на месте текстильной фабрики, стоявшей здесь в начале XVIII в. Заботясь о развитии отечественной промышленности, и особенно тех ее отраслей, которые работали непосредственно на военные нужды, Петр I, в числе прочих, основал казенную полотняную фабрику в Хамовниках в той местности, где уже имелись готовые рабочие кадры для нее. Для фабрики передали конфискованные дворы у попавших в опалу Лопухиных, как в самом городе, так и на окраине. В 1707 г. в Хамовниках устроили прядильное отделение, но через некоторое время, убедившись, что под казенным управлением фабрика прозябает (работа «производилась чрез многие годы великим казенным убытком»), и, справедливо полагая, что частный хозяин не позволит ей захиреть, Петр в 1718 г. отдает фабрику «компанейщикам» во главе с Иваном Тамесом, с тем, чтобы на ней производились «полотна, и скатерти, и салфетки, и тики добротой против заморских». Компанейщикам давались немалые привилегии: они не служили, освобождались от постойной повинности, торговали первые пять лет беспошлинно, и Петр указывал «всем чинитъ всякое вспоможение, чтоб к тому вступающие люди вящую охоту имели и деньгу в ту компанию вкладывали без опасения».

О происхождении Ивана Павловича Тамеса известно немногое. Он, вероятно, был сыном гравера Павла Тамеса, одного из тех иноземцев, которых в большом количестве пригласил Петр из Западной Европы во время Великого посольства в 1697–1698 гг. Достоверно известно, что у Ивана Павловича был сын Иван, называвший себя голландским купцом (однако на его могиле на Введенском кладбище значилось «John Tames, Esq.», что заставляет предполагать его английское происхождение).

Об Иване Павловиче Тамесе сохранились воспоминания известного писателя XVIII в. П.И. Рычкова, отданного к нему в детстве для обучения языкам, бухгалтерии и коммерции: «Сей господин Тамес был муж великого сведения не только в коммерции, но и во многих других делах, и за его разум и многие полезные проекты к заведению и распространению в России разных мануфактур находился в особливой милости у его Величества, высокославные памяти государя императора Петра Великого».

Полотняная фабрика Тамеса на протяжении нескольких десятков лет была самой крупной в Москве: вначале, в 1720 г., на ней работали 841 рабочий и имелось 443 стана, расположенные в разных местах Москвы. Так, ткацкое ее отделение, контора и склад помещались в Белом городе, в Малом Знаменском переулке, а в Хамовниках находилось прядильное отделение. Здесь в 1720 г. к уже немалому своему участку Тамес прикупил еще несколько соседних владений (вдовы П. Сафоновой, капитана флота И.П. Шереметева, учителя Н. Вяземского) и с 1725 г. стал единоличным владельцем фабрики. В 1729 г. И.П. Тамес умер, и фабрикой стал управлять его сын Иван, который еще более увеличил ее: так, в 1752–1753 гг. он купил в Хамовниках 11 смежных владений. В межевой книге 1755 г. значится «двор с каменным и деревянным строением Ивана Иванова сына Тамеса», а «во оном дворе 8 десятин 441 квадратная сажень». Но кроме этого участка, на котором в основном находились производственные строения, ему по улице Чудовке принадлежал «двор с садом и прудом» общей площадью более 5 десятин. В 1775 г. ни одна из четырех имевшихся тогда в Москве полотняных фабрик даже и примерно не могла сравниться с тамесовской: так, если у Тамеса было тогда 259 станов, на которых работало 283 рабочих, то на второй по мощности фабрике Афанасия Гончарова у Яузских ворот было всего 10 станов с девятью (!) рабочими.