Казармы 4-го батальона располагались при въезде в Манглиси со стороны Тифлиса, на Александровской улице.
До конца XIX века на этом месте находился лазарет, построенный ещё до Крымской войны (1853–1856).
К концу столетия лазарет был признан обветшалым и снесён, а на образовавшемся пустыре были возведены новые казармы.
Казармы 4-го батальона строились с соблюдением всех действовавших санитарно-гигиенических требований и считались одним из лучших казённых зданий Манглиси.
С высокой вероятностью, в них размещались солдаты 13-го лейб-гренадерского Эриванского полка, поскольку эта воинская часть была расквартирована в Манглиси с 1823 года.
Здесь же находилась и церковь Эриванского полка.
В советский период казармы продолжали использоваться по прямому назначению: до 1960-х годов в Манглиси дислоцировалась учебно-тренировочная часть Красной армии.
После демилитаризации посёлка в 1980-е годы большинство военных объектов начало приходить в упадок.
Та же участь постигла и казармы 1-го батальона, располагавшиеся на противоположной стороне плаца.