В 1864 г. предприниматель А.Г. Рутенберг приобрёл в г. Рига Российской Империи табачную мануфактуру Koffsky & Kunchczynski, существовавшую с 1839 г. Под его управлением мануфактура быстро стала крупным промышленным предприятием, одним из ведущих в табачной промышленности страны, что подтверждается «Золотой медалью» промышленной выставки в Риге в 1901 году.
После смерти А. Г. Рутенберга в 1905 г. фабрикой управляли его сыновья – Тобиас, Макс и Густав, а в 1914 г. её возглавил Тобиас Рутенберг. На тот момент фабрика насчитывала 700 рабочих и производила 20 миллионов сигар, 3,5 миллиона сигарет, 114 миллионов папирос, а также несколько тонн трубочных табаков высшего сорта.
В связи с началом Первой Мировой войны, Тобиас Рутенберг принял решение перенести часть производства подальше от линии фронта. Часть персонала, пресс-формы для сигар, сушильные барабаны, резчики табака, пресса для выдерживания трубочных табаков, папиросные машины – все, что было необходимо для производства, было отправлено в город Погар Стародубского уезда Черниговской губернии – один из крупнейших центров выращивания табака с 1718 г. По официальным данным, в те года в Черниговской губернии Российской империи выращивалось около 30 миллионов килограмм табака, в том числе и для Рижской фабрики, которая частично его перерабатывала, а частично отправляла в Европу на традиционную табачную ярмарку в Бремене. Так, с 1915 года началась история «Погарской табачной фабрики», которая стала частью торговой «Империи» А.Г. Рутенберга, производившей табачную продукцию для России и экспортировавшей её в Европейские страны.
После смерти А. Г. Рутенберга в 1905 г. фабрикой управляли его сыновья – Тобиас, Макс и Густав, а в 1914 г. её возглавил Тобиас Рутенберг. На тот момент фабрика насчитывала 700 рабочих и производила 20 миллионов сигар, 3,5 миллиона сигарет, 114 миллионов папирос, а также несколько тонн трубочных табаков высшего сорта.
В 1919 году предприятие было национализировано. В первые годы советской власти оно работало нестабильно в связи с развалом регионального табаководства и дефицитом сырья. Однако в годы коллективизации ситуация выровнялась, темпы производства сигар и папирос начали расти.
Фабрика работала и во время Великой Отечественной войны (в частности, известна легенда о поставке сигар для Черчилля во время Ялтинской конференции, для которой якобы с фронта даже специально отзывали рабочего-крутильщика).
В 1990-е годы фабрика была приватизирована и чудом избежала банкротства, но смогла оправиться и даже расширить ассортимент (в частности, стала производить табак для кальяна).
Начиная с 2004 года на мощности фабрики было перенесено производство всей выпускаемой продукции ООО «Смолтабак» (Смоленск), ОАО «Альвис» (Екатеринбург), ОАО «Астра» (ранее — «Пермская табачная фабрика», Пермь), ОАО «Канская табачная фабрика» (Канск, Красноярский край), ОАО «Челябинская табачная фабрика» (Челябинск), ООО «Бийская табачная фабрика» (Бийск, Алтайский край).