Этот обширнейший сад ныне известен всем пятигорчанам как городской Парк культуры и отдыха имени С. М. Кирова. Сюда часто приходит молодежь и взрослые с малолетними детьми.

С 1829 г. питомник зеленых насаждений находился в Елизаветинском цветнике, хотя почва там была малоподходящей. В январе 1835 г. на КМВ из Императорского Никитского ботанического сада приехал ученый садовник, английский подданный Людвиг Джерсей. Ему поручили наблюдение за сохранением и поддержанием существующих на Водах садов, аллей и бульваров. По выбору Джерсея, прежде всего, в версте от западной окраины Пятигорска, близ Подкумка, был отведен очень плодородный земельный участок в 4 гектара «на разведение огорода и в нем школ для широколиственных и фруктовых деревьев, кустов, винограда и цветов для рассадки по публичным садам и цветникам». В планировке нового Казенного ботанического сада принимал участие местный архитектор Джузеппе Бернардацци. В этом саду разводили грецкий орех, дикий каштан, тутовник, липу, клен, итальянский тополь, акацию, боярышник, сирень и пр. Часть разработанных плантаций Джерсей обратил на выращивание цветов и сортов овощей и фруктов, наиболее подходящих для местного климата.

К лету 1838 г. Казенный сад разросся настолько, что смог помочь Ставрополю, послав 3 тысячи деревьев и кустарников для устройства городского парка. Пятигорский сад высылал по почте черенки своих растений по всей России. К сожалению, Джерсей недолго проработал здесь. В начале 1839 г. его сменил солдат Петр Ковалевский, из польских шляхтичей. В середине века садом Дирекции КМВ, который вырос до 5 гектаров, занимался чех Иосиф Навотны. Пятигорский Казенный сад поддерживал тесную связь Императорским Никитским ботаническим садом, обмениваясь семенами и саженцами. Известный географ Д. Семенов писал в это время, что «за городом находится Казенный сад (садовая школа), который может плодами и зеленью продовольствовать посетителей в течение целого лета».

В период контрагентства (1861-1884 гг.) в восточной части сада были построены беседки, разбиты новые аллеи и цветники. С окончанием периода аренды Вод правительство обратило свое внимание на Казенный сад, которым заведовал главный садовник КМВ Храповицкий. В это время западные окраины Пятигорска вплотную приблизились к Казенному саду, который стал выполнять роль городского парка, хотя и принадлежал Управлению Вод. С 1880 г. некоторые функции сада передаются новому древопитомнику на северном склоне Машука, которым управлял первый пятигорский лесничий Перхальский.

В 1890 г. начинается переустройство восточной половины Казенного сада. По проектам архитектора А. М. Кочетова были построены каменные оранжереи и новые низкие ворота. В верхней и нижней части сада были перепланированы цветники, проведены новые аллеи, устроены фонтаны, выкопан пруд и пр. В 1895 г. от ул. Царской (ныне – пр. Кирова) к воротам сада был проложен бульвар и зодчий О. Ф. Тибо-Бриньоль устроил ограду вокруг всего сада, а в самом саду был построен дом для рабочих и музыкальный павильон. Затем у верхнего фонтана было открыто первое кафе-ресторан и кегельбан при нем. При входе была устроена огромная детская площадка и игровой павильон. В 1898 г. «для округления Казенного сада» была приобретена соседняя частная усадьба в 0,7 га с домом и службами, в которых разместились служащие сада. В начале XX века в Казенном саду по проектам зодчего И. И. Байкова возводятся двухэтажное здание Химико-бактериологической лаборатории Управления Вод и одноэтажная пристройка с сейсмической станцией. В саду находилась казенная квартира главного садовника КМВ и мастерская скульптора Л. К. Шодкого. Часть сада была передана под сооружение пятигорской теплоэлектростанции со службами и жилым домом.

В это время в саду часто проводились показательные полеты на воздушных шарах, открытые музыкальные концерты и выступления цирковых артистов.

К 1917 г. площадь Казенного сада достигала уже 8 гектаров. В верхней его части имелись красиво разбитые цветники и дорожки, розариум, оранжереи и декоративные растения, детская площадка, кегельбан, гимнастический зал, ресторан у фонтана. Нижняя часть напоминала старинный сад при барской усадьбе – здесь проходили аллеи из старых дубов и тополей, стояли каменные скамейки и столы, встречались редкие экземпляры деревьев и кустарников. Был вырыт Нижний пруд с островками для катания на лодках.

Сад располагал всем, что необходимо для настоящего отдыха: зеленью, тишиной и прохладой, однако посетители Вод и жители предпочитали тесный, шумный и пыльный Николаевский цветник в самом центре курорта. Тихо и пустынно было «в темных аллеях» старинного сада.

В 1920 г. Казенный сад стал Курортным садом имени 1-го Мая, а позднее имени Карла Либкнехта. Здесь были устроены летние клубы для членов местных проф союзов и различные аттракционы. После Отечественной войны, в апреле 1952 г., сад был переименован в Парк культуры и отдыха имени С. М. Кирова. По проектам П. П. Еськова был устроен новый парадный вход и широкая лестница к нижней части парка. В 1960 г. в парке открылся планетарий, а в 1966 г. – стадион «Труд». Аллеи парка украшали фонтаны и скульптуры, созданные И. Ф. Шаховской. Ныне в популярном парке, где находятся множество аттракционов, игровых заведений и кафе, а также концертные площадки, открытый театр и большой стадион, круглый год отдыхают и развлекаются пятигорчане. В парке сохранилось деревья, которые являются ровесниками бывшего Казенного сада.