Символ із сад архітектурного комплексу скульптора Чарльза Камерона пов'язує терасу Камероновой галереї з Агатовими кімнатами, в яких імператриця Катерина II Велика рано вранці займалася вивченням державних документів, відповідала на листи.
На оформленні парадних залів агатових кімнат Чарльзом Камероном був зроблений головний акцент: інтер'єри павільйону облицьовані мармуром, кольоровий алтайської і уральської яшмою, обробка якої в нашій країні досягла в XVIII столітті досконалості.
Ще в XVI столітті на Уралі були знайдені родовища твердих кольорових каменів, але в той час способи їх обробки ще були невідомі. Величезний інтерес до використання «кольорових каменів» в оформленні палацових інтер'єрів виявляв імператор Петро Великий. Саме він заклав основи для процвітання камнерезного мистецтва в Росії. У 1752 році за його указом в передмісті Санкт-Петербурга - Петергофі була відкрита перша в нашій країні гранильная фабрика, де стали виробляти вироби з кольорових каменів, і організували навчання майстрів по каменерізними справі.
У 1750-х роках серед російських аристократів було поширене захоплення мінералогією. У 1765 році за наказом государині Катерини II Великої на Урал була відправлена експедиція під керівництвом Я. Данненберг, яка зробила відкриття нових родовищ агатів, яшми, сердоліків та інших мінералів. До початку 1780-х років на російських гранувальних заводах була створена технологія виготовлення виробів з твердих самоцвітів: давні мрії про оздоблення палацових приміщень природним кольоровим каменем стали реальними.
У 1783 році архітектор Камерон отримав наказ від імператриці Катерини II розробити план оздоблення яшмою агатових кімнат. Зодчий виконав волю государині і створив малюнки до нового проекту оформлення яшмою двох кабінетів.
Відповідно до ідеєю Ч. Камерона, стіни кабінетів були зменшені на 9 сантиметрів, покриті плитами з вапняку, обробленими яшмою. Головна перешкода представляли заключні роботи, що являють собою шліфування й полірування кольорового каменю, покликані продемонструвати яскравість фарб і соковитість тонів. Роблячи полірування, потрібно було довести до скляного блиску близько 200 квадратних метрів стін, карнизів і наличників. Цю роботу російські майстри проводили вручну. Стіни двох приміщень агатових кімнат були оформлені пластинами Уразовський яшми темно-червоного відтінку з додаванням білого кварциту. Цю яшму в XVIII столітті іменували «м'ясним агатом», унаслідок цього інтер'єри стали називатися Агатовими кімнатами.
Під час Великої Вітчизняної війни фашистські окупанти не пошкодували яшмової облицювання, штучного мармуру стін агатових кімнат. У всіх залах були пошкоджені бронзові орнаменти; безслідно зникли 6 яшмових ваз, мармурова скульптура, 9 бронзових скульптурних ансамблів зі стін яшмові кабінету, барельєфи-медальйони з бронзи з Великого залу. Незважаючи на це, оформлення агатових кімнат, в цілому, збереглася з XVIII століття.
В даний час Агатові кімнати відкриті для відвідувачів.