Некогда эта территория была частью Житной площади, где проходил главный коломенский торг. На этом месте стояли лавки и «балаганы», торговавшие всевозможными съестными припасами. А так как подобной мелкой торговлей занимались преимущественно женщины, да и ходили за покупками тоже они, то эта часть торга получила немного смешное название - Бабий рынок.
После революции частную торговлю объявили «спекуляцией» и стали всячески прижимать. К середине 30-х годов торжище окончательно отшумело, оставив после себя огромный неопрятный пустырь с остатками полуразрушенных лавок и общественным туалетом посередине. До войны окультурить это место не успели. В мае 1945-го, на волне всеобщего подъёма и стремления обустроить мирную жизнь по-новому, появилось решение заложить здесь сквер.

Главной точкой притяжения в сквере является фонтан, который с начала августа начал работать в регулярном режиме. Фонтан, не функционировавший около 20 лет, оборудован системой, позволяющей менять его режим работы, оснащен мраморной чашей с керамической мозаикой и светодиодными светильниками.
Особой популярностью сквер Зайцева пользуется у жителей и гостей города в вечернее время, когда особенно эффектно смотрится подсветка фонтана. Её цвет меняется в зависимости от режима работы гидросистемы, которая меняет высоту, ритмичность и скорость водяных струй.