Al centro di Piazza del Palazzo si erge la Colonna di Alessandro, progettata e costruita nel 1834, intitolata allo zar Alessandro I per commemorare la grande vittoria della Russia su Napoleone nel 1812. Alta 47,5 metri e pesante circa 600 tonnellate, questa colonna di granito rosso è la più alta del suo genere al mondo. Costruita da un unico blocco di granito, si erge senza alcun supporto esterno, basandosi unicamente sul proprio peso. In cima si trova un angelo che regge una croce, con i piedi poggianti su un serpente, simbolo di vittoria. Di fronte al Palazzo d'Inverno si trova l'edificio governativo ad archi, un tempo sede dello Stato Maggiore dell'Esercito Russo. Al suo interno si erge un doppio arco trionfale, sormontato da carri romani, anch'esso a commemorazione della vittoria su Napoleone.