Постоењето на градот било првпат документирано во 1124. Во 1249, Гарц добил градски права од војводата Барним Први од Померанија. Поради неговата стратешка местоположба на реката, градот бил честопати подложен на уништувања во текот на борбите.
Откако линијата Одра-Ниса станала германско-полска граница во 1945, Гарц станал пограничен град.
Преку реката се наоѓа индустриската област на полскиот град Грифино (Грајфенхаген). Гарц се наоѓа на територијата на националниот парк Долна долина на Одра.