據說，鹽行街本來不叫鹽行街，叫三眼井。明代至民國時期，
桂陽州（縣）城成為
湘南鹽業集散重地，市場繁榮，鹽行街又集中了李廣鹽、南天成等七大鹽行。因為賣鹽，後來便被改了名字鹽行街，解放前，以挑鹽販鹽為生的苦力，以及從事鹽業經商的生意人，從天南地北彙集在此，他們從廣東星子、
連州跋涉千里把鹽挑運到這裡，進行各種交易。
鹽行街還與宋楚瑜緊緊地聯繫在一起。1938年12月，為避戰亂，宋楚瑜的母親胡窕容一家從
蘇州到
桂陽，借居在縣城鹽行街的一棟宅院，1942年宋楚瑜就出生於此。
胡氏一家一共住了將近7年，直到1945年才返回蘇州。在這裡，宋楚瑜度過了三年的幼童時光。古老的鹽行街也因宋楚瑜這段歷史，增添了不少傳奇的色彩。