香山位於新竹的西南邊的濱海地區，早期為道卡斯平埔族的居住地，故漢人稱此地為番山，雍正、乾隆年間漢人才漸次墾拓本區，後因番山名稱不雅而改名為香山，或有一說因懷念故鄉山河而取名鄉山，後轉變成為香山。因為香山具有良好的港灣，因此居民多數靠海為生，而逐漸形成較具規模的聚落，清代曾設汛防於此地，又名香山塘，道光年間成為竹塹地區的貨物集散港。
香山驛建於1928（昭和3）年，是目前西部鐵道幹線所存少數木造車站之一。

資料來源：文化部文化資產局