Wie der Name der Stadt erkennen lässt, wurde hier einst nach Silber gegraben; die Stadt florierte und wuchs. Als jedoch im nahen Broken Hill ein viel größeres Silbervorkommen entdeckt wurde, begann der Abstieg Silvertons.[1] Von zuvor etwa 3000 Einwohnern[1] waren 1901 nur noch 300 übrig.[5] Immer mehr Leute zogen von Silverton nach Broken Hill. Heute liegt die Einwohnerzahl von Silverton offiziell bei 50 Personen (Stand 2016),[3] dennoch hat Silverton den offiziellen Status einer Stadt behalten. Im Großen und Ganzen besteht Silverton heute aus zwei Galerien und einem Pub, dem Silverton Hotel.[5]
Silverton liegt im Unincorporated Far West, der dünn besiedelten Region im Nordwesten des Bundesstaates New South Wales, die keine eigene lokale Verwaltung hat.