楊溪村由原鐘家坪村、黃家坡村、楊家溪村三村合并而來。

1950年屬都鎮灣區都橫鄉楊溪村；1958年人民公社化時屬都鎮灣公社楊溪管理區，轄鐘家坪、陰陽坡、黃家坡、楊家溪四個大隊；1961年恢復區鎮建制，屬都鎮灣區設立楊溪公社，轄鐘家坪、陰陽坡、黃家坡、楊家溪四個大隊；1975年撤區并社，屬鴨子口公社設立楊溪管理區，管理區駐地紙廠河，轄四個大隊；1984年設區建鄉，鄉政府駐地紙廠河，轄鐘家坪、陰陽坡、黃家坡、楊家溪四個大隊改為村；1987年區鄉體制改革，四個村隸屬鴨子口鄉；2002年合村并組，除陰陽坡村劃歸楠木坪村外，鐘家坪、黃家坡、楊家溪三個村合并為楊溪村，村委會駐地紙廠河，轄六個村民小組。

隸屬鴨子口鄉，沿用至今。