華溪村位于義烏東北部，地處天目山余脈武巖山麓，東靠東陽吳寧、西北臨荷葉塘、西南與廿三里接壤，廿三里至蘇溪公路穿境而過。該村現有1170戶人家，3127人。有關它的傳說，據《虞氏宗譜》記載：“以其山水環匯，花竹秀茂，故以名焉。”但在民間卻另有說法。

相傳，一千多年以前，即宋朝時期。有一年春天，東陽市羅山鄉煉仙塢村有一位種田人，名叫虞元吉，他為了耕田插秧，離家到諸暨買牛。路過武巖山腳時，但見那里山清水秀，風光旖旎，向東看：溪水向東，良田一片，整齊如棋盤；向西瞧，西屏山、東屏山相視而立，好像一本翻開的書；向北望，文峰像一把琴；向南瞄，武巖山從田中心升起，又陡又險，景色如畫，登上山頂能看五十里。正可謂東南西北、棋琴書畫皆備，確實是個好地方。他深深地被陶醉了，隨手在溪邊插了一根趕牛鞭并異想天開地自言自語道：“如果天地有靈，這根牛鞭如在我諸暨買牛回來時能開出花來，我就在這里扎根落戶。”說完匆匆離去。

且說武巖山腳下有一個只有十來戶人家的金宅村。該村有幾個放牛小孩，放牛時經常偷閑到山上摘映山紅，玩累了就到溪邊喝水。這天他們來到溪邊，見有一根趕牛鞭插在溪邊，就頑皮地把映山紅縛到牛鞭上，遠遠看去真像牛鞭開花。過了幾天，虞元吉買牛回來，一看牛鞭上果然“開著花”，不禁暗暗稱奇。于是他馬上回到家里，帶著老婆孩子來此安家，并把此地取名為“花溪”。后人將“花”改成“華”，所以現在人們把“花溪”寫為“華溪”（但讀音仍是“花溪”）。虞元吉便是華溪的虞氏始祖。

華溪自古以來人杰地靈，虞氏子孫登“龍門”在宋朝有五人，在明朝則有十四人。村西武巖山，因狀如“烏紗帽”，被人稱之為“紗帽山”。