古民居群規模宏大，布局精巧，保存完整，遞數百年而不衰。古民居外形優美，立面簡潔，構架堅固，尤以鑲嵌在門窗欞臺上精美的石、木雕刻聞名遐邇。這些石、木雕刻玲瓏剔透，風格多樣，或古拙，或勻稱、或簡潔，或繁復，或遒勁雄奇，或細密工整，是我國古代民居雕刻藝術的集中體現，具有高度的觀賞和研究價值。尤以木透雕動物花卉，木浮雕人物故事讓人嘆為觀止。高遷古民居是吳氏一族集居地，保存有十三座明清年間仿照太和殿建成的古宅院，是典型的江南望族居住地。

吳氏一族始于五代（梁）光祿大夫銀青，史上曾涌現出北宋龍圖閣直學士吳芾、南宋左丞相吳堅、明代左都御史吳時來等杰出人才，至十七世浙東副元帥、懷遠將軍兼仙居縣君熟公來高遷居之。高遷古民居至今仍有村民在其中生活起居。群內村民天性開朗，心靈手巧，生活淳樸，尚留有相當多的傳統習俗，如紡紗、結帶、編草鞋、搗年糕，做佛事等。人與古居相得益彰，一幅與世無爭的和平景象令游客羨慕不已。