明、清時(shí)期隸屬于靈東鄉(xiāng)。
民國(guó)時(shí)期隸屬于第十區(qū)。
1930年4月至12月紅色政權(quán)期間隸屬于復(fù)祥區(qū)。
抗戰(zhàn)時(shí)期隸屬于武穴區(qū)。
1943年復(fù)屬于靈東鄉(xiāng)。
1952年隸屬于第七區(qū)。
1958年成立栗木大隊(duì)，隸屬于四望公社。
1961年，隸屬于四望區(qū)栗木小公社。
1975年隸屬于四望公社。
1984年調(diào)整為栗木村，隸屬于四望區(qū)。
1987年隸屬于四望鎮(zhèn)。
2020年11月，根據(jù)《武穴市人民政府關(guān)于同意四望鎮(zhèn)行政村布局調(diào)整方案的批復(fù)》（武政函[2020]65號(hào)）文件，撤銷魏家村村民委員會(huì)、栗木村村民委員會(huì)，設(shè)立栗木村村民委員會(huì)，辦公地點(diǎn)設(shè)在原栗木村村民委員會(huì)。