祠山崗茶場成立于1954年10月，前身為安微省國營宣郎廣農(nóng)場祠山崗作業(yè)區(qū)(1965年改稱祠山崗管理區(qū))。
1969年12月撤銷安徽省國營宣郎廣農(nóng)場祠山崗管理區(qū)，同時成立安徽生產(chǎn)建設(shè)兵團第四師第十八團。
1975年9月撤銷安徽生產(chǎn)建設(shè)兵團第四師第十八團，同年成立了安徽省國營祠山崗農(nóng)場，隸屬于安徽省革命委員會農(nóng)墾局(1980年改稱安徽省農(nóng)墾廳)領(lǐng)導(dǎo)。
1980年9月改名為安徽省國營祠山崗茶場。
不論是開始的作業(yè)區(qū)、管理區(qū)，還是延續(xù)至今的農(nóng)場、茶場，均為一個整體，并以桐山崗冠名。
2018年11月根據(jù)《中華人民共和國城市居民委員會組織法》及《廣德縣推進省農(nóng)墾駐廣國有農(nóng)場辦社會職能移交工作實施方案》（政辦〔2018〕95號）有關(guān)規(guī)定成立祠山崗茶場社區(qū)居民委員會。