早於50年代, 村內設有自衛隊, 香港政府派有槍支以防海盜劫掠村民財物, 而自衛隊總部就設於塔門天后廟內的「捕房」, 凡是村中大小事務召開之會議, 都在此進行, 此乃早期所謂鄉公所之雛型。
　　 鄉公所舊址本屬黎公達源之產業, 早年經已捐出作為辦學用途瓊林學校舊址,後搬遷至馬井路山坡新校後, 舊校空置, 日久失修, 遭白蟻侵蝕, 勢成頹垣敗瓦, 實屬可惜。遂於1969年得一班熱心鄉眾及英國僑胞發起募捐運動, 決定拆卸重建, 用來召開村民會議之場所, 定名為塔門鄉公所。
　　 我鄉塔門居民一往依賴農業及漁業謀生, 亦有部分人營商,隨著時代與環境的變遷, 農業和漁業的發展倒退, 鄉親們為謀生計, 多離鄉散居港九新界或旅外英國或歐美各地。就因塔門地處離島, 交通不便, 回鄉需時整天, 導致村民少有機會聯絡溝通, 長期以來亦較少聚會。
　　 有見海外鄉親回港探親及塔門鄉間的鄉親到市區辦事均無落腳點, 且在商議鄉間事務時, 因未有適合而方便的場地, 而需要舟車勞累回鄉; 體會到缺乏聚集之地, 鄉親確實難以聯繫溝通！
　　 一群熱心鄉彥有見及此, 發起聯繫鄉親運動, 要求共同一心, 為鄉間作出有意義的事; 及至去年中秋夜, 在英國利物浦召開同鄉會週年會員大會及聯歡晚會席上, 有鄉眾力議在大埔購置會所, 在一致贊同下, 即席籌得四十多千英鎊。再經半年不斷募集, 合港、英兩地之力, 總共籌得合折港幣壹佰伍十餘萬元, 購入大埔墟大光里玉華閣現址, 此乃我鄉之盛事也。後更相繼成立塔門同鄉會, 藉以聯繫鄉民。此不但塔門村民可擁有永久的議事場所, 促進村務的發展; 而更重要的標誌著塔門鄉民及僑胞之互愛互助、合作的精神延綿不斷, 盡顯無私與團結的偉大情操！