七零四工程位于西湖以西，南北峰之間。整個工程占地面積為三百零七畝，分地上和地下兩部分。 　　 　　地面上四座風格不同的建筑，分別為壹號樓、貳號樓、叁號樓和肆號樓，壹號樓是供林彪一家人居住的，貳號樓是座室內游泳池，叁號樓供林彪的“四大干將”居住，肆號樓給林彪在浙江的代理人居住。這四座樓的總面積為二萬八千四百五十二平方米。 　　 　　地下為一個獨立的坑道式建筑，面積為四千多平方米。內有大小四十七個房間，其中包括地下作戰指揮中心和通訊發報室等，地下室距地面最高處為26米，可以防原子彈、防輻射；墻壁由四層鋼板間隔而成，非常堅固；地下室通道共有四個出口，每個出口都設有許多重達五百公斤的防彈、防水、防毒鋼門；并有自己的發電和供水系統，只要有食物儲備，就可以獨立生存下去。