古樵樓主要指的南樵樓，它是宮殿式三層樓閣建筑，它的下層兩側有登樓石級，中間是人行通道。通道兩壁，對稱地豎立著二十六根木柱，俗稱“二十四根通天柱”（因為中間兩根原來一直被砌在門墻內）。
此樵樓最早建于宋宣和年間，現存的古樵樓基本保持宋代的建筑風格，特別是其中的“排柵柱”，乃正宗宋代“營造法”，今已很難見到。
傳說古時候，有位鄺知府，自以為懂得風水地理，為了鎮制他認為不吉利的山勢，就在徽州府府堂正前方，建造了這幢皇式樓閣。據說，他為了區別于北京皇城城樓，特地少造了兩根柱子，只豎二十六根柱。誰知盡管如此，仍然被人告了御狀，說他與皇上分庭抗禮。結果，這位自作聰明的鄺知府，以欺君之罪名，受剝皮獻革酷刑致死。
如今，這幢構造獨特的古譙樓，是歙縣博物館的館址。博物館里展出歙縣歷代文物，包括各朝各代的書畫、瓷器、歙硯等。
歙縣城內以前有東南西北四座樵樓，現存兩座，一個叫南樵樓，一個叫東樵樓。東樵樓又名陽和門，原名鐘樓，建于明弘治年間，為重檐式的雙層樓閣。這兩座樵樓咫尺相望。
交通縣城很小，可步行過去。
門票博物館門票6元（有學生票）。