鼓楼始建于明朝万历年间，这是一座阁楼式古建筑。最早为击鼓报时用，故称为鼓楼。清乾隆二十开年（1762年）由当时知县高继允主持重修，并加颜其额曰“大观楼”，四向门额面东曰“观象”，面南曰“仪凤”，面西曰“眺汾”，面北曰“拱辰”。旧志引高继允重修鼓楼碑记云“……登斯楼者，一望苍茫可数十里，……至于南枕凤山之秀，后有乌马象河为之襟带，山川风景无不纳于楼中，因颜其额曰‘大观楼’。”这是高继允所以称鼓楼为“大观楼”之原本，其时其意已实指登楼观景。现在所存碑记也说：“登临其上，凡市之稠密，城郭之环绕，以及乡镇村落或远或近无不朗朗在目，南挹凤山之秀蜿蜒而来，又有乌马象河为其襟带……（注：市指过去四街之商号、字啧等商贾）所谓“大”，古人有“有容不得乃大”这说，称“大观”其意便可解了，更证其后之登楼观景。
    面东门额曰“观象”，其所指晨景也。清晨登楼迎日出于东山，红霞映天，万物生辉，气象盎然，一派生机，望之令人心旷神怡，此即“观象”也。“观象”作为门额题字在我国北方一些古建筑中亦有见之，“象”者，“万象”也。
    “仪凤”，“仪”字有容貌、形态之解，如“仪表堂堂”、“威仪”；也有贺仪这解，作为南向门额，当指午景也。。当日午中天，大观楼熠熠生辉，正兆南山瑞气，凤凰山真如彩凤前来朝贺，应古人“凤凰来仪”之说；又因古人造字之严谨，有人以同登楼贺凤之说。明正行九年（1514年），署县太原府通知张冕加修太谷城防，重建楼于四门，其时南门楼额题字为“凤仪”。凤仪在我国北方一些古建筑中作为楼台亭阁的小额题字更多见之。
    西向门额“ 眺汾”。“眺”，登高远望也。“眺汾”应为晚景，当日之西下，登楼西望，见晚霞回映，再权目远野，视无极限，虽目不及汾水，但意已及矣。此刻可领略大自然之另一番风韵，并非单指能望到汾水。
    “拱辰”，“拱”字有多种解释，人之双手合抱谓之“拱”，如“拱手”；环形的桥或门，称“拱桥”、“拱门”；环绕变其意解，如“众星拱北辰”。“拱辰”亦作“拱卫”，意即“四方归化”。国之“拱辰”解说有二：一曰，作为鼓楼北向门额当指认夜景，“辰”泛指北极（亦有称指北斗者），当夜间登楼，俯视可揽万家灯火，仰望北空，见北辰闪闪发光，令人发问天之感，因而拱手拜之，此也谓“拱辰”；二曰，“四方归化”。明朝正德年间张冕加修太谷城防时，曾题北门楼额曰“拱辰”。“拱辰”作为门额或楼阁题字在古建筑中更多见之，其面向皆北。

传说

    相传，在建造鼓楼时，集中了许多工作能工巧匠，提出许多建筑方案，但都突不破旧有程式，人们都不满意，大家都因为想不出一个好的建筑方案而一筹莫展。
    一天早晨，负责鼓楼建筑的人到工地上巡视，发现地上有一只箩筐，问是谁的，大家都说不知道，一连几天都是这样，大家都很纳闷，一天，有人把箩筐提起来，发现地上写有“鱼”“日”二字，有人猜想，“鱼”“日”二字合起来不说是一个“鲁”字吗？难道这是鲁班爷在提醒我们建筑方法吗？大家看着箩筐系子的结构恍然大悟。于是，工匠们便根据箩筐的结构修建了拱形四门洞的鼓楼。

组 成

    鼓楼始建于明万历43年（1615年），重建于清乾隆27年（1762年）位于太谷县旧城中心，是城内十字街的中心。整个建筑分为上下两部分，上面是鼓楼，高20米，下面是台基，高约8米。因为是在十字街的中心，所以台基上开有十字交驻的四个门洞，使县城东南西北四条路交汇于鼓楼台基中心。

   结 构 

    台基上的主体建筑为木结构三重檐楼阁式，高二层，而宽进深都是三间，长12.78米，宽11.8米，呈方形。基边沿绕都筑有砖砌花栏墙，楼外有看台，一层琉璃瓦重檐顶，五彩重翘品字斗拱，顶上的正脊为琉璃堆花，中央高有太公楼及铁刹，正脊上插着八个骑马的仙人，戗脊上设有四个。远看楼顶极其华丽。门窗、隔扇都是木结构，斗拱上的昂细且上翘，是典型的清式做法。
    鼓楼不是宗教性的建筑，也不同于民居，而是一座群众性的公共建筑物。这类古建筑物在全国保留下来的很少。虽然它的建筑年长不算太长，但它建筑华丽、高大雄健，和白塔共同成为点缀太谷这座古城的主要建筑。