原关城全长约2．5公里，城池占地约7万平方米，城墙底宽6米，
顶宽4米，高约10米。关城为
条石和
自然石加
青砖筑成，东西二门上有
城楼，外以
沟壕环绕，南面依山，北临唐河，城垣上列
敌楼台7座。关城有东、西、北三个城门，东门称“居仁”，西门称“由羲”，北门称“宣威”。东西门外各设
瓮城，东瓮城设有南北二门。西瓮城仅设南门一座，出南门往西约百米处唐河岸边设水关战台楼一座，楼下设有关门，是由下城通往
上城的惟一通道。北门外原设战台楼一座，民国二十八年被洪水冲毁。城内正街宽12米，十字街正中原来建有两层的阅兵楼，楼上设有十字通道，楼北为官署所在地，有大堂、二堂、三堂。
倒马关置关较早，《
战国策》称其为鸿上关，汉称
常山关。但可见到的关于修建倒马关城的记载，都是明朝的。倒马关分上城下城，上城是明洪武初年修建的，后改名上城口；下城即今倒马关城。现
倒马关乡政府院内，保存着一块已从中折断的
汉白玉石碑，为《倒马关建城碑》。碑文记载了1465年修建倒马关的情况。由此可知，倒马关城始建于1452年，后又于1465年又进行了一次大规模的修建。倒马关城，周长约2.5公里，城墙底宽6米，顶宽4米，高约10米，墙为黄土
夯筑外砌砖石。关城东、西、北设有3个城门。关城
建筑设计独特，它依峭壁，傍深涧，一半在沟谷，一半在山上，整座关城依地势而建，唐河水由西、北、东三面环绕关城而流。山、水、关城在这里相得益彰，互为险阻。古人谋略之深，设防之严，建筑之奇，令人叹为观止。
据《
畿辅通志》记载，倒马关在河北
唐县西北60公里，山路险峻，马为之倒，故而得名。倒马关位于
太行山东麓，北临内
长城，背靠
唐河。东南为险要的十八盘岭。自古以来，倒马关就为战略要冲。据《
后汉书》记载，建武十五（公元39年）年，因
匈奴常犯东汉北部边境，东汉政府迁徙雁门、
代郡、
上谷三郡居民于
常山关（倒马关）、
居庸关以东地方居住，防止匈奴的侵扰，由此可见倒马关的
屏障作用。
倒马关处于一条古老的通道上，这条道称为“
灵丘道”。《魏书·高祖纪》载，太和六年（公元482年）曾调集州郡5万人修治灵丘道。灵丘道北起平城（山西
大同市东北），南越
恒山，自
灵丘以下，略循今唐河谷道出
太行山，南抵中山（今河北
定县），是当时
山西高原北部通向
华北平原的交通要道，倒马关就是这条道路上的重要关隘。
明朝
马中锡《倒马关诗并序》中说：“关有两山对峙，其
路极险，相传
杨六郎到此马踣，故名。”后人为纪念
杨延昭（六郎）镇守三关的功绩，于明正德十五年（公元1520年），在倒马关城西3公里的马圈山上修建了“六郎碑”。碑通体高1.8米，宽60厘米，为汉白玉雕凿而成，
碑额抹角及两边雕
云纹花边图案。碑文为：“宋将杨六郎拒守之处。”杨延昭是
并州（今山西
太原）人，
宋真宗时为
保州（今河北
保定）缘边都巡检使，后因与辽兵作战有功升为保州
防御使。杨延昭在边防镇守20余年，辽兵甚为畏惧，千百年来，许多文人学士到倒马关凭吊六郎碑，称颂吟怀
杨六郎威镇边关的不朽业绩。