雁门关东临隆岭、雁门山，西靠隆山，两山对峙，形如闹门，每年大雁往飞其间，故称雁门。

春秋战国时期，赵武灵王在此置有雁门郡，唐朝置关，名曰西烃关，也名雁门关。；旧址在雁门关西侧的雁门山上。明朝洪武七年（公元1374年）吉安侯陆亭将关城移在此处，重新筑关。雁门关之关城，周长二里，墙高一丈八尺，石条座底：上砌城砖，门三座。东门之上筑有楼台，名曰雁楼，门额嵌镶一方石匾，书曰“天险”。