明朝万历二十四年（1596年）在汉代关庙的原址上，开始建庙种植柏树，清朝乾隆年间（1735—1799年）加以扩建，基本形成如今的关林庙的规模。