在很多人的印象里，关羽是一位忠义仁勇，手持青龙偃月刀的武将形象。在三国中，关羽与刘备三结义出场，跟随刘备颠沛流离，东奔西跑。在十八路诸侯讨伐董卓时，关羽温酒斩华雄，三英战吕布。
刘备在徐州兵败，在曹营约三事降汉不降曹，为曹操解白马之围，斩颜良、诛文丑。知道刘备踪迹以后，千里走单骑，过五关斩六将，斩杀蔡阳兄弟，三兄弟便在古城聚义。赤壁之战后，不忍心杀害曹操，将曹操放走。
刘备称帝以后，关羽为五虎上将之首，领兵攻取襄阳的时候，水淹七军、斩庞德，擒于禁，打樊城时，被毒箭暗算，刮骨疗伤。后来吕蒙白衣渡江偷取荆州，偃城被徐晃夺走，关羽腹背受敌，最后败走麦城。
关羽去世以后，逐渐被神化，民间尊其为“关公”，到了清朝雍正三年（1725年），雍正下令，以关帝庙为武庙，并入祀典，文武百官、老百姓都要按照祭孔之太牢祭仪进行春秋两祀。关羽的地位达到了和文圣孔子并驾齐驱的地位。
两千多年来，有“当时义勇倾三国，万古祠堂遍九州”的说法，人们为了敬仰缅怀关羽，关羽的庙宇遍天下，五洲无处不焚香，据不完全统计，现在世界上有30多个国家和地区建有关帝庙3万多座，然而唯独徐州吕城没有修建关帝庙。
吕城镇位于长江中下游南岸，江苏省丹阳市东部，是丹阳四大古镇之一。根据清朝的史料记载，吕城是没有关帝庙，在吕城有两座庙，一座郭子仪庙，另一座颜良庙。吕城为何不建关帝庙呢？
清朝诗人袁枚在《子不语》中记载：“在吕城的五十里内都无一间关庙，相传该城为吕蒙所建，至今吕蒙为该地的土地。一旦有人建起关庙，每夜就必有兵戈角斗的声音，所以居民都互相劝诫，勿建关帝庙。曾有一卜者行至该城，借宿在土神庙中，夜间忽然雷电交加，屋瓦皆飞直至午夜。居民都不知何解，後来，各人都见到卜者所盖的，原来是一面画有关帝的布旗，所以土地驱逐卜者，不许在吕侯庙中借宿。”
这是袁枚在《子不语》里面的记载，不建关帝庙的主要原因，还得从建安五年说起。建安五年（200年），袁绍、曹操在官渡开战，沮授劝袁绍：“颜良性子急不能单独任用，”但是袁绍以颜良进攻单独守护白马的刘延。
面对这个形势，曹操的谋士荀攸建议，假装在延津渡河，做出袭击袁军的姿态，再奔袭白马，攻其不备。曹操听从荀攸的建议，袁绍果然分兵向西，挺进延津。曹操便引兵向白马疾进，颜良大为震惊，仓促迎战。
曹操派张辽和关羽为先锋，两军交战的过程中，关羽望见了颜良乘的戎车。在张辽军队的掩护下，关羽冲到颜良身边，在万众之中斩杀颜良，又拔出腰间佩刀斩其首级而归，袁军诸将都不能抵挡关羽，袁军大败溃散，白马之围逐遂解。
徐州吕城当地都是颜良的后代，关羽杀死了他们的祖先颜良。所以在离祭拜颜良的庙宇十五里之内，不准设置祭祀关羽的寺庙的这种禁忌。在纪晓岚的《阅微草堂笔记》就记录了这样一件事情，当地的县令不遵守，下令在颜良庙的庙会上。
非得让演员演一场三国演义的戏剧不行，自己亲自观看，结果当天戏剧刚上演不久，突然刮起一阵狂风，致使台上的演员因狂风而引起意外死亡，之后离颜良庙宇十五里的地方，发生了因瘟疫的传染使当地人和家畜去世的现象。从此以后，吕城成了全国独一份，没有修建关帝庙的地方。