1938年农历五月初四日，一队“武装到牙齿”的日军从安徽亳州向西开进，直逼鹿邑。当他们行至鹿邑县城东边的营子寨村时，日军“头目”命令所部“停止前进”，并派兵前往侦探“军情”。
当时，鹿邑县城内并没有高大的建筑物，所以，巍峨耸立的老君台更显得“鹤立鸡群”，加上老君台上古柏森森，就非常引人注目。前去侦察的日军士兵返回报告后，进攻鹿邑的日军头目误以为老君台是国民政府的“抗战工事”，就命人在县城东城墙上架上迫击炮，对老君台集中炮击。
梅川太郎受命发炮，第一炮击中了左侧的那个奎星楼，就这一发炮弹就把整个奎星楼炸得粉碎，巨响之后是日军一阵欢呼声。梅川太郎开始掉转炮口，对准右侧那个更为高大的建筑，一炮打了出去，没有听到爆炸声，两炮打了出去，还是没有动静，一连打了十二发，一颗都没有爆炸。进军中国以来，梅川太郎从来没有遇到过这样的现象，身边的日军个个感到纳闷。
此时日军见射向老君台的十三发炮弹一发未炸，甚为惊奇，回过神后看到老君台上没有任何反应，就误以为守卫这个抗战工事的国军部队闻风丧胆，已经望风而逃了，于是就集结部队，向鹿邑县城进发，并径直朝老君台扑去
当这队日军走进明道宫，爬上老君台，看到台上大殿里供奉着“太上老君”，得知这里是太上老君的升仙台时，，整个日军队伍哗然，一个个张口结舌，目瞪口呆，梅川太郎更是张大了嘴巴，一句话也说不来。继而全体日军便不约而同，齐刷刷地跪倒匍匐在大殿门前，磕头作揖，并口中念念有词，请求“老君爷”宽恕自己“向老君台开炮”的罪行，并保佑自己能平安回国。
