正德末年，王阳明巡抚江西，讲致知格物之学。当时有人告诉王艮，说他的学问与王阳明所讲很接近。王艮听后即赴江西，戴上他那纸糊的五常冠，穿上仿古的深衣，手执上面写着“非礼勿视非礼勿听非礼勿言非礼勿动”的笏板，一路上围观者不断。王艮与王阳明相见，往复致辩：

始入，先生据上坐。辩难久之，稍心折，移其坐于侧。论毕，乃叹曰：“简易直截，艮不及也。”下拜自称弟子。退而绎所闻，间有不合，悔曰：“吾轻易矣。”明日入见，且告之悔。阳明曰：“善哉，子之不轻信从也。”先生复上坐，辩难久之，始大服，遂为弟子如初。阳明谓门人曰：“向者吾擒宸濠，一无所动，今却为斯人动矣。”阳明归越，先生从之。