王阳明早年有一段时间沉迷佛教、道教，但后来就渐渐放弃了。他此后曾经多次解释自己抛弃佛、道的原因，是他认为佛、道缺乏对于世间责任的担当。王阳明批评佛家为了不为亲情所累，就远离父母，而在他看来，不想为亲情所累，恰恰应该充分地表现、承担亲情，也就是尽孝道，才是真正不为亲情所累；因为亲情就是每个人的良知和天性。

他对学生陆九川说：“佛家担心父子关系是一种牵累，于是就逃避了父子关系；担心君臣关系是一种牵累，于是就逃避了君臣关系；担心夫妻关系是一种牵累，于是就逃避了夫妻关系，这些，都是执着于君臣、父子、夫妻的相，他才要逃避。我们儒家，有父子关系，就给予仁爱；有君臣关系，就给予忠义；有夫妻关系，就给予礼节。什么时候执着于父子、君臣、夫妻的相呢？”

毫无疑问，禅宗也罢，道家也罢，他们不喜欢这个尘世，就远离这个尘世。儒家其实也不喜欢这个尘世。从孔子到王阳明，中国的儒家都是现实批判者，都认为现实“礼崩乐坏”，只有从前尧、舜、禹的时代，是唯一的美好时代；但儒家不避世，恰恰这个世界不美好，所以更要深入这个世界，让这个世界变得美好。

王阳明有一次和学生感叹，退隐是容易的，但当官太难了。当官，要遵守很多潜规则，要卷入各种你死我活的权斗，如何保持自己的尊严？如何恪守自己的良知？如何保全自己的性命？非常不容易。王阳明的价值，大概在于他做到了这个“非常不容易”。

王阳明心学在思维方式上深受禅宗影响，但在应用上完全是两个方向。如果说禅宗是“放下”，王阳明心学就是“拿起”，是担当。因为强调担当，所以又非常注重“事上练”，就是不逃避，在每件事情上去磨炼。

有一个司法官员对王阳明说，自己工作太忙，没有时间学习。王阳明回答说：我并没有叫你辞了职，悬空去学习啊，你做司法的工作，就从司法这件事上去学习，也是格物。比如询问案件的时候，不因为什么发怒或高兴，不因为自己的喜恶或人情关系而有所偏重，等等。这讲的就是我们其实可以在每一件事上学习，用现在的话说，工作就是修行。