在回去的路上，他掐指一算，自己已经在南昌待了一年。他不必用八卦五行，只凭五官就搞明白了一件事：这个王朝官场的腐朽已经是从内到外，无药可救了。贞洁女子和妓女们共处一室，妓女们是瞧不起贞女的。所以很快，刘伯温就被一些官员联手弹劾出了南昌。
屈原说：“众人都喝多了，我却清醒。”其实，别人都喝多了而你却醒着，并不是幸福的事。当你面对一堆酒鬼，吆五喝六，滔滔不绝。你却因为酒精不起作用而难以融入这种癫狂的氛围里，自然少了很多情趣。
有这样一个故事，天降陨石砸了一个深坑，里面还有火星。但好多人认为是上帝来接人去天堂，想一起跳进去。有一人不跳，认为是送死，结果这群人先把他推了进去。这人在里面被大火烧灼，发出凄惨的叫声，上面的人才知道，原来真是送死。结果都庆幸自己没有跳，却咒骂那火中人乌鸦嘴，如果不是他那样说，可能就真是上帝来接人。
在疯人院里，不疯的人才被认为是疯子。刘伯温不是疯子，但在元朝南昌官场，他就是疯子。