但也并非所有的旅程都是一帆风顺的。在日本时，黄永玉到富士山游览，他沉浸在美景中以致不知不觉拿出了画板和画笔画起了画。几个小时过去了，由于精神过于集中，等他从画作中走出来时，才发现除了画板画笔外的所有物品全无踪影了。黄永玉沿途比画着跟人讲他的困境，幸亏得到了一个日本女孩相助才安全返回住处。善有善报，日本女孩因此成为黄永玉的关门弟子之一，现在已是当代日本画坛的名流。
流浪感悟人生
年纪越大，经历亲友的离世就越多。1997年，黄永玉最好的朋友汪曾祺去世了。黄永玉表面上反应很淡，只说了一句：“哦，他也走了！”实际上，汪曾祺和黄永玉之间是如俞伯牙钟子期般的莫逆。伯牙摔琴，因为世上无人能听懂他的高山流水之音。黄永玉也遭遇了他精神上的困境，他经常拿着画笔发呆，这世上还有懂他画的人吗？他画给谁看？他觉得自己灵感全无。
正值此际，有些媒体和商人为了赚钱，恶意炒作黄永玉的画册，让消费者花天价购买他的作品。此事让黄永玉招致了很多批评。有记者在报纸上批评他大发横财，阔绰显摆，生活奢华，“在北京的花园居然占地六亩，还开着奔驰车，还有好几辆跑车。”甚至攻击起他的为人：“他已经不是文人，他为酒鬼酒设计包装，他的雕塑、画册全都限量发行。与那些专门心搞学问的大师们相比，他不过是个靠自己艺术捞钱的商人！”
黄永玉的性格是猛烈如火、清澈如水的，他经常用每日三省来要求自己，他最不愿的就是自己品行上有任何污点。原来别人看他就像个快乐的老顽童，可这一段时间下来，他却像一个有口难言的闷葫芦。没多久，几重郁闷下，他的人也很快显老了。张梅溪开导他：“外在的批评，名和利什么的，都是镜中花，水中月。名和利能够一下子全来也能一下子全没，如果你太想抓住它，就会为它所累！你应该以流浪的心态对待它！”
“流浪”两个字刺激到了黄永玉。流浪是身体上的，精神上何尝不是？守着固有的艺术形式，那么走来走去，不过还是原来的风景。在名誉与金钱上应该当自己一无所有，这样才能无牵无挂，这样才能处处是风景。流浪应该是寻找，是发现新奇，是精骛八极，心游万仞。