但梅琦先生对所目睹的一切都保持着沉默，这让福尔摩斯有些沮丧。当他问起这花园的光辉历史时，梅琦没有理会他的问题。不仅如此，他似乎也不愿意待在福尔摩斯身边，有时候，他会走在前面，有时候，又趁福尔摩斯不注意，突然落到后面。实际上，自从向那几个女人问过路之后，梅琦的情绪就一直相当低落，也许是因为他听到了一些不想知道的事吧，也有可能是因为他记忆中美好的花园如今变成了不欢迎公众参观的禁区。
不过，很快他们就发现，他们并不是唯一的擅闯者。在小路上，一位看上去饱经世故的成年男子朝他们迎面走来——男人应该四十多岁或五十岁出头，袖子挽到了胳膊肘——他还牵着一个兴高采烈的小男孩，男孩穿着蓝色短裤和白色衬衫，蹦蹦跳跳地走在旁边。双方相遇时，男人礼貌地对梅琦点了点头，用日语说了句什么，当梅琦回答他时，他又礼貌地点点头。他看上去似乎还想和梅琦说说话，但男孩一直拽着他的手，催促他往前走，他只好点点头，又继续走了。
福尔摩斯问那个男人说了什么，梅琦只是摇摇头、耸耸肩。福尔摩斯发现，这短暂的偶遇似乎让梅琦很是不安，他不断回头看身后，显得心神不宁。有一段时间，他紧紧挨着福尔摩斯走，提着行李箱的手指关节都因为过于用力而发白了——他看上去就像是刚见到了鬼。在他再次加快步伐之前，他说道：“真奇怪，我觉得我刚刚见到的就是我和我父亲，不过，却没有看到我的弟弟——我真正的弟弟，不是健水郎。因为您一直认为我是独生子，没有任何兄弟姐妹，所以，我也就觉得没有必要跟您提起他。其实，他死于肺结核，就在我们一起走过这条小路后一个月左右，他就死了。”他又回头看了一眼，加快了脚步。“真是太奇怪了，福尔摩斯先生。这是很多年之前的事，可感觉却一点也不遥远。”
“确实，”福尔摩斯说，“有时，我以为早已被遗忘的过去会活灵活现地出现，让我出乎意料，吓我一跳。如果不是它们找上我，我压根就不会记得。”
他们沿着小路来到了一个比较大的池塘，上面有一座拱起的石桥。池塘里，还有几个小小的岛屿，每个小岛上，都残留着茶室、小屋或小桥的遗迹。整个花园也突然变得开阔起来，仿佛远离了任何城市。走在前面的梅琦停下来，等着福尔摩斯赶上他。然后，两人盯着一个在一座小岛上盘腿而坐的和尚，看了一会儿。那和尚身穿长袍，坐得笔挺，像尊雕像般一动不动，低着剃得溜光的头在祈祷。