徐霞客对母亲非常孝顺，虽然他几次萌动出游的念头，但当看到年迈的母亲和早逝的妻子留下的孩子时，他总把要出口的话咽回去。徐母看出他的心思，就勉励他说：“身为男儿，应该志在四方，你不要受‘游必有方’的约束，只要你算好路途的远近，时间的长短，能够如期往返也就是了，怎么能因为我而成为笼中鸟、辕下驹，坐困家中呢?”于是，他亲自为儿子打点行装，送他出行。
“父母在，不远游”是当时的训条。为了彻底打消徐霞客的顾虑，80岁的徐母，硬叫儿子陪她去游览附近的荆溪和勾曲，且一路走在前面，表明自己虽年已老迈，但身体依然结实。