你看原著小龙女离开后杨过的反应是这样:
【但心中总还存着一个指望，师父既突然而去，多半也能突然而来。义父虽得罪了她，她想到我却并无过失，自然会回头寻我。
　　这一晚他又怎睡得安稳？只要听到山间风声响动，或是虫鸣斗起，都疑心是小龙女回来了，一骨碌爬起身来，大叫：“姑姑！”出去迎接，每次总是凄然失望。到后来索性不睡了，奔上山巅，睁大了眼四下眺望，直望到天色大亮，惟见云生谷底，雾迷峰巅，天地茫茫，就只他杨过一人而已。
　　杨过捶胸大号，蓦地想起：“师父既然不回，我这就找她去。只要见得着她，不管她如何打我骂我，我总是不离开她。她要打死我，就让她打死便了。”心意既决，登时精神大振，将小龙女与自己的衣服用物胡乱包了一包，负在背上，大踏步出山而去。
　　一到有人家处，就打听有没见到一个白衣美貌女子。大半天中，他接连问了十几个乡民，都是摇头说并没瞧见。杨过焦急起来，再次询问，出言就不免欠缺了礼貌】
………………………………………
杨龙是住在终南山的茅屋里，离古墓不远，杨过第一反应是小龙女会回来，等了一晚上。结果没回来。。说明这个时候小龙女已经下山了，没有回终南山。。。杨过才下山的

杨过到处问人是受到错误指引，才越走越远的。。然后就说遇到陆无双，触发剧情
【杨过道：“你不用管。我只问你有没见到她从此间经过？”那人便要反唇相讥。旁边一个老头拉了拉他衣袖，指着东边一条小路，笑道：“昨晚老汉见到有个仙女般的美人向东而去，还道是观世音菩萨下凡，却原来是老弟的相好……”杨过不听他说完，急忙一揖相谢，顺着他所指的小路急步赶了下去，虽听得背后一阵轰笑。却也没在意，怎知道那老者见他年轻无礼，故意胡扯骗他】

杨过的确以为小龙女会回来，所以他守株待兔了一晚上，如果龙女要回古墓，会经过茅屋的，结果没回来，才认为小龙女下山了，原著是说小龙女先下山了一段时间又回的古墓。所以就完美错过

剧情需要啊，古墓必然能等到小龙女，但是书没法写了呀！所以书里给了另外一个基本合理的方式让杨过下山了。