不幸掉入了悬崖。于善言得知玉香的不幸后大哭一场，随后病就好了。病好后他整天郁郁寡欢，看破红尘，便在这锦山上修了一座寺庙，他也出家为僧。后人为了记念这对苦命的情侣，就把锦山改成了玉香山，把楚玉香摔下去的山峰老虎岭改成了公子岭。于善言修建的这座寺庙起名宝珠寺，起因是在玉香小姐跌落山崖的银杏树下，遗落了一枚佛珠，这枚佛珠就成了她留给于善言的唯一遗物。所以于善言并不相信楚玉香已经死了，他认为她升天当了仙女