玄宗在诸侯王的府第里时,常常在长安城南的韦曲和杜曲之间游戏,曾经因为追赶狡猾的兔子,心情高兴而忘了回家。他和手下的十几个人,都饥饿疲倦得厉害,于是在村中的大树下面休息。恰好有个书生,延请玄宗访问他家。他的家中很贫困,只有一位乡下妻子和一头驴而已。玄宗坐的时间还不长,书生杀驴煮粘高粱,准备饭食。酒肉丰盛,玄宗看了感到很奇怪。等到与书生交谈,发现书生洒脱、直率、开朗,跟一般人不同。问他姓名,原来叫王琚。从此后玄宗每到韦、杜间游玩,一定造访王琚家。王琚的谈话和主张,都合乎玄宗心意,玄宗一天比一天跟他更加亲近友好。等到韦后专权时,玄宗很忧虑,单独跟王琚谈了这件事。王琚说:“乱政就杀了她,又有什么可爱惜的?”玄宗便采纳了王琚的策略,平定了朝廷内的祸乱。连续提升最后任命王琚为中书侍郎。