最终解决了。
降了两档驱动，最低是552.44的，都是清洁安装，结果还是不行。研究了一下，发现安完旧驱动，对于GeForce Experience和physX并没有替换安装，还是自动保留了最新版号的。
于是手动在控制面板里删掉了GeForce Experience和physX，然后再清洁安装552.44版驱动，终于行了！
最终又升级到8月20日的黑猴版驱动560.94，玩游戏没问题。
个人感觉，可能是最新版驱动561.09更改了游戏的视频编码，造成串流接收端（电视）解码困难，所以才卡的。串流桌面时并没有问题，解码也显示60帧左右，一进入3D游戏，立马狂降至个位数，甚至卡死，退出游戏又好了。