구글 연구진의 DreamRSI는 에이전트가 탐색하며 남긴 분기 기록을 재생해 새로운 정책을 평가하는 자기개선 방법이다. 매번 실제 도구를 호출하지 않고 이미 관측한 경로를 활용하며, 여덟 탐색 과제 중 최대 사례에서 에이전트 호출 수를 162분의 1 수준으로 줄였다고 보고했다. 한 최적화 사례에서는 호출이 550회에서 317회, 실행 시간이 3587밀리초에서 2931밀리초로 줄었다. 기록에 없는 경로는 다시 탐색해야 하므로 이 수치를 모든 작업의 162배 가속으로 해석할 수는 없다.