AI crawler audit