Cómo rastrear el contenido dinámico de páginas web, muchas de las cuales son generadas dinámicamente por js

Existen dos métodos comúnmente utilizados para capturar páginas dinámicas. Uno es obtener la interfaz de datos dinámicos (ruta de acceso real) mediante ingeniería inversa de JavaScript y el otro es utilizar la biblioteca de selenio para simular un navegador real. y obtenga la representación de JavaScript del siguiente contenido. Sin embargo, la biblioteca de selenio es engorrosa de usar y la velocidad de rastreo es relativamente lenta, por lo que el primer método se usa más comúnmente a diario.