Web scraping može biti teško, osobito za dinamičke web stranice poput onih koje koriste JavaScript. Korištenjem alata kao što su Beautiful Soup za statički HTML i Selenium za dinamičke stranice mogu se dobiti različita rješenja. Pronalaženje API krajnjih točaka također može olakšati ekstrakciju podataka. Operacije se odvijaju dobro kada su učinak i moralne metode struganja uravnoteženi.

Pronalaženje pouzdanih i učinkovitih izvora ključno je za svakoga tko traži pozamašan skup podataka o videozapisima sličnim Instagramu za strojno učenje. Iako se javni podaci mogu izdvojiti pomoću programa za struganje kao što je BeautifulSoup, s njima postoje etički problemi.

Poteškoće ekstrahiranja HTML-a s web-stranica koje se značajno oslanjaju na JavaScript pomoću JSoupa pokrivene su ovim člankom. Alternativne tehnike, kao što su Selenium i Puppeteer, istražuju se kako bi se uhvatio konačni renderirani HTML jer JSoup ne može pokrenuti JavaScript.