Web crawling – rodzaje i strategie w web scrapingu

Web crawling to przechodzenie bota po stronach internetowych. Jest to proces poszukiwania linków i wchodzenia na kolejne strony według ustalonej strategii. Jest to podstawa web scrapingu i jeden z ważniejszych elementów pod kątem optymalizacji scraperów. O tym czym się różni web scraping od web crawlingu możesz przeczytać w moim artykule „Web Scraping w Pythonie”. Dzisiaj zajmiemy się strategiami możliwymi do…Continue Reading→