Sökning: "crawlers"

Visar resultat 1 - 5 av 12 uppsatser innehållade ordet crawlers.

  1. 1. The One Spider To Rule Them All : Web Scraping Simplified: Improving Analyst Productivity and Reducing Development Time with A Generalized Spider

    Kandidat-uppsats, KTH/Skolan för elektroteknik och datavetenskap (EECS)

    Författare :Rikard Johansson; [2023]
    Nyckelord :Web scraping; Web crawlers; HTML; Scrapy; Optimization; Web data extraction; Webbskrapning; Webbsökrobotar; HTML; Scrapy; Optimering; Webbdataextraktion;

    Sammanfattning : This thesis addresses the process of developing a generalized spider for web scraping, which can be applied to multiple sources, thereby reducing the time and cost involved in creating and maintaining individual spiders for each website or URL. The project aims to improve analyst productivity, reduce development time for developers, and ensure high-quality and accurate data extraction. LÄS MER

  3. 2. Collecting and analyzing Tor exit node traffic

    Uppsats för yrkesexamina på avancerad nivå, Blekinge Tekniska Högskola/Fakulteten för datavetenskaper; Blekinge Tekniska Högskola/Institutionen för datavetenskap

    Författare :Torbjörn Jonsson; Gustaf Edeby; [2021]
    Nyckelord :Deep packet inspection; Traffic analysis; Tor network; The Onion router;

    Sammanfattning : Background. With increased Internet usage occurring across the world journalists, dissidents and criminals have moved their operations online, and in turn, governments and law enforcement have increased their surveillance of their country’s networks. LÄS MER

  4. 3. Serverless Development Trends in Open Source: a Mixed-Research Study

    Kandidat-uppsats, Göteborgs universitet/Institutionen för data- och informationsteknik

    Författare :Ilja Pavlov; Susanne Ali; Tauhid Mahmud; [2019-11-18]
    Nyckelord :serverless; github; data mining; cloud computing; repositories;

    Sammanfattning : In the age of modern technology, a new paradigm, Serverless, emerges in the world of cloud computing with which it benefits developers to solely focus on the main objective instead of the maintenance of the infrastructure. This study helps developers and readers alike to have an insight into the current state of serverless software development. LÄS MER

  5. 4. VASCO: Developing AI-Crawlers for ML-Blink

    Master-uppsats, Uppsala universitet/Institutionen för informationsteknologi

    Författare :Diego Castillo; [2019]
    Nyckelord :;

    Sammanfattning : The "Vanishing and Appearing Sources during a Century of Observations" (VASCO) initiative aims at finding inexplicable effects among all-sky surveys. The VASCO project is a collaboration between astronomers and information technology researchers, and incorporates explicitly a component of citizen science. LÄS MER

  7. 5. "Ska sökmotorn verkligen vara den viktigaste besökaren?" : En kvalitativ intervjustudie om företags syn på samspelet mellan sökmotoroptimering och användbarhet på webbsidor

    Kandidat-uppsats, Södertörns högskola/Medieteknik

    Författare :Sara Eriksson; [2019]
    Nyckelord :Search engine optimization; usability; interplay; interaction; web development; Sökmotoroptimering; användbarhet; samspel; interaktion; webbutveckling;

    Sammanfattning : Det stora utbudet av webbsidor på internet har resulterat i ett ökat användande av sökmotorer för att hitta information. Sökmotorer tillåter internetanvändare att snabbt söka, selektera och finna svar på sina frågor. LÄS MER