Web scrapers eller webcrawlers

Hej,

Er der nogen herinde der ved hvordan jeg for hente daglig informationer ned fra en hjemmeside, jeg har læst lidt om crawlers og scrapers men er der nogen der ved hvad der nemmest og gratis at bruge, og det bliver nød til at pr. Automatik, og det så bliver gemt i en XML fil eller andet jeg så kan hente dataen fra hver dag.

Håber der nogle af jer amino folk der kan hjælpe

Pft.

Du kan fx benytte Scrapy som basis for en scraper du selv udvikler. Den kan også logge ind på et site med denne scraper, og på den måde hente content som du normalt ikke kan scrape.

Hvis du finder en "færdig" løsning, må du gerne poste den her.

Hej,

Tak for svaret.

Ja jeg ved den mulighed er der, men hvis jeg ikke har den mulighed, enten skal jeg selv manuelt ind og skrive værdier af eller have det således at en scrapers eller hvad de hedder henter det pr. Automatik, og det er de sidste jeg helst ser. Så hvis der er nogle der har kendskab til programmer eller lign. Vil jeg meget gerne høre om det.

Pft

Du skal lige være opmærksom på ophavsret hvis du gør det her. Det lyder til du kan risikere at bryde nogens ophavsret. Læs evt. mere her: http://www.byens-advokat.dk/kopieret-tekst-billeder-saadan-goer-du/

Det har jeg undersøgt, og jeg bryder ikke nogen ophavsret ved at gøre det. Altså hvis jeg finder ud af hvordan man kan gøre det :)