Arkiv | Web scraping

Brug af robotter til at samle data.

download

Inspect webside finder skjulte links – hos Statstidende

Den 29. januar 2019 ændrede Statstidende udseende. Alt fik en grundlæggende make-over. Vores mange skraber-robotter, der henter oplysninger om konkurser, rekonstruktioner, herreløse bank-konti og meget andet godt, virkede derfor ikke længere. Medier bruger oplysningerne fra Statstidende både til konkrete nyhedshistorier og til avanceret research efter virksomheder og personer. Oplysninger benytter de også til analyser, for […]

Læs mere 0
monopoletmc

Op og ned med Monopolets helte

P4-programmet lørdag formiddag skulle måske snarere hedde Mads & Mads. I hvert fald er det livsstilseksperten Mads Christensen, som oftest har haft fornøjelsen af at sidde i “Monopolet” sammen med værten Mads Steffensen og to andre gæster, når DR lørdag formiddag fra 9 til 12 løser danskernes dilemmaer om skam, skyld, utroskab, almindelig pli samt […]

Læs mere 0
liste

Hent og rens data – på den helt lette måde

Hvis vi vil hente data ud af hjemmesider, bruger vi ofte web scraping i en eller anden form. Normalt betyder det, at vi automatiserer vores data-udtræk, og vi bruger ofte robotter, som vi programmerer, eller vi bruger andet specialværktøj. Nogle gange kan vi  dog nøjes med “håndværktøj” og lade det komplicerede grej ligge. Her følger et skridt-for-skridt-eksempel […]

Læs mere 0
Benny

Sådan trækker vi alle skattedata ud

Skat har nu for tredje år lagt oplysninger ud om virksomheders skatteforhold. Men data er vanskelige at bruge, fordi de indeholder mange fejl og løbende ændres uden forklaring fra Skats side. Kaas & Mulvads systematiske udtræk dokumenterer en række problemer med indholdet af de åbne skattelister.             De åbne skattelister […]

Læs mere 1

Kvinderne mistede 45 pladser ved valget

Kønsuligheden er blevet mere udtalt i det kommunale Danmark efter valget. Især blå blok trækker i den forkerte retning. Mændene har snuppet 45 ekstra pladser fra kvinderne i de nye byråd. På landsplan betyder det, at andelen af kvinder, der efter valget i 2009 var 31,6 pct., nu er nede på 29,7 pct. Det generelle […]

Læs mere 0