Webscraping og botudvikling · Lektion

Omgåelse af browserfingerprinting

Forstå, hvordan websites identificerer headless-browsere, og lær teknikker til at få automatiserede browsere til at ligne rigtige brugere.

Lektion 4 af 413 trin

Omgåelse af browserfingerprinting er en gratis Webscraping og botudvikling-lektion på CoddyKit. Dette er lektion 4 af 4. Du kan læse alle 3 lektioner i dette læringsspor gratis i deres fulde længde — derefter låser CoddyKit PRO alle lektioner op samt praktiske øvelser med en indbygget kodeeditor og en AI-underviser døgnet rundt. Den er en del af læringsforløbet i Webscraping og botudvikling, og dine fremskridt synkroniseres på tværs af nettet og CoddyKit-appen. Webscraping og botudvikling-kurset indeholder 4 lektioner i alt.

Hvad er fingerprinting

Ud over IP og headere profilerer websteder dit browser-fingerprint: en kombination af egenskaber som skærmstørrelse, skrifttyper, WebGL-renderer og særheder i JavaScript, der tilsammen identificerer automatisering.

Selv med roterende proxyer bliver du blokeret, hvis dit automatiseringsfingerprint er ensartet.

Flaget navigator.webdriver

Det mest åbenlyse tegn er, at automatiserede browsere sætter navigator.webdriver til true. Scripts på siden kan læse det med det samme.

// site-side detection
if (navigator.webdriver) {
  blockBot();
}

Tegn på headless-kørsel

Chrome i headless-tilstand med standardindstillinger lækker signaler: et manglende window.chrome-objekt, ingen plugins, en usædvanlig user-agent, der indeholder 'HeadlessChrome', og forespørgsler om tilladelser, der opfører sig mærkeligt.

Tilpasning af webdriver

Du kan tilsidesætte flaget, før sidens scripts kører. Stealth-biblioteker automatiserer snesevis af den slags tilpasninger, men grundideen er at tilsidesætte egenskaben.

driver.execute_cdp_cmd('Page.addScriptToEvaluateOnNewDocument', {
  'source': 'Object.defineProperty(navigator, "webdriver", {get: () => undefined})'
})

Realistiske user-agenter

Tilpas din user-agent-streng til en ægte, aktuel browserversion, og sørg for, at den stemmer overens med platformen og de andre headere, du sender. Uoverensstemmelser er et rødt flag.

options.add_argument('user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) '
                     'AppleWebKit/537.36 (KHTML, like Gecko) Chrome/120.0 Safari/537.36')

Vindues- og visningsstørrelse

Browsere i headless-tilstand bruger ofte meget små eller usædvanlige vinduesstørrelser som standard. Angiv en almindelig opløsning, så den viste visningsport ser menneskelig ud.

options.add_argument('window-size=1920,1080')

Støj i Canvas og WebGL

Websteder beregner en hash af pixeloutputtet fra et skjult canvas eller din WebGL-renderer-streng for at opbygge et stabilt id. Hvis du tilføjer en smule tilfældig variation til disse output, bryder du det ensartede fingerprint.

Menneskelignende adfærd

Fingerprinting omfatter også adfærd. Bots klikker med det samme og bevæger sig i lige linjer. Tilføj tilfældige forsinkelser, musebevægelser og rulning for at efterligne en person.

import random, time

for _ in range(3):
    driver.execute_script('window.scrollBy(0, arguments[0])', random.randint(200, 600))
    time.sleep(random.uniform(0.5, 1.5))

Stealth-plugins

Værktøjer som undetected-chromedriver eller selenium-stealth samler mange omgåelser: tilpasning af webdriver, forfalskning af plugins, rettelse af WebGL-leverandøren og normalisering af tilladelser i ét trin.

import undetected_chromedriver as uc
driver = uc.Chrome()
driver.get('https://example.com')

Konsistens er afgørende

Den største fejl er en inkonsistent profil: En Windows-user-agent sammen med en Linux-WebGL-renderer og en mobil skærmstørrelse råber automatisering. Sørg for, at alle signaler passer sammen med én troværdig enhed.

Test af dit fingerprint

Før en rigtig kørsel skal du sende din automatiserede browser til en side, der tester fingerprintet og rapporterer registrerede automatiseringssignaler. Gentag, indtil rapporten ligner en almindelig browser, og tag den derefter i brug.

driver.get('https://bot.sannysoft.com')
# inspect the results table for red flags

Hurtigt tjek

Test din forståelse af omgåelse af fingerprinting.

Besvar den i den interaktive lektion

Opsummering

Du har lært, hvordan browser-fingerprinting fungerer, og hvordan du falder ind i mængden: tilpas navigator.webdriver, ret tegn på headless-kørsel, brug realistiske user-agenter og vinduesstørrelser, tilføj støj i canvas/WebGL, simuler menneskelig adfærd, og sørg for, at alle signaler er konsistente.

Gratis at komme i gang

Lær Python med en AI-underviser — gratis

Skriv og kør rigtig kode i din browser, få øjeblikkelig hjælp fra en AI-underviser døgnet rundt, og fortsæt, hvor du slap, på web eller i appen.

Kurser: 12
Lektioner: 48

Start gratis Se hele kurset

Ofte stillede spørgsmål

Er lektionen “Omgåelse af browserfingerprinting” gratis?

Ja — alle 3 lektioner i læringssporet Webscraping og botudvikling, inklusive “Omgåelse af browserfingerprinting”, kan læses gratis i deres fulde længde her på webstedet. Derefter låser CoddyKit PRO alle lektioner op samt interaktive øvelser med en indbygget kodeeditor og en AI-underviser døgnet rundt. Webscraping og botudvikling-kurset indeholder 4 lektioner i alt.

Hvad lærer jeg i “Omgåelse af browserfingerprinting”?

Forstå, hvordan websites identificerer headless-browsere, og lær teknikker til at få automatiserede browsere til at ligne rigtige brugere. Du øver dig i Webscraping og botudvikling med praktisk kode, som du kører direkte i browseren, og en AI-vejleder døgnet rundt besvarer dine spørgsmål, mens du arbejder dig gennem lektionen.

Skal jeg have erfaring for at begynde på Webscraping og botudvikling?

Der kræves ingen tidligere erfaring. Webscraping og botudvikling på CoddyKit er tilrettelagt for både begyndere og øvede, så du kan starte her eller fra begyndelsen og lære i dit eget tempo. Dette er lektion 4 af 4.

Hvor lang tid tager lektionen “Omgåelse af browserfingerprinting”?

De fleste CoddyKit-lektioner tager cirka 5–10 minutter. Hver lektion er kort og interaktiv, så du gør løbende fremskridt og kan fortsætte, hvor du slap – på både web og app.

Kan jeg skrive og køre kode i denne Webscraping og botudvikling-lektion?

Ja. Alle Webscraping og botudvikling-lektioner har en indbygget kodeeditor, så du kan skrive og køre rigtig kode direkte i din browser og få øjeblikkelig feedback fra AI – uden lokal opsætning.

Alle lektioner i dette kursus

← Tilbage til Webscraping og botudvikling