Siteler sizi engellemeden önce canvas parmak izi nasıl kontrol edilir

Canvas parmak izi, görünmez bir canvas'a metin ve şekiller çizer, pikselleri geri okur ve sonucu hashler. GPU'nuz, grafik sürücünüz ve işletim sisteminizin fontları rasterize etme biçimi bu pikselleri az da olsa etkiler; bu yüzden hash, makineden makineye biraz farklı çıkar. Kontrol edilmeye değer iki şey var ve ikisi de değerin kendisi değil: hash'inizin yeniden yüklemeler arasında aynı kalıp kalmadığı ve tarayıcınızın kendisi hakkında iddia ettiği diğer her şeyle uyuşup uyuşmadığı. Her yüklemede değişen bir hash, sıkıcı olandan daha dikkat çekicidir.
Neye ihtiyacınız var
- İçinde devtools açabileceğiniz bir tarayıcı; tercihen günlük tarayıcınız değil, otomasyonunuzun kullandığı tam sürüm.
- Karşılaştırma için ikinci bir referans noktası, örneğin aynı makinedeki sıradan bir masaüstü profili.
- CapSkip'in çalışıyor olması gerekir; loopback adresinde Local modda ya da işçilerinizin ulaşabileceği bir makinede Server modda. Her ikisi de bağlantı ayarları altında ele alınır ve burada önemli olan tek sebep, hâlâ aldığınız challenge'ların bir yere gitmesi gerekmesidir.
Canvas parmak izi gerçekte neyi ölçer
Teknik bir paragrafa sığacak kadar basittir. Bir betik bir canvas elemanı oluşturur, adlandırılmış bir fontla kısa bir dize yazar, birkaç şekli doldurur, ardından bir readback yöntemi çağırır. Mozilla, readback'i açıkça belgeler: toDataURL'ün döndürdüğü data URL tüm görseli base64 olarak içerir. Bu diziyi hashleyin ve onu üreten render yığınını tanımlayan bir sayı elde edersiniz.
Makineler arasında değişen şey, insanların beklediğinden daha küçüktür. Kavisli glif kenarlarındaki anti-aliasing kararları, alt piksel konumlandırması, istenen bir fontun yerelde var olup olmadığı ya da başka bir fontla değiştirilip değiştirilmediği ve GPU sürücünüzün iki rengi karıştırırken yaptığı tam yuvarlama. Bunların hiçbiri JavaScript'ten kontrol edilemez; tespit sağlayıcılarının bunu sevmesinin tam nedeni de budur.
Buradan çıkan sonuç, üzerinde çalışmaya değer olan kısımdır. Gerçek donanım her seferinde aynı hash'i üretir. Popüler donanım, binlerce başka kişinin de ürettiği bir hash üretir. Yani amaç nadir ya da gizli bir parmak izi değil, yaygın ve can sıkıcı derecede kararlı bir parmak izidir.
1. adım: kendi canvas hash'inizi okuyun
Bunu ölçmek istediğiniz tarayıcının konsoluna yapıştırın. Gerçek bir parmak izi betiğinin çizeceği şekillerin aynısını çizer ve geri okumayı gözle kontrol edebileceğiniz bir hale indirger.
// no install needed, paste into the devtools console
function canvasHash() {
const c = document.createElement('canvas');
const ctx = c.getContext('2d');
ctx.textBaseline = 'top';
ctx.font = '16px Arial';
ctx.fillStyle = '#f60';
ctx.fillRect(0, 0, 120, 30);
ctx.fillStyle = '#069';
ctx.fillText('probe', 4, 20);
const url = c.toDataURL();
let h = 0;
for (let i = 0; i < url.length; i++) h = (h * 31 + url.charCodeAt(i)) | 0;
return h.toString(16);
}
canvasHash();Değerin kendisi tek başına size hiçbir şey söylemez. İyi bir hash ya da kötü bir hash yoktur, kendinizinkini karşılaştırabileceğiniz herkese açık bir liste de yoktur. Bilgi haline gelmesi, ancak onu başka bir çalıştırmayla ya da aynı makinedeki başka bir tarayıcıyla karşılaştırdığınızda olur.
2. adım: hash'in kararlı olup olmadığını kontrol edin
Sondayı arka arkaya birkaç kez çalıştırın. Değiştirilmemiş bir tarayıcıda her çalıştırma aynı değeri döndürür, çünkü bu çizim işleminde rastgele hiçbir şey yoktur.
// run this after the function above is defined const runs = new Set(); for (let i = 0; i < 5; i++) runs.add(canvasHash()); // 1 means stable. Anything higher means noise is being added. console.log(runs.size, [...runs]);
Birden fazla değer alıyorsanız, piksellere bir şey gürültü enjekte ediyordur. Bu illa sizin yaptığınız bir şey olmak zorunda değildir. Tarayıcılar artık bu davranışı kendileri sunuyor ve Mozilla bunu pixel readback yöntemi hakkında belgeler: parmak izi koruması etkinken, getImageData sonucuna rastgele hafif bir gürültü eklenir böylece bir site render cihazını çıkaramaz; bu da yazma ve okuma turunun artık eşleşmediği anlamına gelir.
Yani kararsız bir hash'in iki olası kaynağı vardır ve hangisine baktığınızı bilmeniz gerekir. Bunu kasıtlı yapan bir gizlilik tarayıcısı bir hikayedir. Otomasyon yığınınıza kurduğunuz bir gizlenme yaması ise başka bir hikayedir ve asıl canınızı yakan da odur.
3. adım: iddia ettiğiniz her şeyle uyuştuğunu kontrol edin
Bir parmak izi tek tek değerler olarak değil, bir bütün olarak değerlendirilir. Tespit kodu, canvas sonucunu tarayıcının kendisi hakkında söylediği diğer şeylerle karşılaştırır ve çelişkiler tek başına herhangi bir sıra dışı değerden daha kötü puanlanır.
| Sinyal | Tutarlı bir hikaye neye benzer | Yaygın çelişki |
|---|---|---|
| Canvas hash'i | Yeniden yüklemeler arasında kararlı, iddia ettiği platformla uyumlu | Her okumada yeni bir değer |
| WebGL renderer dizesi | Adlandırılmış bir tüketici GPU'su | Bir masaüstü user agent'ı altında yazılım tabanlı bir renderer |
| Font ikamesi | İddia edilen işletim sistemiyle birlikte gelen fontlar | Bir Windows user agent'ının arkasında bir Linux font yığını |
| Cihaz piksel oranı | Bildirilen ekran boyutlarıyla eşleşir | İddia edilen standart bir ekranda kesirli bir oran |
İkinci satır, konteynerlerin başarısız olduğu satırdır. GPU'su olmayan bir makinedeki headless bir tarayıcı yazılım tabanlı render etmeye geri düşmek zorundadır ve renderer dizesi bunu dürüstçe söylerken canvas pikselleri de sessizce onunla aynı fikirdedir. Yalnızca dizeyi yamalamak yardımcı olmaz, çünkü ürettiği pikseller hâlâ hashlenmeyi bekliyor. undetected-chromedriver'da CAPTCHA'lar rehberi aynı sorunun otomasyon bayrağı tarafını kapsar.
Bunu kendi yığınınızın içinden ölçmek, gerçekte neyi kullandığınızı bilmenin tek yoludur. Sondayı, başlatma bayraklarına güvenmek yerine işlerinizin kullandığı tarayıcının üzerinden çalıştırın.
# pip install playwright
from playwright.sync_api import sync_playwright
PROBE = """() => {
const c = document.createElement('canvas').getContext('2d');
c.font = '16px Arial';
c.fillText('probe', 2, 16);
return c.canvas.toDataURL().slice(-32);
}"""
with sync_playwright() as p:
page = p.chromium.launch(headless=True).new_page()
page.goto("https://example.com/")
print(page.evaluate(PROBE)) # compare against your real browserBunu önce headless çalıştırın, ardından headless bayrağını kapatarak tekrar çalıştırın, sonra ikisini de aynı makinedeki normal bir tarayıcı penceresiyle karşılaştırın. Üç özdeş sonuç, sizi ele verenin canvas olmadığı anlamına gelir. Üç farklı sonuç ise nereye bakmanız gerektiğini söyler. Playwright CAPTCHA çözücü sayfası bunu gerçek bir crawl'a bağlamayı kapsar.
Canvas'ı rastgeleleştirmek neden ters teper
Bir canvas parmak izi değerini rastgeleleştirmek bariz bir savunma gibi görünür ve genellikle işleri daha da kötüleştirir. Gerekçe kısadır. Yaygın bir hash sizi büyük bir gruba sokar. Nadir ama sabit bir hash sizi küçük bir gruba sokar. Her okumada farklı olan bir hash ise sizi, gerçek tarayıcıların neredeyse hiç bulunmadığı bir gruba sokar, çünkü normal donanım deterministiktir.
Daha da kötüsü, bu kararsızlığı test etmek son derece ucuzdur. Bir sayfa yüklemesinde canvas'ı iki kez okuyup karşılaştırmak bir tespit betiğine hiçbir şeye mal olmaz ve savunmanızı istemci hakkında bir boolean sinyale dönüştürür. Bu, gizlemeye çalıştığınız kimlik belirleyici değerden kesinlikle daha kötü bir alışveriştir.
Gerçek bir istisna var. Okuma başına değil, origin başına ve oturum başına rastgeleleştirme yapan tarayıcılar, siteler arası bağlantıyı kırarken bir sayfa görüntüleme içinde hash'i kararlı tutar. Bu, üzerinde düşünülmüş bir tasarımdır ve otomasyon gibi görünmez. Yamalanmış bir otomasyon yığınından gelen okuma başına gürültü ise tamamen başka bir şeydir ve dün çalışan bir yığında aniden ortaya çıkan challenge'lar olarak günlüklerinize yansıyan da odur.
Pratik kural şudur: hiçbir şeyin yamalanmadığı gerçek donanım üzerinde gerçek bir tarayıcıyı tercih edin ve sıkıcı bir parmak izini kabullenin. Bunu elde edemiyorsanız, hangi parmak izine sahipseniz onu kararlı ve kendi içinde tutarlı tutun.
Bunların hiçbirinin düzeltmediği şeyler
Canvas parmak izi çalışması, ne sıklıkla challenge ile karşılaştığınızı değiştirir. Karşılaştığınızda ne olacağını değiştirmez. CapSkip, canvas hash'inize, WebGL renderer'ınıza ya da font listenize dokunmaz ve hiçbir çözücü de dokunamaz; çünkü bunlar size sunulan challenge'ın değil, pikselleri çizen makinenin özellikleridir.
Bunları iki ayrı iş olarak ele alın. Tutarlılık çalışması challenge oranını düşürür. Çözücü ise hâlâ gelen challenge'ları ele alır; bu da düzgün davranan bir yığında sıfır değil, daha küçük bir sayıdır. İkisini birden çözeceğini vaat eden her şey, aslında size ikisinden yalnızca birini satıyordur.
Çözücüyü onun yerine bir sunucuda çalıştırmak
Parmak izi testi genellikle gerçek bir GPU'ya sahip bir iş istasyonunda yapılırken crawl tamamen başka bir yerde çalışır. Bu ayrım sorun değildir ve çözücüyü her işçiye zorla kurdurmaz:
| Mod | Dinlediği adres | Ne zaman kullanılır |
|---|---|---|
| Yerel | 127.0.0.1, yalnızca o cihaz | Tarayıcı ve çözücü tek bir makinede çalışır |
| Sunucu | Ağ adresiniz veya genel IP'niz | Worker'lar, bir VPS veya barındırılan bir platform API üzerinden çağrı yapar |
SDK'nın adresini çözücü makineye yöneltin; kodunuzun geri kalanı değişmez, böylece bir tarayıcı filosu her biri kendi profilini korurken tek bir örneği paylaşabilir. Çağıranlar ağınızın dışında yer alıyorsa statik bir genel IP önerilir. Ayarlar bağlantı ayarları altında yer alır ve Server modu yine sizin kendi donanımınızdır, yine ölçümsüzdür: çözücünün nerede çalıştığını değiştirir, kimin sahip olduğunu asla değiştirmez.
FAQ
Canvas geri okumasını tamamen engelleyebilir miyim?
Yapabilirsiniz ve bu çok dikkat çekicidir. Render etmeyi reddeden, boş bir görsel döndüren ya da geri okumada hata fırlatan bir canvas, neredeyse her gerçek parmak izinden daha nadirdir; bu yüzden engellemenin kendisi kimlik belirleyici özellik haline gelir. Engelleme, kullanıcılarının hepsi birbirine benzeyen bir gizlilik tarayıcısı için mantıklıdır. Sıradan görünmeye çalışan tek bir otomasyon istemcisi için hiçbir anlamı yoktur.
Headless bir tarayıcının farklı bir canvas parmak izi olur mu?
Çoğu zaman olur ve genellikle bunun nedeni headless olması değil donanımdır. GPU'su olmayan bir konteyner yazılım tabanlı bir yedekle render eder ve diğer uçtan farklı pikseller çıkar. Eksik sistem fontları bunu daha da ileri götürür, çünkü ikame edilen bir font, istenenden farklı şekilde rasterize edilir. Makineye gerçek bir GPU ve normal bir font seti vermek bu farkın çoğunu kapatır.
Canvas parmak izi tek başına beni tanımlamaya yeter mi?
Hayır, ve zaten o şekilde kullanılmaz. WebGL renderer'ının, font listesinin, TLS el sıkışmasının, IP itibarının ve oturumun nasıl davrandığının yanında yer alan birçok girdiden yalnızca biridir. Tek bir mükemmel değerin başka bir yerde kendisiyle çelişen bir yığını kurtaramamasının ve tek bir sinyali tek başına düzeltmenin challenge oranını nadiren fazla değiştirmesinin nedeni de budur.
CAPTCHA'yı çözmek parmak izimi düzeltir mi?
Hayır. Çözmek, önünüzdeki challenge'ı temizler ve onun size neden gösterildiğini hiçbir şekilde değiştirmez. Challenge oranınız yükseliyorsa, onu düşürecek şey parmak izi çalışmasıdır. Bu arada işi yürüten şey ise çözücüdür ve ikisi için ayrı ayrı bütçe ayırmakta fayda var.
En kısa hâli
Canvas hash'inizi okuyun, beş kez çalıştırın ve beş yerine tek bir değer aldığınızı doğrulayın. Ardından bu değeri WebGL renderer'ı, font yığınını ve user agent'ınızın iddia ettiği platformla karşılaştırın, çünkü çelişkiler size tek bir garip sayıdan daha pahalıya mal olur. Gürültü eklemeyin: okuma başına rastgeleleştirme iki satırda tespit edilebilir ve sizi gerçek tarayıcıların neredeyse hiç bulunmadığı bir gruba sokar. Önce yığını düzeltin, sonra geri kalan challenge'lar için endişelenmeyi bırakın. web scraping için CAPTCHA çözücü sayfası bunu crawl ölçeğinde çalıştırmayı kapsar. Geriye ekonomi kalıyor: captcha atlatma kendi donanımınızda çalışır ve çözüm başına hiçbir şeye mal olmaz; böylece kaçınabildiğiniz challenge'lar hiçbir zaman faturaya dönüşmez.
