KO
시작하기

용어집

탐지 및 평판

DataDome

기기, 네트워크, 행동 신호로 모든 요청을 밀리초 단위로 점수화하는 실시간 봇 방어 서비스로, 이커머스와 생활 정보 사이트에서 흔합니다.

DataDome이 내세우는 차별점은 속도입니다. 입구에서 한 번 통과하는 관문 대신, 모든 요청에 몇 밀리초 만에 판정을 내립니다. 그 설계 결정이 스크레이퍼가 겪는 모든 것을 정합니다. 들어가고 나서 신뢰받는 일은 없습니다. 요청마다 다시 판단하므로, 50번의 요청에 통하던 설정도 쌓인 패턴이 기준선을 넘으면 51번째에 확인을 요구받을 수 있습니다.

판정은 이 용어집이 따로 다루는 계층들을 가중치를 두어 합쳐 만듭니다. 네트워크 평판과 주소 유형. 복호화 전에 읽는 TLS 지문. 헤더 구성과 순서. JavaScript로 수집한 기기 지문. 그리고 세션 동안의 행동, 즉 속도, 탐색 형태, 사람다운 작은 불규칙성의 유무입니다. 어떤 신호 하나도 결정하지 않으며 점수는 합계이고, 그래서 주소만 고치면 숫자가 조금 움직일 뿐 그것만으로 통과되는 것은 없습니다.

특정 업종에 몰려 있으며, 마주쳤을 때 알아 둘 가치가 있습니다. 이커머스, 클래시파이드, 티켓팅, 미디어가 본거지입니다. 스크레이핑과 사기의 표적이 가장 많고 비용을 가장 잘 정당화할 수 있는 업종이기 때문입니다. 한 번 보면 알아보기는 쉽습니다. 특유의 중간 화면과 확인 페이지, 그리고 그 이름이 적힌 응답 헤더가 있어서, 짐작하는 대신 무엇을 상대하는지 대개 확인할 수 있습니다.

솔직한 전략적 판단은 DataDome이 주소가 답의 가장 작은 부분인 시스템 중 하나라는 것입니다. 클라이언트 지문과 요청별 행동에 크게 기대므로, 신뢰받는 레지덴셜 출구는 필요하지만 충분과는 거리가 멉니다. 같은 핸드셰이크와 같은 기계적 리듬이 깨끗한 IP로 도착하는 것이 정확히 이 시스템이 잡도록 만들어진 모순입니다. 세션 전체 동안 유지되는 모든 계층의 일관성만이 살아남습니다.

그래서 전용 엔드포인트가 경제성에서 이기는 경우가 많은 대상이기도 합니다. 계속 다시 조정되는 시스템에 맞서 맞춤 클라이언트를 일관되게 유지하는 것은 지속적인 엔지니어링 시간이며, 많은 팀에게는 전문 업체의 요청당 비용이 직접 위치를 지키는 인건비보다 낮습니다.

HProxy의 처리 방식

DataDome은 IP가 한 계층일 뿐이라는 저희의 일관된 입장을 보여 주는 깔끔한 예입니다. 좋은 주소는 이에 맞서 바닥을 올려 주지만, 핸드셰이크와 행동이 주소가 하는 이야기와 모순되는 클라이언트는 구하지 못합니다. 그래서 저희는 더 비싼 IP를 해결책으로 파는 대신, 바로 이런 대상을 위해 프록시와 스크레이퍼 API를 짝지어 제공합니다.

자주 묻는 질문

레지덴셜 프록시로 DataDome을 우회할 수 있나요?

입력 하나, 즉 네트워크 평판을 없애며, 그것은 점수 전체와 거리가 멉니다. DataDome은 TLS 지문, 기기 지문, 요청별 행동에도 똑같이 무게를 두며, 그중 무엇이든 주소와 모순되면 그것만으로 충분합니다. 깨끗한 레지덴셜 출구는 이에 맞서 필요하지만, 그것만으로 충분한 경우는 없습니다.

사이트가 DataDome을 쓰는지 어떻게 알 수 있나요?

확인 페이지에 알아볼 수 있는 모습이 있고, 관여 사실은 보통 응답 헤더와 확인 때 설정되는 쿠키에 드러납니다. 차단이 일반 403 대신 특유의 중간 화면으로 나타나고 헤더에 서비스 이름이 있다면, 방어를 짐작하는 대신 무엇을 상대하는지 확인할 수 있습니다.

잘 시작했는데 DataDome이 왜 세션 도중에 차단하나요?

한 번 들여보내는 대신 모든 요청에 점수를 매기기 때문입니다. 초반에는 괜찮아 보이던 패턴, 즉 요청 속도, 탐색 형태, 지문 안정성이 쌓이면서 기준선을 넘을 수 있어서, 차단이 도중에 떨어집니다. 접근 권한이 취소된 것과는 다르게, 최근 요청들에 대한 진행 중인 판정이 바뀐 것입니다.

DataDome에 실제로 통하는 것은 무엇인가요?

세션 동안 유지되는 모든 계층의 일관성입니다. 진짜 브라우저 지문, 주장하는 브라우저와 맞는 TLS 핸드셰이크, 그럴듯한 위치의 신뢰받는 레지덴셜 주소, 사람처럼 조절된 행동입니다. 계속 다시 조정되는 시스템에 맞서 그 모두를 유지하는 것은 실제 엔지니어링 노력이므로, 어려운 DataDome 대상에는 전문 스크레이퍼 엔드포인트가 더 경제적인 길인 경우가 많습니다.

전체 용어집(으)로 돌아가기.

HProxy.

저희 말만 믿지 마세요. 직접 측정해 보세요.

브라우저에서 실제 주소를 대상으로 실행됩니다. 가입도 없고 목록도 저장하지 않습니다.

HProxy