타사 트래픽 견적 대 Google Analytics: Rand Fishkin의 분석이 신뢰할 수 없는 이유

Rand Fishkin은 SEO 업계에서 가장 존경받는 이름 중 하나이며 그만한 이유가 있습니다. SEO 소프트웨어 분야의 선두 기업 중 하나인 Moz를 시작하고 관리한 후 10년 이상 콘텐츠 분석 회사인 SparkToro를 설립했습니다.

나는 오랫동안 Fishkin의 작품을 좋아했습니다. 2015년에 디지털 마케팅 대행사를 시작했을 때 SEO 게임의 수준을 높이기 위해 그의 Whiteboard Friday 비디오를 빙빙 돌린 것을 기억합니다. 그리고 그의 트위터 계정은 비즈니스 지혜의 덩어리에 대한 나의 이동 소스였습니다.

내가 가장 좋아하는 Fishkin의 트윗은 다음과 같습니다.

무엇인가를 파는 가장 좋은 방법 - 아무것도 팔지 마십시오. 구매하려는 사람들의 인식, 존경 및 신뢰를 얻으십시오.

— 랜드 피쉬킨(@randfish) 2015년 2월 4일

그의 회고록 Lost and Founder 는 그의 비즈니스 및 SEO 경험을 조명합니다. 이 책은 내가 가장 좋아하는 비즈니스 서적 중 하나입니다. 비즈니스를 시작하거나 성장시키고 그에 수반되는 흥망성쇠를 탐색하려는 모든 사람이 반드시 읽어야 할 책입니다.

최근 Fishkin은 SparkToro 블로그에서 타사 트래픽 추정치를 Google Analytics 트래픽 데이터와 비교하는 심층 연구를 발표했습니다. 이 연구는 SEO 커뮤니티에서 많은 화제를 불러일으켰고 반응은 엇갈렸습니다.

분석 자체는 칭찬할 만하지만 결과는 경향이 있는 것으로 보이며 편향을 완전히 제거하지 못합니다.

분석을 평가할 때 사람들은 방법론, 데이터 소스 및 잠재적 편견을 비판적으로 살펴보는 것이 중요합니다.

이 기사에서는 Fishkin의 분석을 세분화하고 데이터가 SEO 사용자에게 신뢰할 수 없는 이유를 조사합니다.

Similarweb과의 협업

이 연구의 목적을 위해 SparkToro는 Semrush, Datos, SimilarWeb 및 Ahrefs와 같은 4개의 트래픽 추정 데이터 제공업체로부터 메트릭을 획득하고 이를 Google Analytics의 보고된 수치와 비교했습니다.

그러나 기사에서 언급되지 않은 것은 Fishkin과 SparkToro가 이 프로젝트에서 Similarweb과 긴밀히 협력했다는 사실입니다. 따라서 완전히 편견이 없습니다.

다음은 이를 증명하는 Fishkin의 트윗입니다.

이러한 잠재적 편향과 한계를 감안할 때 이 분석 결과를 소금 한 알로 받아들이는 것이 중요합니다.

방법론의 결함

기사에서 Fishkin은 1,000명 이상의 참가자가 웹사이트의 Google Analytics 트래픽 데이터를 SparkToro와 공유했다고 주장합니다.

피쉬킨에 따르면:

데이터 세트를 크게 정리한 이유는 명확하지 않습니다. 도구에 데이터가 없는 사이트를 모두 제거했습니까? 그렇다면 결과에 영향을 줄 수 있습니다.

모든 웹사이트가 조사에 포함되었다면 수치가 달라졌을 수 있습니다.

Similarweb에는 소규모 웹사이트(>5k 방문)에 대한 데이터가 없다는 점에 유의해야 합니다. 이것은 샘플이 편향되어 있고 임의의 도메인 집합이 아님을 보여줍니다.

이 연구의 또 다른 논쟁점은 타사 SEO 도구가 제공하는 트래픽 견적의 종류에 대한 명확성이 부족하다는 것입니다.

Fishkin이 이 곤경을 설명하는 방법은 다음과 같습니다.

Fishkin의 주장과 달리 Semrush와 Ahrefs의 추정 트래픽 유형을 찾는 것은 그리 어렵지 않습니다.

Ahrefs는 유기적 트래픽만 추정합니다. 다음은 Ahrefs의 CTO인 Tim Soulo의 트윗입니다.

Ahrefs는 독점적으로 검색 트래픽을 추정합니다.

그리고 Afaik Similarweb과 Semrush는 모두 전체 트래픽에 대한 추정치를 제공합니다. pic.twitter.com/GnXhd0o4ch

— 팀 소울로(@timsoulo) 2022년 11월 22일

반면 Semrush에는 두 가지 유형의 사용 가능한 데이터가 있습니다. 첫 번째는 SEO 도구의 유기적 트래픽이고 두 번째는 .Trends 도구의 트래픽입니다.

Semrush의 Domain Analytics는 키워드 위치와 예상 트래픽만을 기반으로 예측을 수행하지만 Traffic Analytics는 검색을 포함한 모든 트래픽 소스에 대한 클릭 스트림 데이터를 분석하여 예측을 수행합니다.

SparkToro는 완전히 다른 경쟁업체와 아마도 다른 데이터 세트를 비교했기 때문에 연구 방법론과 분석이 철저하고 투명하지 않습니다.

또한 Fishkin은 이 특정 연구에 사용된 국가에 대한 정보를 제공하지 않습니다.

SparkToro가 미국 교통 데이터를 분석하고 있었다고 가정할 수 있습니다. 하지만 전 세계 데이터가 Similarweb에서 사용할 수 있는 유일한 기본 데이터라는 사실이 있습니다. 각 국가의 개별 데이터는 별도로 구매합니다. 그 결과, 이 연구에서 어떤 데이터가 비교에 사용되었는지 명확하지 않습니다.

웹사이트의 카테고리/틈새에 대한 언급도 없습니다.

또한 연구에서 여러 차트를 찾을 수 있습니다. Fishkin은 아래 차트를 가장 좋아한다고 생각합니다.

이 차트는 4개의 데이터 제공업체 각각을 해당 월에 보고된 Google 애널리틱스 사용자의 30% 이내인 트래픽 측정항목의 비율과 함께 보여줍니다. 웹 사이트는 수신되는 트래픽 양에 따라 세분화되었습니다.

이제 내 질문은: Fishkin이 30%를 선택한 이유는 무엇입니까? 20%나 40%가 아닌 이유는 무엇입니까? 숫자 뒤에 숨겨진 아이디어는 무엇입니까?

이 연구에서 30%라는 백분율을 선택한 이유는 주관적인 것으로 보이며 이 정확한 수치가 선택된 이유에 대한 명확한 설명이 없습니다. 이 연구를 위해 특별히 선택된 임의의 비율입니다.

30%의 편차가 허용되지만 백분율이 감소하거나 증가하면 결과가 어떻게 될지 불확실합니다. 궁극적으로 이 질문에 대한 답은 미스터리로 남아 있습니다.

그런 다음 월간 GA 사용자가 250,000명 이상인 46개 사이트에 대한 제3자 트래픽 추정 범위를 보여주는 차트가 있습니다.

이 차트는 솔직히 무의미하며 사용자에게 가치를 제공하지 않습니다. Google Analytics 데이터를 기반으로 가장 큰 불일치와 가장 작은 불일치를 보여주는 두 특정 웹사이트의 데이터를 비교하기 위한 것입니다. 결론을 도출하는 이 방법은 샘플 크기가 매우 작은 46개 웹사이트만을 기반으로 하기 때문에 매우 신뢰할 수 없습니다.

SEO 커뮤니티의 피드백

Rand Fishkin은 이 연구를 위해 시장에서 가장 인기 있는 SaaS SEO 도구 4개를 사용했습니다. 그만큼 결과에 대한 피드백이 쇄도할 수밖에 없었다.

그리고 SEO 커뮤니티는 실망시키지 않았습니다.

일부 전문가는 연구의 통찰력이 유용하다고 생각했지만 커뮤니티의 많은 부분이 취약한 방법론과 연구에 내재된 편견에 의문을 제기했습니다.

디지털 마케터 Kris Roadruck은 이 연구에서 유기적 방문을 보고하는 도구에 대해 Google Analytics를 벤치마킹하기 위해 세션이나 페이지뷰가 아닌 사용자를 선호하는 지표로 사용했다고 언급했습니다.

세션이나 페이지뷰가 아니라 왜 사용자입니까? 유기적 검색/방문을 보고하는 도구에 대해 벤치마킹할 때 이상한 선택으로 보입니까?

— 크리스 로드럭(@KrisRoadruck) 2022년 11월 22일

그리고 기사 자체에 대한 의견이 있습니다. 한 사용자는 실체가 없는 Ahrefs의 트래픽 데이터를 Semrush 및 Similarweb의 트래픽 데이터와 비교하는 기괴한 방법론에 대해 언급했습니다.

마지막 생각들

Fishkin의 연구는 몇 가지 귀중한 통찰과 정보를 제공하지만 제3자 트래픽 견적의 정확성을 테스트할 때 다른 관점과 출처를 고려하는 것이 필수적입니다.

결과를 다른 도구 및 방법론과 상호 참조하고 하나의 소스에만 의존하지 않는 것이 항상 권장됩니다. 이 경우에는 Similarweb에 편향된 것으로 보입니다.

관련 기사

• SEO 게임 수준을 높이는 최고의 SEO YouTube 채널 11개
• BuzzSumo: 궁극의 가이드(BuzzSumo를 사용하는 18가지 고급 방법)
• 당신에게 영감을 줄 최고의 해군 라비칸트 명언 50개