ChamsPilot · 方法論

我們如何衡量創作者的真實性

我們為創作者驗證只公布一個實測數字:在對 640 個模擬創作者帳號的盲測中,95% 的「高風險」判定是正確的。本頁說明這項測試如何進行、它能說明什麼、不能說明什麼,以及我們的稽核在哪些情況下讀取官方資料、在哪些情況下進行估算。

多數檢查直接讀取平台自身的資料

ChamsPilot 是 Google、TikTok、Meta 與 X 的官方 API 合作夥伴。當創作者的真實數據可透過這些官方介面取得時,我們直接讀取,而非推斷。

這種情況比多數人以為的更常見。列入平台創作者市集、使用 TikTok One,或曾進行標記為付費合作的創作者,其資料已由平台確認。對這些帳號而言,受眾數字是平台的紀錄,而非我們的估算。

接著由我們的 AI 獨立稽核

平台資料告訴你受眾是什麼,卻無法告訴你互動是否真實。因此每次稽核也會執行我們自己的分析:留言真實性、粉絲組成、互動模式與時間分布,由多個演算法交叉驗證,而非單一評分。

公布的數字衡量的正是這套分析:儀表板內的創作者驗證和 AI 深度檢測所用的判定引擎。它不代表假粉檢測工具頁上的免費基礎檢測,後者使用的是更輕量的啟發式規則。

這個數字背後的盲測

我們建立了 640 個模擬創作者帳號,TikTok、Instagram、YouTube 和 X 各 160 個。其中一半自然成長,並包含最容易讓假粉檢測工具誤判的情況:抽獎活動、粉絲圈、跨界合作、留言關鍵字引導、低互動以及非英語受眾。另一半則透過多種方式灌水:購買粉絲、按讚、觀看次數或留言,互讚群組,以及互追互粉。

判定引擎在測試前已凍結,封存的測試集只執行了一次。下方結果均來自這唯一一次執行。

在這次盲測中,引擎把 640 個模擬帳號中的 166 個判定為「高風險」,其中 157 個確實灌了水:95% 的「高風險」判定是正確的。320 個自然成長帳號中有 9 個被誤判為「高風險」,誤報率為 2.8%。

引擎的設計原則是不冤枉真實創作者,因此判定比能做到的更保守。在 320 個灌水帳號中,157 個(49%)被判定為「高風險」,另有 47 個被標為「需要複核」以便進一步檢查,116 個未被識別。在對同樣 640 個模擬帳號的盲測中加入兩項選用查詢(近期粉絲抽樣和每日粉絲數歷史)後,66% 被判定為「高風險」,且 95% 的判定仍然正確。

這項測試無法說明的是:這些帳號是模擬的,不是真實創作者,而且它們所依據的自然帳號模型與引擎所用的基準來自同一套假設,因此在真實帳號上的結果可能較低。我們正在準備一項以真實帳號進行的基準測試,帳號會在 ChamsPilot 分析之前獨立標註,結果將在本頁公布。

哪些受眾資料屬於估算,以及原因

其餘帳號沒有官方資料可用。我們仍會稽核它們,留言與互動分析方式相同。但有些屬性只能推斷而無法讀取,最明顯的就是受眾地域。

當平台未提供粉絲與觀眾的國家分布時,我們進行估算:將留言時間與各時區活躍度相關聯,並結合我們自建並持續優化的其他訊號。這是估算,我們也如實標註。

沒有任何第三方能比平台本身更了解其使用者資料。宣稱做得到的服務都是在猜測。平台給出真實數字時我們如實顯示;沒有時,我們顯示最佳估算並加以說明。

適用於誰

創作者用它了解並改善自己的數據。看清受眾中哪一部分是真正活躍的,是讓這部分成長的第一步。

品牌、代理商、企業高管與專業人士用它在付款前判斷一位創作者的真實價值:真實觸及、可見數據,以及站得住腳的定價理由。

簡而言之

  • 在對 640 個模擬創作者帳號的盲測中,95% 的「高風險」判定是正確的,2.8% 的自然成長帳號被誤判。
  • 與 Google、TikTok、Meta 與 X 的官方 API 合作在資料存在時提供這些對照。
  • 每次稽核都會疊加我們自己的留言、粉絲與互動分析。
  • 沒有平台資料時,受眾地域為估算,準確率會有差異。
  • 我們絕不把估算當作測量來呈現。
  • 約一半的灌水帳號被判定為「高風險」,另有部分被標為「需要複核」。以真實、獨立標註帳號進行的基準測試將在這裡公布。

免費開始

所有免費創作者工具

切換其他語言閱讀: English 简体中文 Français Español العربية