分析傷害背後的意圖以防患於未然

了解用戶分享兒童剝削性內容的方式及原因,對於打擊此類行為至關重要。

分析傷害背後的意圖以防患於未然

了解用戶分享兒童剝削性內容的方式及原因,對於打擊此類行為至關重要。我們對自己收到舉報的非法內容進行了深入分析,以便充分掌握相關資訊以作出應對。我們運用根據這項研究得出的資料,以部署各項工具和推出不同的新計劃,以縮窄此類可惡素材的散佈範圍。

我們分析了兩個代表性月分當中,Facebook 和 Instagram 向美國失蹤及受虐兒童中心(National Center for Missing and Exploited Children,NCMEC)所舉報的內容。我們的研究發現如下:

  • 這些內容當中超過 90% 都是與先前獲舉報內容相同,或是看起來與後者十分相似。
  • 在研究期間內,光是 6 段影片的副本就佔據了過半數的獲舉報兒童剝削內容。

換言之,許多舉報內容其實都是來自於幾項內容。這讓我們認識到,進一步了解違規用戶的意圖,有助避免兒童再度受害。有鑒於此,我們特地與 NCMEC 及其他防範兒童剝削領域的頂尖專家合作,共同研發經研究佐證的分類方式。此分類方式可以幫助我們將用戶散佈此類內容的表面意圖分門別類。

我們評估了分別在 2020 年 7 月、8 月與 2021 年 1 月上載「兒童性虐待素材」(Child Sexual Abuse Material,CSAM)而遭我們向 NCMEC 舉報的 150 個帳戶。根據評估結果,其中超過 75% 帳戶屬於無惡意,即是用戶無意傷害兒童,而是出於其他原因散佈此類內容,例如出於憤怒或惡趣味。雖然此研究代表了我們目前的最佳理解,但這些研究發現並不能作為兒童安全保護生態系統中的精準評估。我們會繼續努力去了解用戶散佈此類內容的意圖。

我們根據這些研究結果,制定了度身訂造的解決方案,當中包括在 Facebook 部署一個彈出式視窗,藉此減少惡意搜尋此類內容的行為。當用戶搜尋與兒童剝削相關的字詞時,系統便會顯示警告。此彈出通知會提供兒童保護組織的罪犯轉移資源,並分享有關觀看違法內容的後果之資訊。

我們亦部署了一則安全警示,在用戶出於無意傷害兒童的其他原因散佈此類內容時通知他們。這項功能旨在向曾分享包含兒童剝削內容的熱門迷因之用戶發出警示,警告他們散佈該類內容可能會對受害者造成傷害,違反我們的政策,且散佈相關素材會使其面臨法律後果。

另外,我們還與民眾意識專家合作,推動我們的「協助保護兒童」宣傳活動,幫助社會大眾了解無論出於什麼理由,再度分享這些內容都是違法的行為,可能會讓兒童遭受二次傷害。用戶可以舉報這些內容,協助避免造成進一步的傷害。

對於這種惡劣的罪行,一個受害者都嫌多。為此,我們會繼續努力去了解用戶散佈此類內容的意圖。我們會持續針對旗下公開平台與私人訊息功能,推出更多度身訂造的解決方案。