RAM
發布日期:2026 年 7 月 23 日
生效日期:2026 年 6 月 15 日起(第一階段);2026 年 9 月 15 日起(第二階段)
最後更新:2026 年 7 月 23 日
一、公告背景與法律依據
輕之舟百科(CaelLab Wiki)是由虛舟實驗室(CaelLab)運營、社區成員共同建設的開放式網絡百科全書。本站所有內容均由人類編輯者創作、審校和維護,凝聚了社區成員的知識積累與勞動成果。
根據本站輕之舟百科:著作權頁面之規定:
> 在輕之舟百科,你所撰寫的原創內容,著作權歸你所有。你在輕之舟百科發布的文本內容,默認採用 CaelLab BY-SA Content License(以下簡稱"本許可協議")進行授權分發。該許可協議全文見 https://www.caellab.com/license/bysa-content 。
本許可協議第三條明確規定:
> No Additional Restrictions: You may not apply legal terms or technological measures that legally restrict others from doing anything the license permits. > (你不得施加法律條款或技術措施,以法律上限制他人行使本許可協議所授予的權利。)
本公告正是對上述條款的反向適用與保護性聲明:AI 訓練數據抓取行為未經內容創作者知情同意,實質上構成了對原創內容的系統性掠奪,嚴重損害了創作者依據本許可協議所享有的署名權、改編控制權及共享精神。此類行為不僅違反本許可協議的初衷,更破壞了開放知識生態的健康發展。
自 2023 年以來,大量自動化爬蟲程序以"AI 訓練數據收集"為目的,大規模、高頻次地抓取網際網路公開內容,用於訓練大語言模型(LLM)及其他人工智慧系統。輕之舟百科作為堅持人類創作價值的知識平台,決定採取明確措施,禁止一切用於 AI 訓練的爬蟲訪問本站。
二、禁止範圍
第一階段:2026 年 6 月 15 日起生效
以下爬蟲/蜘蛛程序被明確禁止訪問輕之舟百科:
- 專門用於收集 AI 訓練數據的爬蟲程序
- 以"數據集構建""語料收集""模型訓練"等為目的的自動化抓取工具
- 任何在 User-Agent、服務條款或公開說明中披露其 AI 訓練用途的爬蟲
- 已知由 AI 公司運營或為其提供數據服務的爬蟲(包括但不限於 OpenAI-GPTBot、Anthropic-ClaudeBot、Google-Extended、Bytespider、CCBot 等)
第二階段:2026 年 9 月 15 日起生效
以下爬蟲/蜘蛛程序將被納入禁止範疇:
- 混合用途爬蟲:即同時聲稱用於"搜索索引"和"AI 訓練"雙重目的的爬蟲程序
- 以搜索索引為名義、但實際或兼用於 AI 模型訓練的爬蟲
- 未明確區分搜索索引數據與 AI 訓練數據用途的爬蟲
- 搜尋引擎爬蟲中附帶"AI 概覽""AI 摘要""智能回答"等功能的抓取組件
重要說明:混合用途爬蟲即使保留了傳統搜索索引功能,只要其抓取數據被用於或可能被用於 AI 訓練,即屬於本公告禁止範圍。本站不再接受"部分用途合法"的辯解。任何將本站內容用於生成 AI 回答、AI 摘要或 AI 概覽的抓取行為,均構成對本公告及本站使用條款的違反。
三、允許訪問的爬蟲
以下類型的爬蟲在遵守 本站 robots.txt 及訪問政策 的前提下,可以繼續訪問:
- 傳統搜尋引擎爬蟲:僅用於網頁索引和搜索結果展示,明確不參與 AI 模型訓練的爬蟲(如 Googlebot、Bingbot 等,前提是其運營商公開承諾不將本站數據用於 AI 訓練)
- 學術研究機構爬蟲:用於非商業性學術研究,且明確不用於構建商業 AI 模型的爬蟲(需事先向本站申請並獲得書面許可)
- 檔案館/圖書館爬蟲:用於數字保存和公共利益存檔的爬蟲(如 Internet Archive 的 Wayback Machine,需遵守合理抓取頻率)
- 本站授權合作夥伴:經虛舟實驗室書面授權的數據使用方
四、技術措施
本站已實施並將持續升級以下反爬蟲措施:
- robots.txt 聲明:在 robots.txt 中明確禁止已知 AI 訓練爬蟲的訪問,該文件依據 RFC 9309 標準制定,構成本站對自動化訪問者的正式告知
- User-Agent 過濾:基於 User-Agent 字符串識別並攔截已知 AI 訓練爬蟲
- 行為分析攔截:通過流量模式分析識別異常抓取行為(如超高速、大規模、無規律頁面遍歷)
- IP 段封禁:對確認屬於 AI 訓練爬蟲的 IP 地址及 IP 段實施封禁
- 驗證碼挑戰:對疑似自動化抓取工具觸發人機驗證
- 法律追責:對嚴重違規者保留追究法律責任的權利,包括但不限於依據《反不正當競爭法》及《計算機信息系統安全保護條例》提起訴訟
五、合規指引
如果你是爬蟲運營方
- 請仔細閱讀本站的 方針 、 robots.txt 文件 和本頁面公告
- 如你的爬蟲涉及 AI 訓練用途,請立即停止對輕之舟百科的訪問
- 如你認為你的爬蟲被誤攔截,請通過下方聯繫方式提交申訴,說明你的爬蟲用途、數據處理方式及與 AI 訓練的關係
如果你是普通用戶
- 你無需採取任何行動,正常瀏覽不受影響
- 如發現疑似 AI 訓練爬蟲在本站活動,歡迎向管理員舉報
- 支持人類創作,拒絕 AI 洗稿
六、常見問題
Q1:為什麼禁止混合用途爬蟲?
A:混合用途爬蟲聲稱同時用於搜索索引和 AI 訓練,但實際上無法保證數據不被用於 AI 訓練。一旦數據被抓取,內容創作者無法追蹤其後續用途。為避免任何不確定性,本站對混合用途爬蟲採取零容忍政策。此立場亦符合 CaelLab BY-SA Content License 中禁止施加額外限制的精神——AI 訓練抓取實質上是對創作者權利的技術性剝奪。
Q2:這會影響搜尋引擎收錄嗎?
A:不會。傳統搜尋引擎爬蟲(不用於 AI 訓練)仍可正常訪問和索引本站內容。本站歡迎真正服務於信息檢索的搜尋引擎。我們區分"搜索索引"與"AI 訓練"兩種用途,前者促進知識流通,後者在未經許可的情況下構成對創作者權益的侵害。
Q3:AI 搜尋引擎(如 Perplexity、AI 搜索概覽)是否被禁止?
A:是的。任何將本站內容用於生成 AI 回答、AI 摘要或 AI 概覽的抓取行為,均屬於本公告禁止範圍。此類使用方式未能保障原作者的署名權,亦未以相同方式共享衍生內容,違反 CaelLab BY-SA Content License 的核心條款。
Q4:學術引用和合理使用是否受影響?
A:不受影響。人類讀者正常訪問、學術引用、合理使用均不受本政策限制。本政策僅針對自動化爬蟲程序。學術研究如需批量抓取,請按本公告第三節申請書面許可。
Q5:本政策是否具有法律效力?
A:本政策作為本站使用條款的組成部分,具有合同約束力。同時,依據 CaelLab BY-SA Content License,任何使用本站內容的行為均須遵守該許可協議。違規訪問可能構成未經授權的計算機訪問及不正當競爭,本站保留採取法律行動的權利。
Q6:如果 AI 公司已經抓取了我的內容用於訓練,能否要求刪除?
A:可以。根據 CaelLab BY-SA Content License,任何改編或衍生作品必須以相同許可協議分發。AI 模型訓練若使用了本站內容,其輸出應被視為衍生作品,須遵守署名和相同方式共享義務。如發現違規使用,請聯繫 rights@caellab.com,我們將協助你主張權利。
七、聯繫方式
如對本公告有任何疑問,或需要申請爬蟲白名單,請通過以下方式聯繫:
- Wiki:wiki@caellab.com
- 權利:rights@caellab.com
---
本公告依據 輕之舟百科:著作權 及 CaelLab BY-SA Content License 制定。