秋季特賣:在 12 月 24 日之前幾乎所有商品都可享受 20% 的折扣看銷售→
查看所有 402 種產品 超過 35 英鎊的英國免費送貨
wiki 條目 · 11 分鐘閱讀

Ai Crawlers: 為什麼 teas.co.uk 向他們敞開大門

Crawler 是存取網址以收集資訊的軟體。 搜尋引擎使用爬蟲來發現頁面。 人工智慧服務還可以獲取搜尋、回答當前問題或收集培訓材料的頁面。

2026 年 11 月 15 日發布 策展人編寫,非眾包

Crawler 是存取網址以收集資訊的軟體。 搜尋引擎使用爬蟲來發現頁面。 人工智慧服務還可以獲取搜尋、回答當前問題或收集培訓材料的頁面。

茶店的話就是它的商店櫥窗,所以 teas.co.uk 讓表現良好的人工智慧系統閱讀它們並送回買家。 這些目的是不可互換的。 被獲取的頁面並不能證明它被用於答案或有人購買了任何東西。

軟體如何查找商店的資訊

人類可以使用菜單。 軟體可以點擊連結,但清晰的路標會有所幫助。 teas.co.uk 在其普通頁面旁邊發布發現文件。 它的 agents.json 描述可用的服務、內容格式和操作規則。

JSON 是命名資料的格式。 檔案名稱 agents.json 告訴您這家商店在哪裡發布其指南; 它不是每個助手都遵循它的通用證書或保證。

robots.txt 和 llms.txt 做不同的工作

robots.txt 告訴合規爬蟲他們可以要求的位址。 正如 Google 指南 所解釋的,這不是保護私人資訊或保證頁面不會遠離搜尋結果的方法。 存取控制有不同的工作。

llms.txt 是為語言模型系統提供有用內容的簡潔指南的建議公約。 大型語言模型 (LLM) 是許多文本助理背後的那種模型。 發布文件不會強制服務閱讀或推薦業務。

名稱不是身分證明

請求可以包括 user-agent,一個文字標籤,說明是哪個程式正在製作它。 標籤可以複製。 在身分很重要的情況下,網站需要適當的驗證,而不是單獨相信熟悉的名稱。

開放也不意味著提供無限的請求。 服務可以套用 速率限制,控制一個期間可以提出多少請求,並告訴呼叫者何時再試一次。

為什麼區別對商店很重要

teas.co.uk 的故事「我們打開了通往 AI 的大門」解釋了商業推理。 目的是讓有用資訊發現有用資訊,同時將帳戶資訊保密,並由客戶控制。

要了解 Fetch 做了什麼和沒有示範什麼,請閱讀 ai 屬性。 若要查看助理如何主動要求目錄以取得結果,請閱讀 API 和 MCCP。


用我的話來說:大部分的網路都在關閉 AI 的大門,我們打開了我們的

(我自己的帳戶,於 2026 年 11 月 15 日首次發布並搬到這裡,因此主題有一個家。)

出版商正在阻止人工智慧爬蟲來保護他們的內容。 teas.co.uk 讓每個表現良好的助理都了解這家商店,引用它並派買家,其餘的都不讓其餘。

有人要他們的人工智慧助理要一杯濃鬱的早餐茶,它含有牛奶,每杯不到 5 便士。 這是 AI 助理商店頁面上的範例。 為了讓那個人最終得到一盒 teas.co.uk 的好茶,助理必須知道商店的存在,知道它賣什麼並相信它報價。 它只能知道,如果商店讓它閱讀。 所以 teas.co.uk 確實如此,這與我讀過的大多數人都相反。


大多數行業都在關門

如果您閱讀搜尋引擎期刊,或完全關注搜尋和人工智慧,您就會知道這種心情。 建議是防禦性的:哪些人工智慧機器人可以阻止它們,無論是在 robots.txt 還是在伺服器中阻止它們,如何阻止它們在不付費的情況下工作。

路透社發現,到 2023 年底,十個國家的 48% 的最常用新聞網站阻止了 Openai 的爬蟲。 2025 年 7 月,Cloudflare 開始預設為新客戶封鎖 AI Crawlers,除非他們選擇其他方式,並啟動每次抓取的付費,以便網站所有者可以為每個請求收取爬蟲費用。 2026 年 1 月,Search Engine Journal 報導了一項針對 100 個美國和英國頂級新聞網站的 BuzzStream 研究:79% 的至少一個 AI 培訓機器人阻止,71% 的阻止助理用於即時搜索的至少一個機器人。

我明白為什麼。 對報紙來說,文字就是產品。 如果助理閱讀文章,回答問題並發送任何人,出版商已經放棄了它所銷售的東西。 路透社列出了這些擔憂:沒有支付培訓費用,錯誤的答案帶有出版商的姓名,以及永遠不會回來的讀者。 這些都是真正的原因。


為什麼我走另一條路

我賣茶。 產品是一盒Yorkshire Tea或一罐matcha,助手不能透過閱讀來拿走它。 在茶館裡,資訊是商店櫥窗。 產品頁面、釀造指南或 每杯價格 只有在人們看到的情況下才值得。

當我為 2026 年 5 月 10 日上線的第二版重建網站時,我做出了一個其他一切都來自的選擇。 商店向每個表現良好的人工智慧開放,以便盡可能多的助手了解商店,準確引用並引用它。 引文帶來訪客,訪客是銷售的來源。 這就是網站以這種方式建造的全部原因。

還有第二個原因,而且每個月都在成長。 人們不再用三個字問助手。 他們問他們要問櫃檯後面的人:一整天喝一杯濃鬱的早餐茶,加牛奶,一杯不到 5 便士,沒有煙。 我呼叫像這樣的請求 Premium Intent,這是我自 2026 年 6 月以來一直使用這個名稱,用於發送完整的請求,其上下文 constraints、預算和好的結果是什麼樣子。 「高級」描述請求告訴您的費用,而不是費用。 攜帶者的助理需要一個可以完整閱讀和檢查的商店,隱藏或難以閱讀的商店無法回答它,無論它的茶多麼好。

「對報紙來說,文字就是產品。對於茶店來說,文字就是商店櫥窗。我希望每個好的助手都能看穿它。」


什麼是實際開啟的

這一切都是公開的。 我在 2026 年 11 月 14 日讀到它。

robots.txt 命名了一個 AI 爬行者來阻止:由世界上最大的線上商店經營的爬蟲,明天幾乎可以交付任何東西的 Everything 商店。 允許所有其他合規的 AI Fetcher 並直接指向為他們編寫的文件:LLMS.txt、agents.json、ai-entry.json 等。 對所有爬蟲保持關閉的是籃子、結帳、客戶帳戶、網站搜尋和無盡的過濾器組合。

agents.json 將 AI 訓練、人工智慧搜尋和 AI 輸入的所有內容訊號設定為「是」,在一個條件下:引用和屬性 teas.co.uk。 培訓意味著使用頁面建立人工智慧模型; 搜尋和輸入意味著現在閱讀它們以回答某人的問題。 該網站發布了 49,599 個 Citation Anchors,其中一個助理可以準確地引用 3,252 頁。

助手既可以行動也能閱讀。 自 2026 年 10 月 6 日起,助理可以在客戶批准的情況下搜尋目錄,比較茶,裝滿籃子並通過 teas.co.uk MCCP 伺服器 連接一個結帳連結,商店的連接 基於開放模型上下文協定的助手。 AI 頁面列出了可以連接的助手以及如何連接。 上次檢查是在 2026 年 11 月 14 日,OpenAi 仍在審查 ChatGPT 的 teas.co.uk 連線。


打開不等於無人看守

打開門並不意味著讓收銀台無人看管。 這就是公共文件對不良行為者的看法。

打破規則,門關上。 商店檢查請求來自 AI 公司發布的範圍的地址,而不是相信訪客提供的名稱。 這就是它在 2026 年 9 月發現密碼掃描器偽裝成 AI 機器人的方式。

工作範例:透過敞開的門提出早餐茶請求

接受商店頁面上使用 AI 助理的請求:一杯濃鬱的早餐茶,配牛奶,每杯不到 5 便士。 這就是敞開的門如何將它從一個問題帶到一個杯子。

助理找到商店。 robots.txt 讓它進來,llms.txt 和 agents.json 將它指向產品事實,所以它不必猜測他們住在哪裡。

它比較了真正的包。 產品數據給出每個茶的袋子數量、價格和每杯價格。 2026 年 11 月 15 日 5 便士以下的早餐包包括 Yorkshire Tea Original Everyday Blend、80 個茶包(每杯 4.5 便士)、Tetley Original English Breakfast、240 茶 袋子(一杯2.2p)和PG Tips Original,240個茶包(3p 一杯)。 以每杯 5.1 便士的價格出售的一包超強的包裝,例如 Tetley Extra Strong Breakfast Tea、75 茶包,可以以相同的方式與預算進行權衡。 混合物是否強大應該來自每個產品頁面所說的內容,而不是猜測。

它引用了引文。 它可以連結到確切的引文錨,因此人們可以在決定之前查看 teas.co.uk 的價格。

它回來了。 如果此人詢問後續行動,例如 240 包是否有庫存,助理可以返回產品數據,而不是依賴昨天閱讀的內容。

一個人來訪。 該人遵循指向產品頁面的連結。 那是一次訪問,與讀數分開計算。

客戶在 teas.co.uk 上付款。 隨著客戶的推進,透過 MCP 伺服器連接的助理可以裝滿一個籃子,然後交出一個結帳連結。 客戶檢查籃子並支付 teas.co.uk 的費用。 如果付費訂單可以追溯到助理,那就是銷售水平。

每一步都取決於開門。 一個頁面被封鎖的商店會在第一步掉出來,不管它的茶有多好。

購買茶時的意思是

閱讀 teas.co.uk 的助理可以為您提供商店的真實價格、行李數量和每杯價格,而不是猜測它們。 詢問每杯價格和連結,然後在產品頁面上查看。

給出整個要求:牛奶與否,咖啡因與否,您的每杯預算,每天多少杯。 助手知道的越多,它就越能將包大小與你喝茶的方式相匹配。

免費送貨門檻,35 英鎊,在同一個公共數據中,所以助理可以告訴你籃子有多近。


它帶來了什麼,分開計算

A machine reading a page, a person visiting and a customer buying are different events, and Under the Hood never adds them together. Read live on 19 November 2026:

  • Pages served to named AI systems: 242,132, from 2 Jun 2026 to 19 Nov 2026, not counting that refused crawler.
  • Visits from AI answers: 2,811 browser sessions, from 10 May 2026 to 19 Nov 2026.
  • Orders: of 168 paid orders since version two went live on 10 May 2026 (243 since the shop’s first order, 75 of them on version one), 5 arrived on a link carrying an AI assistant’s own tag, 1 probably came through an assistant, and 1 customer told us an assistant sent them. 2 of the tagged orders were later refunded.

The exchange is uneven, which is exactly the publishers’ complaint. Agents naming OpenAI were served 79,318 pages and 1,069 visits came back, about 74 pages for each visit. Cloudflare has measured the same imbalance across the web in the crawl-to-click gap.

Search still does more. Of those version two orders, search engines brought 76, and the origin of 48 could not be traced. Google search clicks rose from about 160 a day in August to 468 a day in November 2026, with no advertising bought. I cannot prove how much of that comes from being easy for machines to read, so I will not claim it.


為什麼網站是這樣的

關於網站運作方式的一切,都來自那扇敞開的門: 一組檢查 一個人、一個搜尋引擎和一個助手都以同樣的方式閱讀的產品事實, 結構數據 每個產品的背後,包括每杯價格,一 問 api 這要求完整的人類要求而不是關鍵字摘要和公共計數規則。

如果你邀請每個助手進來,他們發現的最好是真的。 這就是我所說的真實體背後的商業原因。

「大多數網路都在保護其內容免受人工智慧的影響。我建立了一家茶店,希望被閱讀、引用和推薦,並確保它所說的內容是真實的。」








此帳戶來源

有東西要補充嗎? 登入的客戶可以向 Tea Wiki 提交新增內容,管理員認可,您的姓名在署名上,加上獎勵積分。

登入貢獻
茶筆記和庫存更新

有用的茶筆記,只有在有話要說的時候。

目錄中的庫存到貨、購買筆記和實用指導。 沒有填充物,沒有日常噪音,一鍵取消訂閱。

由家人

時

本月品牌Hyson 季節性品嚐包季節性捆綁包如何運作 本月茶俱樂部策展人挑選的月票 找到你的茶60秒測驗
查看所有 402 種產品