AI-ügynököknek küldhetünk Markdown-tartalmat HTTP-fejléccel
Az AI-ügynökök számára a Markdown-tartalom kiszolgálása lehetővé teszi, hogy kihagyják a navigációt, stílusokat és szkripteket, közvetlenül a szöveget dolgozzák fel.
A weboldalak tartalmainak kiszolgálása Markdown formátumban az AI-ügynökök számára jelentősen javíthatja a hatékonyságot. Az „Accept: text/markdown” HTTP-fejléc használatával az ügynökök közvetlenül a lényegre fókuszálhatnak, kihagyva a böngészéshez szükséges elemeket, mint a navigáció, stíluslapok vagy szkriptek. (Hacker News)
Ez a megközelítés csökkenti a tokenhasználatot, mivel az AI-modelleknek csak a tiszta prózát kell feldolgozniuk, nem pedig a teljes Document Object Modellt (DOM). Az acceptmarkdown.com szerint ezáltal javul a jel-zaj arány, mivel nincsenek hirdetések, kapcsolódó tartalmak vagy modális ablakok, amelyek zavarhatnák a RAG (Retrieval-Augmented Generation) folyamatot.
A Markdown-tartalom kiszolgálása gyorsabb első tokent és alacsonyabb latenсt eredményez. Kevesebb adat letöltésére és feldolgozására van szükség, mielőtt a modell elkezdené a gondolkodást, ami adatforgalom-megtakarítást is jelent.
A módszer implementálható különböző szerverkonfigurációkban, beleértve a Nginx, Caddy, Cloudflare Workers, WordPress, Discourse, Laravel, Next.js és másokat. Az AI-ügynökök támogatási mátrixa kimutatja, mely ügynökök küldik az „Accept: text/markdown” fejlécet böngészés vagy lekérés során.
A megközelítés olyan szabványokon alapul, mint az RFC 9110 és RFC 7763, valamint a text/markdown MIME típus. A q-values, 406-os hibakódok és a caching kezelése, valamint a Cloudflare „zero-config shortcut” is részét képezik a megvalósításnak.