Mi az az llms.txt, és miért érdemes beállítani a weboldalon?

Röviden
Az llms.txt egy Markdown formátumú szövegfájl a weboldal gyökerében, amely a nyelvi modelleknek ad rövid, tiszta összefoglalót az oldalról és a legfontosabb aloldalak hivatkozásairól. Nem hivatalos szabvány, hanem egy 2024-ben közzétett javaslat, és nincs garancia arra, hogy egy adott MI-szolgáltató figyelembe veszi. Elkészítése ugyanakkor kevés munkával jár, ezért a tartalomközpontú oldalakon érdemes elhelyezni.
Mi az llms.txt?
Az llms.txt egy egyszerű szövegfájl, amely a webhely gyökerében, a /llms.txt címen érhető el. A javaslatot 2024-ben tette közzé Jeremy Howard azzal a céllal, hogy a nyelvi modellek (LLM-ek) könnyebben megtalálják egy oldal lényegét.
A kiindulópont az, hogy egy weboldal HTML-kódja tele van menüvel, dizájnelemekkel és szkriptekkel, a modellek viszont egyszerre csak korlátozott mennyiségű szöveget tudnak feldolgozni. Az llms.txt ezt hidalja át: sallang nélkül, tömören elmondja, mi az oldal, és hol találhatók a legfontosabb tartalmak.
Hogyan épül fel a fájl?
A fájl Markdown formátumú, a javaslat szerint kötött sorrendben:
- Egyes szintű címsor a webhely vagy a projekt nevével (ez az egyetlen kötelező elem).
- Idézetblokk egy rövid összefoglalóval arról, mivel foglalkozik az oldal.
- Szabad szöveges rész a további fontos tudnivalókkal, ha szükséges.
- Kettes szintű címsorok alatt hivatkozáslisták: minden sor egy link, mellette rövid leírással.
- „Optional” című szakasz azoknak a hivatkozásoknak, amelyek elhagyhatók, ha a modellnek kevés hely áll rendelkezésére.
Sok oldal egy llms-full.txt nevű változatot is közzétesz, amely nem csupán hivatkozásokat, hanem a teljes szöveges tartalmat tartalmazza egyetlen fájlban.
Miben különbözik a robots.txt és a sitemap.xml fájloktól?
| Fájl | Kinek szól? | Mire való? | Formátum |
|---|---|---|---|
| robots.txt | Keresőrobotoknak | Megmondja, mit szabad bejárni és mit nem | Egyszerű szöveges szabályok |
| sitemap.xml | Keresőrobotoknak | Felsorolja az indexelendő oldalakat | XML |
| llms.txt | Nyelvi modelleknek és MI-ügynököknek | Összefoglalja az oldalt, és a legfontosabb tartalmakhoz vezet | Markdown |
Az llms.txt tehát nem hozzáférést szabályoz. Nem tilt és nem engedélyez semmit: arra továbbra is a robots.txt szolgál. A három fájl kiegészíti egymást.
Kell-e a weboldalra?
Az llms.txt nem kötelező, és a nagy MI-szolgáltatók nem vállaltak egységes kötelezettséget a használatára. Ettől a fájltól önmagában nem várható, hogy egy cég megjelenjen az asszisztensek válaszaiban.
Mégis több érv szól mellette:
- az elkészítése és a karbantartása kevés munkát igényel;
- az MI-ügynökök és a fejlesztőeszközök egy része már keresi és használja;
- a megírása rákényszerít arra, hogy a cég tömören megfogalmazza, mivel foglalkozik;
- ha a javaslat szélesebb körben elterjed, az oldal már készen áll.
Leginkább a sok szöveges tartalmat kínáló oldalakon hasznos: dokumentációknál, tudásbázisoknál, szolgáltatásokat bemutató céges oldalaknál.
Mire figyeljünk az elkészítésekor?
- Automatikus előállítás: a fájl ugyanabból a forrásból készüljön, mint az oldal tartalma, különben hamar elavul.
- Egyezés az oldallal: csak az szerepeljen benne, ami az oldalon is nyilvánosan olvasható.
- Tömörség: a cél az eligazítás, nem a teljes oldal megismétlése.
- Tiszta hivatkozások: teljes, működő URL-ek, mindegyik mellett egymondatos leírással.
- Reális elvárás: az llms.txt kiegészítő, nem helyettesíti a jó tartalmat és a rendezett technikai alapokat.
Gyakori kérdések
Kötelező-e az llms.txt?
Nem. Az llms.txt egy önkéntes, közösségi javaslat, nem hivatalos webes szabvány. Az oldal a keresőkben és az MI-asszisztensekben nélküle is megjelenhet, a fájl csupán megkönnyítheti a nyelvi modellek tájékozódását.
Javítja-e az llms.txt a keresőhelyezést?
Nincs megalapozott ok azt feltételezni, hogy az llms.txt közvetlenül befolyásolná a hagyományos keresők rangsorát. A fájl a nyelvi modelleknek és az MI-ügynököknek szól, nem a találati lista sorrendjét meghatározó rendszereknek.
Hová kell tenni az llms.txt fájlt?
A webhely gyökerébe, hogy a domain neve után közvetlenül a /llms.txt címen legyen elérhető, egyszerű szöveges (Markdown) tartalomként, bejelentkezés nélkül.