Tedd webhelyedet ügynökkésszé: Crawlerek, llms.txt, strukturált adatok és kereskedelmi protokollok
Gyakorlatias, hype-mentes útmutató webhelyek AI-ügynökökre való felkészítéséhez helyes crawler-szabályokkal, llms.txt-vel, strukturált adatokkal, MCP-vel, ACP-vel, UCP-vel és mérhető eredményekkel.

A vállalkozások által feltett kérdés a láthatóságról változik. Korábban az volt, hogy „Hogyan kerüljünk magasabbra a Google-ban?” Most gyakran az, hogy „Miért ajánl egy AI-asszisztens versenytársat helyettünk?” A kereskedelmi oldalak esetében a tét nagyobb: egy ágens összehasonlíthat termékeket, árakat, elérhetőséget, szállítási feltételeket és irányelveket, mielőtt egy ember valaha is felkeresné a kezdőlapot.
Ez nem teszi elavulttá a hagyományos SEO-t. Csupán egy újabb olvasót ad a weboldalhoz: egy szoftvert, amely egy személy nevében cselekszik. Egy ágenst nem érdekel egy hős animáció. Az számít, hogy hozzáfér-e az oldalhoz, megérti-e az adatokat, azonosítja-e a kanonikus forrást, és biztonságosan végrehajtja-e a kért műveletet.
Az ágens-kész weboldal gyakorlati meghatározása: egy gép képes megbízható információkat felfedezni, azokat találgatás nélkül értelmezni, és támogatott műveleteket használni anélkül, hogy megkerülné az üzleti szabályokat.
Rengeteg hype övezi ezt a témát. Egyes szállítók az „ágens-készséget” egyetlen szövegfájl közzétételére redukálják. A valódi munka strukturálisabb. Néhány változtatást érdemes most elvégezni; mások csak akkor van értelme, ha az ágensvezérelt kereskedelem valódi akvizíciós csatornává válik a vállalkozás számára.
Mit Változtat Meg Az „Ágens” Jelleg
Évekig a domináns út kiszámítható volt: egy személy keresett, megnyitott néhány linket, összehasonlította a lehetőségeket, és döntött. A weboldalnak ki kellett érdemelnie a kattintást, és meg kellett győznie a látogatót az érkezés után.
Az ágensek összenyomják ezt az utat. Egy személy kérhet „egy VPS-t harminc dollár alatt havonta, Európában hosztolva, egyértelmű biztonsági mentési feltételekkel” vagy „egy részvételre szánt koszorút, amely ma kiszállítható”. Az ágens több forrást is megvizsgálhat, elutasíthatja a hiányos ajánlatokat, és egy rövid listával térhet vissza. Az ember először az összefoglalót látja, és csak a végső jelölteket keresheti fel.
Ez megváltoztatja az optimalizálás kérdését. A forgalom továbbra is számít, de ugyanúgy számít a gép által olvasható pontosság, a forrás tekintélye és a cselekvésre készség. Egy oldal, amely kiválóan néz ki, de az árát egy képben rejti el, ellentmond a strukturált adatainak, vagy nem rendelkezik egyértelmű szállítási politikával, nehezen nyeri el mind az ágensek, mind az ügyfelek bizalmát.
Első lépés: A feltérképező robotok hozzáférésének helyes auditálása
Mielőtt új protokollokat adnál hozzá, ellenőrizd a robots.txt-t, a CDN robotvezérlőit, a tűzfalszabályokat és a szervernaplókat. Egy feltérképező robot nem tud olyan oldalt használni, amelyet nem tud letölteni. De ne kezelj minden AI-hoz kapcsolódó felhasználói ügynököt úgy, mintha ugyanazt a célt szolgálná.
Az OpenAI dokumentációja külön vezérlőket ír le az OAI-SearchBot és a GPTBot számára. Az OAI-SearchBot a webhelyek ChatGPT keresésben való megjelenítéséhez kapcsolódik, míg a GPTBot a feltérképezett tartalom alapmodellek képzéséhez való felhasználását szabályozza. Egy webhely engedélyezheti az előbbit, miközben tiltja az utóbbit. Ezek független irányelvi döntések.
A Google Google-Extended vezérlője is gondos megfogalmazást igényel. Ez egy robots.txt vezérlő token, nem pedig egy külön HTTP feltérképező felhasználói ügynök, és a Google kijelenti, hogy nem befolyásolja a webhely Google Searchben való szerepeltetését vagy rangsorolását.
Egy tudatos irányelv például így nézhet ki:
User-agent: OAI-SearchBot
Allow: /
User-agent: GPTBot
Disallow: /
Ez a példa nem univerzális ajánlás. A jogi, licencelési, adatvédelmi és kereskedelmi követelmények eltérőek. A lényeg az, hogy a döntést tudatosan hozd meg, ahelyett, hogy egy biztonsági bővítmény régi általános szabályát örökölnéd.
Mit érdemes ellenőrizni
- A fontos nyilvános oldalak
200-as kódot adnak vissza cookie-k vagy JavaScript nélkül. - A
robots.txttükrözi a vállalkozás tényleges kereső- és AI-irányelveit. - A CDN nem kényszeríti a legitim robotokat interaktív CAPTCHA kitöltésére.
- A kanonikus URL-ek feltérképezhetők, és nem irányítanak át szükségtelen nyomkövető linkeken keresztül.
- A szervernaplók megerősítik, hogy a releváns robotok elérik a termék-, szolgáltatás- és irányelvoldalakat.
A leíró réteg: llms.txt varázslatos állítások nélkül
Az llms.txt javaslat egy Markdown fájlt ír le a domain gyökerében, amely kurált térképet ad a nyelvi modelleknek a hasznos tartalmakról. Azonosíthatja a szervezetet, elmagyarázhatja, mit nyújt az oldal, és rámutathat a hiteles dokumentációkra, irányelvekre, termékekre vagy API-referenciákra.
Azért hasznos, mert a weboldalak gyakran sok átfedő üzenetű oldalt tartalmaznak. Egy tömör térkép irányíthatja az ügynököt a vállalkozás által kanonikusnak tekintett források felé. Különösen ésszerű technikai termékek, dokumentáció-intenzív szolgáltatások és API-val rendelkező oldalak esetén.
Azonban nem bizonyított rangsorolási rövidítés az AI-hivatkozásokhoz. A /llms.txt közzététele nem javítja ki a nem elérhető oldalakat, gyenge termékadatokat, ellentmondásos árakat vagy hiányzó strukturált adatokat. Kezelje alacsony költségű, gépi orientált dokumentációként, nem pedig a technikai SEO helyettesítőjeként.
Egy minimális fájl egyszerű lehet:
# Example Company
> A short, factual description of the business and its market.
## Products
- [Product catalog](https://example.com/products)
## Policies
- [Delivery](https://example.com/delivery)
- [Returns](https://example.com/returns)
## Support
- [Contact](https://example.com/contact)
Írja kézzel, vagy ellenőrizze alaposan a generált kimenetet. Egy oldaltérkép-generátor tudja, mely URL-ek léteznek; nem tudja, mely oldalak kereskedelmileg fontosak, jogilag hitelesek vagy biztonságosak egy ügynök számára.
Mi a helyzet az agents.md-vel?
Az agents.md hasznos lehet szoftververzió-kezelő rendszerekben, mivel konvenciót biztosít a kódoló ügynökök számára a projekt utasításainak átadásához. Nyilvános kereskedelmi weboldalakon azonban nem egy univerzálisan elfogadott felderítési szabvány, mint a robots.txt vagy a Schema.org.
Egy vállalkozás továbbra is közzétehet gépek számára készült műveleti dokumentációt, de nem szabad feltételeznie, hogy a külső ügynökök automatikusan felfedezik vagy betartják a gyökérkönyvtárban lévő /agents.md fájlt. A műveleti képességeket jobb azon protokollon vagy API-n keresztül leírni, amely ténylegesen elérhetővé teszi azokat, a hitelesítéssel, engedélyekkel és hibakezeléssel együtt. Ha megtartasz egy agents.md fájlt, kezeld kiegészítő dokumentációként, ne az integráció alapjaként.
Az adatréteg: A strukturált adatoknak tükrözniük kell a valóságot
A leíró réteg megmondja a gépnek, hová nézzen. A strukturált adat segít értelmezni, amit talál. Kereskedelmi oldalak esetében ez általában a megfelelő Schema.org típusokat jelenti, mint a Product, Offer, AggregateRating és BreadcrumbList, olyan mezőkkel, amelyek valóban megegyeznek a megjelenített oldallal és a háttérrendszer állapotával.
A kulcsfontosságú kifejezés a valóság tükrözése. Az ár, a pénznem, az elérhetőség, az állapot, a szállítási információ és az értékelések összesítése nem lehet ellentmondásban a látható HTML, JSON-LD, adatcsatornák és a fizetési folyamat között. Az az ügynök, amely ellentmondó tényeket lát, nem tud megbízhatóan ajánlani vagy tranzakciót végrehajtani.
A strukturált adatok nem korlátozódnak a boltokra. Szolgáltató vállalkozások tisztázhatják a szervezeti adatokat, a szolgáltatási területeket, a GYIK-et, a kapcsolattartási pontokat és az oldalak közötti kapcsolatokat. A cél nem az, hogy minden lehetséges tulajdonságot hozzáadjunk, hanem hogy a fontos tényeket egyértelművé, naprakésszé és belsőleg konzisztenssé tegyük.
Megbízható termékadat-ellenőrző lista
- Stabil termékazonosítók és kanonikus URL-ek
- Aktuális ár és pénznem
- Változatonkénti elérhetőség
- Pontos képek és leíró alternatív szöveg
- Szállítási, visszaküldési és lemondási feltételek
- A látható véleményekkel egyező értékelésszám
- Konzisztens adatok a HTML-ben, sémában, hírcsatornákban és API-kban
A műveleti réteg: MCP, ACP, UCP és AP2
A strukturált oldalak segítenek az ügynöknek megérteni az ajánlatot. A protokollok és API-k lehetővé teszik az ellenőrzött műveletek végrehajtását. Ezek a technológiák átfedik egymást, de nem felcserélhetők.
MCP: eszközök és kontextus, nem önálló kereskedelmi rendszer
A Model Context Protocol egy általános protokoll AI alkalmazások eszközökhöz és adatforrásokhoz való csatlakoztatására. Egy kereskedelmi implementáció képes eszközöket biztosítani termékkereséshez, készletellenőrzéshez, kosár létrehozásához vagy támogatási lekérdezésekhez, de az MCP önmagában nem határozza meg a teljes kereskedelmi életciklust. A vállalkozás továbbra is felelős a hitelesítésért, engedélyezésért, érvényesítésért, árképzési szabályokért és naplózásért.
ACP: kereskedelmi infrastruktúra a ChatGPT számára
Az OpenAI az Agentic Commerce Protocol-t a kereskedők és vásárlók közötti infrastruktúraként írja le a ChatGPT-ben. A kereskedői integrációs modell lefedi a termékfelfedezést és a kereskedelmi folyamatokat, miközben a kereskedő felelősségében hagyja a hiteles katalógusadatokat és a rendeléskezelést. Ez akkor számít, ha a ChatGPT szándékos értékesítési csatorna, nem csupán azért, mert egy webhely meg akar jelenni az AI-válaszokban.
UCP: szélesebb kereskedelmi életciklus
A Universal Commerce Protocol építőelemeket határoz meg az ügynöki kereskedelemhez a felfedezés, a kosár, a fizetés, az azonosítás összekapcsolása, a rendelések és a vásárlás utáni támogatás területén. A specifikációt úgy tervezték, hogy együttműködjön a meglévő szállítási protokollokkal és kapcsolódó szabványokkal, beleértve az MCP-t és az AP2-t.
A Shopify jelenlegi ügynöki kereskedelem dokumentációja UCP-alapú élményeket és UCP-kompatibilis MCP-kiszolgálókat ír le a felfedezés, a kosár, a fizetés és a rendelési munkafolyamatokhoz. Ez egy platformképesség, nem pedig engedély arra, hogy feltételezzük, hogy minden üzlet automatikusan konfigurálva, jogosult és elérhető minden ügynökcsatornán. A kereskedőknek továbbra is ellenőrizniük kell a tényleges beállításaikat és az adatok minőségét.
AP2: ellenőrizhető fizetési engedélyezés
Az Agent Payments Protocol (AP2) az engedélyezési rétegre összpontosít: arra, hogy a felhasználó hogyan biztosíthat ellenőrizhető szándékot egy ügynök által közvetített fizetéshez. Kiegészíti a kereskedelmi protokollokat; nem helyettesíti a kereskedő fizetési folyamatát, csalás elleni védelmét, fizetési feldolgozóját vagy rendelési rendszerét.
Ne vezess be egy protokollt csak azért, mert a rövidítése divatos. Akkor vezess be, ha egy támogatott ügynökcsatorna mérhető értéket tud teremteni, és a vállalkozás biztonságosan tudja kezelni az így keletkező rendeléseket.
Mi a reális a Shopify, WooCommerce és egyedi fejlesztések esetén?
Shopify
A Shopify gyorsan halad az ügynöki kereskedelem terén, és dokumentált építőelemeket biztosít a termékfelfedezéshez és a tranzakciós folyamatokhoz. A kereskedőknek először biztosítaniuk kell, hogy a Shopifyban lévő termék-, készlet-, piac-, szállítási és irányelvi adatok teljesek legyenek. A platform támogatása csak akkor értékes, ha az alapul szolgáló katalógus megbízható.
WooCommerce
A WooCommerce lehetővé teszi a webhely tulajdonosa számára a webgyökér és a REST-infrastruktúra feletti irányítást, így az llms.txt közzététele, a séma javítása vagy egy dedikált integráció kiépítése technikailag egyszerű. A nehezebb rész az üzemeltetés: bővítményütközések, gyorsítótárazás, biztonsági szabályok, változatos adatok és olyan kiterjesztések, amelyek mindegyike azt hiszi, hogy ő birtokolja ugyanazt a mezőt.
Egy kis katalógus esetén a helyes robot-hozzáférés, séma, hírcsatornák és irányelv-oldalak nagyobb értéket képviselhetnek, mint egy egyedi tranzakciós protokoll. Egy egyedi végpont akkor válik ésszerűvé, ha a termékmennyiség, a rendelési gyakoriság vagy egy stratégiai partneri csatorna indokolja a karbantartási költséget.
Egyedi platformok
Egy egyedi alkalmazás biztosítja a legnagyobb kontrollt: élő katalóguslekérdezések, célzott eszközök, precíz jogosultságok és konzisztens megfigyelhetőség. Ugyanakkor a legnagyobb felelősséget is jelenti. Minden végponthoz hitelesítés, sebességkorlátozás, bemenet-ellenőrzés, idempotencia, auditnapló, biztonságos hibakezelés és verziókezelési irányelv szükséges.
A legjobb egyedi architektúra nem engedi, hogy egy ügynök közvetlenül az adatbázisba írjon. Ehelyett szűk üzleti műveleteket tesz elérhetővé, mint a search_products, check_inventory, create_cart vagy request_quote, és ugyanazokat a szabályokat alkalmazza, amelyeket a felhasználói felület is használ.
Ésszerű megvalósítási sorrend
Ha egy meglévő webhelyet készítenénk fel ügynökökre, a következő sorrendben dolgoznánk:
- Auditálja a hozzáférést. Ellenőrizze a robotok szabályait, a CDN kihívásokat, az átirányításokat, a kanonikus oldalakat és a szervernaplókat.
- Javítsa a forrásadatokat. Tegye konzisztenssé az árakat, elérhetőséget, azonosítókat, irányelveket és kapcsolatfelvételi adatokat.
- Ellenőrizze a strukturált adatokat. Tesztelje a tényleges termék- és szolgáltatásoldalakat, ne csak a sablonokat.
- Hozzon létre egy gondosan összeállított
llms.txtfájlt. Irányítsa az ügynököket a hiteles, kereskedelmileg fontos oldalakra. - Dokumentálja a műveleteket. Határozza meg, mit olvashat vagy tehet egy ügynök, beleértve a hitelesítést és a hibakezelést.
- Csak valós csatornához adjon protokollokat. Építsen ACP, UCP, MCP vagy fizetési integrációt, ha a terjesztési lehetőség indokolja a termelési üzemeltetést.
- Folyamatosan figyelje. Kövesse nyomon a robotok hozzáférését, az eszközhibákat, az elavult adatokat, a megszakított műveleteket és a befejezett eredményeket.
Figyelje meg, mi nem áll az első helyen: a divatos fájl vagy protokoll. Az ügynök-készenlét a megbízható oldalakkal és adatokkal kezdődik. A gépi kiegészítések ezt az alapot erősítik; nem helyettesíthetik.
Hogyan ellenőrizze, hogy a munka megtérül-e
Ne csak azt mérje, hogy létezik-e /llms.txt. Kövesse nyomon azokat az eredményeket, amelyek összekapcsolják a megvalósítási munkát a láthatósággal és a bevétellel:
- AI robotok kérései és válaszminősége a szervernaplókban
- Emlegetések és hivatkozások reprezentatív ügyfélkérdésekre
- Hivatkozási forgalom AI keresőkből és asszisztens termékekből
- Termékfeed-hibák és sémaérvényesítési hibák
- Ügynökeszközök sikeressége, késleltetése és megszakítási aránya
- Támogatott érdeklődők, kosarak, rendelések és bevétel
- Helytelen ajánlások elavult vagy félreérthető adatok miatt
Ez egy visszacsatolási hurkot is létrehoz. Ha az ügynökök ismételten olyan információkat kérnek, amelyeket a webhely nem tesz egyértelműen elérhetővé, az nem csak AI-probléma. Az emberi ügyfelek valószínűleg szintén nehezen találják meg.
Őszinte végeredmény
Az ügynöki web valóságos, de a legtöbb vállalkozásnak ma még nincs szüksége minden protokollra. Szükségük van egy olyan webhelyre, amelyben a gépek és az emberek is megbízhatnak: hozzáférhető kanonikus oldalak, pontos strukturált adatok, egyértelmű irányelvek és konzisztens háttérrendszeri tények.
Kezdd itt. Add hozzá az llms.txt fájlt mint gondozott dokumentációt, ne rangsorolási ígéretként. Kezeld az agents.md fájlt opcionális konvencióként, ne univerzális webes szabványként. Építs tranzakciós integrációkat csak akkor, ha létezik támogatott csatorna és üzleti eset.
A nem látványos alap az, ami minden mást lehetővé tesz. Egyszerre javítja a keresést, a hozzáférhetőséget, az integrációkat, az ügyfélbizalmat és a jövőbeli ágens munkafolyamatokat.
Ha szeretnéd látni, hogy egy ágens valójában mit ért meg és mit tud tenni a weboldaladon ma, a DigiForge el tudja végezni a feltérképező hozzáférés, a strukturált adatok, a gépek számára készült dokumentáció, a termékadatok és a tranzakciós felkészültség auditját. Kapsz egy rangsorolt megvalósítási tervet, nem pedig egy halom divatos fájlt.


