Kuidas tehisintellektuaalvõrgustik sisu leidmist ümber kirjutab: Otsingurivist kuni allikate otsinguni

Intro

Aastakümneid põhines veeb lihtne tehing: avalda sisu, lase end krabida, teeni koht otsingurivisjonis ja liiklus järgneb. Lingid, autoriteet, kiirus, märksõnad - hoovad olid teada, mäng läbipaistev. Nähtavus tähendas avastamist. Avastamine tähendas kasvu.

Täna on see leping vaikselt lahustumas.

AI-mootorite ja genereeriva mootori optimeerimise tõus - ChatGPT, Perplexity, Claude ja nende sugulased - kujundab ümber, kuidas teavet otsitakse, sünteesitakse ja esitatakse. Tehisintellekt ei juhi enam kasutajaid teie lehekülje poole. See vastab neile otse. See loeb, mõistab ja parafraseerib - sageli ilma klikkimata. Selles uues maailmas ei võitle teie sisu positsiooni eest. See võitleb arusaamise eest.

Ja kui tehisintellekt ei suuda teie teavet hõlpsasti analüüsida, kontekstualiseerida ja usaldada? Te ei jää lihtsalt maha. Te kaovad.

Hüvasti, edetabelid. Tere tulemast tagasi.

Vanad otsingumootorid toimisid dokumentide indekseerimise teel. Nad salvestasid veebi hetkekaadreid, reastasid need autoriteedi ja asjakohasuse järgi ning saatsid kasutajaid edasi. Generatiivsed mootorid toimivad teisiti. Nad koostavad mitmest allikast kombineeritud vastuseid. Nad võtavad proovi, järeldavad ja sünteesivad. Selles maailmas ei ole nähtavus seotud positsiooniga leheküljel. Küsimus on selles, kas masin valib usaldusväärse materjali, kui ta konstrueerib vastuse.

See on halastamatu muutus. Sisu, mis ei ole struktureeritud, kokkuvõtlik ja masinate poolt kergesti seeditav, võidakse käsitleda müra. Või mis veelgi hullem, üldse mitte esile tuua.

Tegelikkuses on otsimine edestanud edetabelit. Ja enamik veebisaite ei ole sellele järele jõudnud.

Inimestele - ja masinatele - mõeldud võrk

Selle muutuse keskmes on vaikiv probleem: veebisaite ei ole kunagi loodud sellise lugeja jaoks.

Need on täis JavaScript'i, koormatud kujunduslike võimlemisvõtetega, koormatud UX-ehitustega, mis pimestavad inimesi, kuid hämmastavad parsereid. Genereeriv mootor vajab puhast, struktureeritud ja kontrollitavat teavet - ja seda kiiresti.

Aga tänapäeval ei ole mingit emakeelset signaali, mis ütleks: "Siin on mõttekas osa. Siin on see, mida võite usaldada."

Sellesse tühjusse tekkisid sellised algatused nagu llms.txt: rohujuuretasandi katse pakkuda masinasõbralikku kokkuvõtet saidi juurest. Lihtne Markdown, millest on eemaldatud kõik segavad elemendid, pealkirjad, kokkuvõtted ja peamised lingid. Märkus mööduvale tehisintellektile: siin on oluline.

Samal ajal on esile kerkinud ambitsioonikamad raamistikud, nagu Anthropic's Model Context Protocol (MCP), mis määratlevad tegeliku protokolli, mille abil tehisintellekti agendid saavad reaalajas pärida serveritelt reaalajas andmeid, millele on luba antud. MCP ei ole spekulatiivne; seda on juba kasutusele võetud, kusjuures OpenAI on ühinenud Anthropiciga, kes seda toetab.

Eesmärk on selge: struktureerida veebi masinate jaoks, mis ei roomata - nad vestlevad.

Lootustandvatest vihjetest ametlike kanaliteni

Mitmes mõttes peegeldab llms.txt varase veebi DIY-vaimu: lihtne lahendus, mis võetakse kiiresti kasutusele ilma standardikomiteedele ootamata. Sellel ei ole ametlikku valideerimist, ei ole versioonimist. Selle edu sõltub heast tahtest - et tehisintellekti mootorid märkavad seda, analüüsivad seda ja austavad selle sisu.

MCP seevastu on välja töötatud täieliku protokollina: versioonitud, spetsifitseeritud, dokumenteeritud. See kujutab ette tulevikku, kus veebisaidid avaldavad tehisintellektiagentidele taotluse korral kontrollitud viilud elavat teavet, mille kohta on olemas atribuutsioon, konteksti kujundamine ja kaitsemeetmed. Selle asemel, et kraapida vananenud lehekülgi, võiks tehisintellektuaal esitada struktureeritud küsimusi struktureeritud lõpp-punktidele.

Sellised ettevõtted nagu Sourcegraph ja Block (Square) näitavad, kuidas see võiks välja näha: reaalajas toimuv autentitud, koostööl põhinev teadmussiire saitide ja genereerivate süsteemide vahel.

See ei ole enam roomikute võrk. See on muutumas vestlusvõrguks. Ja sellised protokollid nagu MCP viitavad sellele, et lähitulevikus on saitidel kaks API-d: üks inimestele ja teine masinatele.

Kaasamise hind

Loomulikult on ka üks konks: nähtavus MCP ja sellega seotud raamistike kaudu ei ole tasuta.

Otseandmete avalikustamine nõuab tasakaalu kiiruse, turvalisuse ja brändi turvalisuse vahel. Tekib uus riskikalkulatsioon: kui palju te avalikustate? Kuidas tagada, et teie andmeid ei tsiteerita või kasutata vääralt? Protokollid, nagu MCP, võimaldavad piiritletud päringuid, metaandmete jõustamist ja konteksti omistamist - kuid osalemine nõuab siiski usaldust, valvsust ja valmisolekut kohandada oma infrastruktuuri masintarbimise jaoks.

Kuid enamiku veebisaitide puhul on alternatiiv halvem: nähtamatus.

Kui teie teave ei ole kergesti struktureeritud, kokkuvõtlik ja leitav, jääte üha enam kõrvale tehisintellekti poolt genereeritud vestlustest - alates tootesoovitustest kuni ekspertide tsiteerimiseni.

Uue veebipresentatsiooni loomine

Selles uuel ajastul kuulub edu saitidele, mis on mõeldud korraga kahele sihtrühmale.

Nad võtavad omaks masinloetavad kokkuvõtted, puhta semantilise korralduse, faktilise selguse ja läbipaistvad autoriteedimärgid. Nad kasutavad uusi standardeid, nagu llms.txt ja MCP, mitte kui kohustust, vaid kui võimendavat vahendit.

Tööriistad juba aitavad. Sellised lahendused nagu Geordy automatiseerivad tehisintellekti jaoks optimeeritud struktureeritud väljundite - alates llms.txt-failidest kuni YAML-skeemideni - genereerimist, andes veebisaitidele võimaluse kujundada oma masinale suunatud narratiivi ennetavalt, selle asemel et loota, et seda tõlgendatakse õigesti.

Sest tehisintellekti veebis ei ole lootus strateegia.

Uued nähtavuse tingimused

Veeb on killustunud: üks versioon inimestele, teine masinatele. Ja viimase jaoks kirjutatakse alles reegleid.

Täna on tehisintellekti jaoks struktureeritud kihi kasutuselevõtt vabatahtlik, homme võib see olla juba lauaeesmärgiks.

Selle vaikiva protokolli sõja võitjad ei ole kõige valjemad kaubamärgid. Nad on need, kelle teave voolab puhtalt masinate mõtetesse, sest nad tunnistasid varakult: tehisintellekti veebis on arusaadavus võimsam kui populaarsus.