Oletetaan, että sinulla on kysymys projektista, jossa on GitBook-dokumentit Miten saat tekoälysi lukemaan nämä asiakirjat vastatakseen kysymykseesi? Tason 1 ratkaisu on sanoa "hei Claude, käy katsomassa tätä dokumenttisivustoa ..." Ongelma on, että dokumenteissa on yleensä monta alasivua, ja LLM:si hakee oletuksena enintään 3 tai 4 sivua – mitä se katsoo olennaiseksi. Tämä on tarkoituksellista; Se haluaa säilyttää tokenit ja valita helpoimman/laiskimman tien. Tason 2 ratkaisu: Selaa koko dokumenttikirja. Hanki kaikki tekstit jokaiselta sen sivulta. Sitten liittää se LLM:ään. Tämä Cloudflare-päätepiste hoitaa tämän sinulle helposti, jopa ilmaisella liittymällä. Tee vain Cloudflare-tili. Vaihtoehtoisesti voisit kirjoittaa oman scraperin, mutta tämä ei ole helppoa, koska nykyaikaiset sivut lataavat usein sisältöä javascriptin kautta. On myös muita teknisiä poikkeustapauksia, joita cloud flare hoitaa puolestasi.
Cloudflare Developers
Cloudflare Developers11.3. klo 05.51
Esittelemme uuden /crawl-päätepisteen – yksi API-kutsu ja koko sivusto indeksoitu. Ei käsikirjoituksia. Ei selaimen hallintaa. Vain sisältö HTML:llä, Markdownilla tai JSONilla.
@Zun2025 paras mahdollinen**
291