-
Az OpenAI jelentősen bővíti feltérképező és bot-infrastruktúráját az ünnepi szezonra
Az ünnepi vásárlási időszak közeledtével az OpenAI cég jelentős fejlesztésekbe kezdett feltérképezői és webes botjai infrastruktúrájának bővítése érdekében. Ez a lépés várhatóan nagy hatással lesz a weboldalak forgalmára és a keresőoptimalizációs stratégiákra is. A szakmai közösség számára különösen fontos, hogy tisztában legyenek a változásokkal, hiszen az OpenAI botjai egyre gyakrabban járják majd át a netet, így érdemes megfelelően felkészülni rájuk. Az OpenAI új IP-tartományokat vezet be a botokhoz A Merj elemzői észrevették, hogy az OpenAI több új IP-cím tartományt, úgynevezett /28-as blokkokat adott hozzá a botjaikhoz. Ryan Siddle, a Merj szakértője LinkedIn-oldalán arról számolt be, hogy az OpenAI infrastruktúráját egyre nagyobb mértékben bővítik a hálaadás és a fekete péntek előtti…
-
Cloudflare blokkolja Perplexity-t a weboldalak másolásával kapcsolatos csalások miatt
Cloudflare legújabb bejelentése szerint a Perplexity nevű keresőmotor crawlerei letiltásra kerültek, mivel a cég több felhasználói panasz alapján megállapította, hogy a Perplexity nem tartotta be a robots.txt protokollt, és agresszív módon próbált bejutni a weboldalakra. A Cloudflare Verified Bots Program keretében a botoknak meg kell felelniük bizonyos irányelveknek, amelyek közé tartozik a robots.txt szabályainak betartása, ellenkező esetben elveszíthetik a megbecsült státuszukat. A Perplexity viselkedése A Cloudflare felfedezte, hogy a Perplexity crawlerei különféle taktikákat alkalmaztak a blokádok megkerülésére, például forgó IP-címeket és a felhasználói ügynökök hamisítását. Az egyik módszerük az volt, hogy váltogatták az IP-címeket, így elkerülhették a korlátozásokat. Ezen kívül a Perplexity a felhasználói ügynököket is manipulálta, megpróbálva úgy feltüntetni…
