RUEN
барлық мақалалар

Қазақстандық сайтқа шын мәнінде кім кіреді: сервер журналдарының 11 күні

ИИ аралаушылары туралы әдетте сырттай әңгіме айтады, ал біз өз серверіміздің журналдарына үңілдік. Он бір күн, 22 тамыздан 1 қыркүйекке дейін, әр аралаушының атымен сұрау санын санадық. Сайт қазақстандық, беттер саны ондаған мың, тақырыбы — қызметтер

аралаушыкімдікі11 күндегі сұрау11 күннен қанша күн
ClaudeBotAnthropic25 4349
AmazonbotAmazon24 6977
GooglebotGoogle, іздеу13 39111
YandexBotЯндекс, іздеу10 90611
GPTBotOpenAI, оқыту6 6006
meta-externalagentMeta4 5418
OAI-SearchBotOpenAI, іздеу3 04510
ApplebotApple2 0067
ChatGPT-Userчаттан өту77611
bingbotMicrosoft, іздеу39211
PerplexityBotPerplexity1227

Бірден көрінетін үш нәрсе

ИИ аралаушылары іздеу жүйелерінен озып кетті. ClaudeBot жалғыз өзі Googlebot пен YandexBot қосылғаннан да көп сұрау жіберді. Бір жыл бұрын журналда мұндай жол мүлде болған жоқ

Bing дерлік кірмейді. 392 сұрау — Google-дің 13 391-іне қарсы, айырмашылығы 34 есе. Copilot жауаптарына түскісі келетін сайт үшін бұл бөлек жұмыс: Bing сыртқы сілтемелер апаратын жерге барады, ал бізде олар дерлік жоқ

ChatGPT-User — тізімдегі артында тірі адам тұрған жалғыз жол. Оның артында чат жауабындағы сілтеме арқылы өту тұр. Он бір күнде 776 кіру моделдің жауабы тірі адамдарды әкеле бастағанын көрсетеді, тек модельдің өзі оқып қана қоймайды

Мұны сайт иесі не істеуі керек

robots.txt файлыңызды атап-атап тексеріңіз. Барлық аралаушыларға ортақ ереже белгілі бір аралаушыға рұқсат бар дегенді білдірмейді: көптеген сайт біреудің файлын көшіріп алып, өзі байқамай GPTBot пен ClaudeBot-ты жауып тастайды. ИИ жауаптарына түскіңіз келсе, осы атаулар анық ашық тұруы керек

Олар қандай мекенжайларды сұрайтынын қараңыз. Аралаушы тек беттерді емес, стильдерді, суреттерді және скрипттерді де алады — соларсыз ол бетті құрастыра алмайды және жауапта суретті көрсете алмайды. Жабық стиль қалтасы көрінгеннен қымбатқа түседі

Және өз сандарыңызды өзіңіз санаңыз. Сервер журналы қолда бар, тек User-Agent жолындағы атауларды санау керек. Тәртіпті көру үшін он бір күн жетеді