Если спросить у нейросетей на английском про российский бренд, в ответах почти не будет русскоязычных источников

Моя цель - предложение широкого ассортимента товаров и услуг на постоянно высоком качестве обслуживания по самым выгодным ценам.

Допустим, ваш продукт продаётся в России и за рубежом, и по-русски нейросети уже ссылаются на ваш сайт и статьи. Я проверил, переносится ли это на английский: сравнил, из каких сайтов Google AI Overviews, Perplexity и Алиса AI собирают ответы на русские и на английские вопросы. В Google и Perplexity русских сайтов на английском почти не осталось, хотя регион в настройках Google стоял российский. Видимость по-русски сама в английскую не превратится, её придётся строить отдельно.

Как я посчитал долю русских сайтов в источниках нейросети

Новых запросов я не делал, взял уже сохранённые ответы трёх каналов. Язык вопроса определил просто: английский, если в тексте нет ни одной кириллической буквы. Русским считаю сайт в зоне .ru/.рф/.su (.рф в логах бывает и в записи xn--p1ai, её тоже считаю). Это консервативно: habr.com, vk.com и dzen.ru по зоне в русские не попадают, так что доля у меня скорее занижена.

У Google AI Overviews во всех замерах стояли hl=ru и gl=ru: английские вопросы шли с теми же настройками региона и языка интерфейса, что и русские. Ссылку, сайт которой не опознан, AI Overviews сохраняет как google.com, такие я из расчёта исключил. ChatGPT, Gemini, Claude и GigaChat не брал: английских вопросов по ним набралось от 4 до 14.

Метрика одна: доля источников с доменом .ru/.рф/.su среди опознанных источников. На входе список ответов одного канала, у каждого текст вопроса и домены источников ({"question": ..., "domains": [...]}). В коде метрика выглядит так:

import re

RU_ZONES = (".ru", ".рф", ".xn--p1ai", ".su")  # .xn--p1ai — .рф в punycode


def is_english(question):
    return not re.search(r"[а-яё]", question, re.I)


def ru_share(answers, english, unresolved=()):
    """Доля источников с доменом .ru/.рф/.su среди опознанных источников."""
    ru = total = 0
    for a in answers:
        if is_english(a["question"]) != english:
            continue
        for domain in a["domains"]:
            domain = domain.lower().removeprefix("www.")
            if domain in unresolved:
                continue  # сайт ссылки не опознан
            total += 1
            ru += domain.endswith(RU_ZONES)
    return ru / total if total else None

Для AI Overviews передаю unresolved={"google.com"}, для Perplexity и Алисы AI список пустой. Каждый канал считаю дважды: с english=True и с english=False.

Сколько русских сайтов нейросети берут в источники на английский вопрос

Google AI Overviews на английские вопросы выдал 341 опознанный источник. Русских среди них два, и оба ведут на en.khl.ru, англоязычную версию российского сайта. На русские вопросы с теми же настройками региона доля .ru у того же Google — 76,2% (1 588 из 2 085 источников).

Доля русских сайтов в источниках ответа: русские и английские вопросы в Google AI Overviews, Perplexity и Алисе AI
При тех же настройках региона доля русских сайтов на английском падает почти до нуля у Google и до нуля у Perplexity.

Perplexity оказался строже. На английские вопросы он привёл 1 313 источников и ни одного .ru, хотя на русских у него та же доля, что у Google: 76,2% (6 802 из 8 929).

Пулы при этом разного размера: английских ответов на канал 140–143, русских от 1 164 до 2 157. Английские вопросы пришли из нескольких проектов, работающих на зарубежный рынок, и темы у них другие. Поэтому тему я контролирую парами одного вопроса на двух языках (о них ниже), а картину подтверждает препринт на arXiv.

Вместо русских сайтов в английских ответах стоят англоязычные площадки. У AI Overviews чаще всего встречаются en.wikipedia.org, reddit.com и youtube.com. У Perplexity первым идёт reddit.com со 128 ссылками, за ним youtube.com и linkedin.com.

Что Алиса AI делает иначе с английским вопросом

Алиса AI ведёт себя иначе. На английский запрос четверть её источников (24,9%) лежит в зоне .ru, а хотя бы один русский сайт есть почти в половине ответов. Среди них vc.ru, kontur.ru и rbc.ru. Самый частый домен её английских ответов вообще habr.com, который по моему правилу зоны в русские даже не попал.

На русских вопросах у Алисы AI .ru составляет 80,3%. Падение на английском есть, но русские сайты из её ответов не исчезают. Если вас ищут англоязычные пользователи Алисы AI, русские публикации им ещё видны; в Google и Perplexity — нет.

Что меняется, когда тот же вопрос задан на двух языках

Сравнение пулов смешивает язык и тему: английские вопросы у меня в основном из других ниш. Поэтому я отдельно взял три вопроса о хоккейном клубе КХЛ, которые задавались и по-русски, и в английском переводе.

Один и тот же вопрос о хоккейном клубе на двух языках: какие сайты взяли Google AI Overviews и Алиса AI
Вопрос о проблемах клуба: у Google AI Overviews общих сайтов между языками нет, у Алисы AI их два.

В Google AI Overviews ни в одной из трёх пар нет общего сайта между русской и английской версией ответа. По-русски он ссылается на allhockey.ru, matchtv.ru и русскую Википедию, по-английски на английскую Википедию, reddit.com и facebook.com. Алиса AI на английский вопрос о российской теме отвечает по sports.ru, championat.com и lenta.ru. Общих сайтов в её трёх парах два, четыре и три.

Похожее увидели исследователи из Торонто. В препринте 2025 года на arXiv они перевели 100 запросов на пять языков и сравнили цитируемые домены. У Google пересечение с английской версией в основном от 0 до 0,1, а при неанглийском запросе цитаты смещаются к сайтам на языке запроса. Исследование Search Engine Journal смотрело на бренды, а не на сайты: язык вопроса менял, кого советует модель, в авиабилетах и отелях, а в наушниках и CRM почти не менял.

Как вести замер и площадки, если покупатели спрашивают по-английски

  1. Собирайте ядро вопросов для мониторинга на языке покупателя. Переведённый русский список даст другой ответ с другими источниками.

  2. Английскую версию сайта и публикации на англоязычных площадках (reddit, youtube, профильные ресурсы) планируйте отдельной работой. Русские статьи в английские ответы Google AI Overviews и Perplexity почти не попадают.

  3. Проверяйте видимость в нескольких каналах. Алиса AI покажет русские сайты там, где Perplexity их не покажет. Если проверять только Алису AI, английская видимость покажется лучше, чем она есть в Google AI Overviews и Perplexity.

  4. В отчёте подрядчика спросите, на каком языке задавались вопросы и из каких доменов собраны источники нейросети. Если русские и английские вопросы сложены в одну долю видимости, провал на английском в ней не заметен.

Главное ограничение: английские и русские вопросы в общих пулах в основном из разных ниш, а тему контролируют только три пары. Сайт ссылки в AI Overviews я опознавал сопоставлением с органической выдачей (из 341 источника на английских вопросах у 56 сайт пришёл прямо в ответе выдачи, 275 опознаны сопоставлением с органической выдачей, 10 — по заголовку; нераспознанных google.com среди английских не было), часть доменов могла быть приписана неточно. И в каждой паре по одному ответу на канал, повторов я не делал.

А на каком языке задают вопросы ваши покупатели, и проверяли ли вы ответы нейросетей на нём?

Источник: https://habr.com/ru/articles/1097066/


Интересные статьи

Интересные статьи

Я — Bitrix-разработчик со стажем 8+ лет.Начинал дружить с битрой ещё с версии 12 — когда всё было максимально квадратно, можно сказать что я тот самый "проженный" битриксоид, а любой деплой превращалс...
Привет! Меня зовут Александра, я системный аналитик в компании, которая помогает бизнесу автоматизировать процессы с помощью Битрикс24.В этом кейсе я расскажу о небольшом проекте по внедрению системы ...
Всем привет, случалось такое, что вам надо поставить кучу агентов битрикса на крон, а потом сидеть и разбираться - сколько они отрабатывают, отрабатывают ли вообще, когда падают или зависают? Ну конеч...
Разные компании по-разному оформляют свои политики конфиденциальности — единого формата нет. Подавляющее большинство из них написано тяжелым юридическим языком, поэтому многие даже не пытаются изучать...
Представьте, что вам нужно внедрить файрвол в инфраструктуре предприятия N — крупной компании с сотнями филиалов, несколькими ЦОДами и большим количеством взаимодействий с внешними организациями. Зака...