Что может нейросеть для анализа данных

Нейросеть для анализа данных берёт на себя ту часть работы, которая требует знать формулы и инструменты: пишет формулы и код, предлагает структуру сводной таблицы, чистит данные, строит графики и готовит текст отчёта. Решение о том, что значат цифры, остаётся за человеком.

ЗадачаЧто делает нейросетьЧто проверить
Формулы ExcelПишет формулу по описанию, объясняет чужуюРезультат на нескольких строках вручную
Сводные таблицыПредлагает, что в строки, что в столбцы, как группироватьИтоги совпадают с исходными суммами
Очистка данныхНаходит дубли, пустые и разнобойные значенияЧто именно удалено или изменено
Поиск закономерностейВыделяет выбросы, тренды, группыНе случайность ли это и нет ли ошибки в данных
ГрафикиПодбирает вид графика, пишет код или шагиПодписи осей, единицы, масштаб
ОтчётПишет выводы по готовым цифрамКаждая цифра в тексте есть в таблице

Рейтинга сервисов здесь нет. Модели меняются быстрее, чем выходят такие рейтинги, а качество на ваших таблицах всё равно проверять вам. Как выбрать модель на своих примерах, разобрано в статье какую нейросеть выбрать.

Главное правило: пусть нейросеть пишет формулу или код, а считает Excel или программа. Языковая модель предсказывает текст, а не считает, поэтому в арифметике «в уме» она может ошибиться. Формула прозрачна, её результат можно воспроизвести и проверить.

Нейросеть для Excel: что ей поручить

ИИ для работы с Excel полезнее всего там, где вы знаете, что хотите получить, но не помните, как это сделать. Ниже типовые задачи и примеры запросов.

Формулы

Опишите словами, что нужно, и укажите, где лежат данные. Модели хватит названий столбцов и нескольких строк.

Пример запроса: «В столбце A дата заказа, в B менеджер, в C сумма. Нужна формула для листа „Итоги“, которая считает сумму заказов менеджера из ячейки E2 за месяц из ячейки F2. Excel на русском языке, разделитель аргументов точка с запятой». В своём запросе укажите язык Excel и какой разделитель у вас в формулах.

Это уточнение важно: в русской версии Excel функции называются по-русски, а при российских региональных настройках аргументы разделяются точкой с запятой. Формула из англоязычного примера может не сработать. Если формулу дала модель, попросите объяснить её по частям: так проще заметить ошибку в диапазоне.

Сводные таблицы

Нейросеть подскажет, как разложить данные: что вынести в строки, что в столбцы, какие поля суммировать, а какие считать количеством. Пример запроса: «Вот заголовки и пять строк выгрузки продаж. Хочу видеть выручку по регионам и месяцам и долю каждого региона. Опиши шаги для сводной таблицы».

Проверка простая: общий итог сводной должен совпадать с суммой по исходному столбцу.

Очистка данных

Выгрузки из разных систем почти всегда грязные: лишние пробелы, даты текстом, «ООО Ромашка» и «Ромашка ООО» как два клиента. Нейросеть быстро находит такие места и предлагает правила очистки.

Просите не исправлять молча, а сначала показать, что будет изменено: «Найди в этих строках возможные дубли клиентов и разнобой в написании. Выведи таблицей: было, предлагаю, причина. Ничего не удаляй». Изменения применяйте к копии файла.

Графики

Модель подберёт вид графика под задачу: динамика, сравнение, доля, распределение. Если сервис умеет выполнять код, он построит график сам. Если нет, опишет шаги в Excel. Проверяйте подписи осей, единицы измерения и то, начинается ли шкала с нуля: обрезанная шкала легко превращает небольшую разницу в резкий скачок.

Кто что делает в работе с таблицей
  • Нейросеть
    • Пишет формулу или код
    • Предлагает структуру сводной
    • Находит дубли и разнобой
    • Готовит черновик выводов
  • Excel или программа
    • Считает по формуле
    • Пересчитывает при изменении данных
  • Человек
    • Проверяет итоги на исходных данных
    • Решает, что значат цифры

Поиск закономерностей и отчёты: где осторожнее

Нейросеть охотно находит закономерности, и в этом её риск. Она может объяснить случайное колебание и выдать совпадение за причину. Поэтому к любому найденному тренду задавайте три вопроса: сколько наблюдений за этим стоит, повторяется ли это в другом периоде и нет ли простого объяснения вроде праздников или сбоя выгрузки.

Полезные запросы для этой части:

  • «Найди строки, которые сильно отличаются от остальных, и объясни, по какому правилу ты их выбрал».
  • «Посчитай кодом среднее и медиану по группам и покажи код».
  • «Какие выводы из этих данных нельзя сделать без дополнительной информации?».

С отчётами правило одно: в тексте не должно быть цифр, которых нет в таблице. Давайте модели уже посчитанные итоги и просите написать выводы по ним, а не считать и писать одновременно. Модель может уверенно назвать число, которого нет в данных, об этом подробно в статье про галлюцинации нейросетей.

Как давать данные нейросети

Чем понятнее устроены данные, тем меньше ошибок. Сначала общий порядок работы, потом правила подготовки.

Как работать с таблицей и ИИ
  1. Подготовить данныеОдна шапка, понятные столбцы, без лишних персональных данных
  2. Описать задачуЧто посчитать и в каком виде нужен ответ
  3. Получить формулу или кодРасчёт делает Excel или программа
  4. Сверить с исходными даннымиИтоги, несколько строк вручную
  1. Один заголовок, одна строка на запись. Объединённые ячейки, многоуровневые шапки и итоги посреди таблицы модель читает плохо.
  2. Понятные названия столбцов. «Сумма с НДС, руб.» лучше, чем «Колонка 7».
  3. Опишите смысл. Что за данные, за какой период, в каких единицах, что значит пустая ячейка.
  4. Для формулы хватит шапки и нескольких строк. Весь файл нужен, только если сервис сам выполняет расчёт.
  5. Уберите лишнее. Фамилии, телефоны и реквизиты часто не нужны для анализа, их можно удалить или заменить кодами.
  6. Скажите, каким должен быть ответ. Формула, таблица, код, список шагов.

Как проверить результат

Проверка расчёта начинается с того, что вы можете повторить его без нейросети. Если результат получен формулой или кодом, его видно и его можно пересчитать.

  • Контрольные итоги. Сумма и количество строк до и после обработки должны сходиться или различаться ровно на то, что вы удалили.
  • Ручная проверка нескольких строк. Возьмите три-пять строк, посчитайте на калькуляторе и сравните.
  • Граничные случаи. Пустые ячейки, нули, отрицательные значения, даты на стыке месяцев.
  • Повторный запрос. Задайте тот же вопрос иначе. Если ответы разошлись, ищите, где ошибка.
  • Код и формула на виду. Если сервис посчитал и показал только итог, попросите показать, как он считал.

Риски с персональными и коммерческими данными

Таблица с клиентами, зарплатами или ценами закупки, загруженная в публичный сервис, уходит за пределы компании. Где она будет храниться и пойдёт ли на обучение модели, определяют условия сервиса и тариф, а не вы.

Что стоит закрепить правилом:

  • выгрузки с персональными данными клиентов и сотрудников в публичные сервисы не загружать; для анализа настоящих данных нужен сервис, согласованный в компании, или система внутри неё;
  • коммерческие данные (цены, маржа, условия поставщиков) загружать только в сервис, разрешённый в компании;
  • для формулы давать шапку и вымышленные строки вместо настоящих данных;
  • если анализ нужен по настоящим данным, удалять или заменять кодами всё, что не нужно для расчёта, и проверять, что человека нельзя узнать по оставшимся данным.

Как обезличивать данные и какие схемы работы с нейросетями допустимы при 152-⁠ФЗ, разобрано в статье про нейросети и персональные данные. Это не юридическая консультация, порядок для своей компании согласуйте с юристом.

Про доступ из России: OpenAI, разработчик ChatGPT, не включает Россию в список поддерживаемых стран, а доступ из стран вне списка, по словам компании, может привести к блокировке аккаунта. Из российских сервисов можно попробовать GigaChat и Алису. Что они умеют с таблицами и где хранят файлы, проверяйте в их условиях.

ИИ-агент для Excel и своя система: когда это нужно

Чата с нейросетью хватает, когда задача разовая: написать формулу, разобраться с выгрузкой, подготовить черновик отчёта. Своя система нужна, когда одна и та же работа с данными повторяется каждую неделю и занимает часы.

Признаки, что пора думать о своей системе:

  • Отчёт собирают вручную из нескольких выгрузок по одному и тому же шаблону.
  • Данные нельзя выносить за пределы компании, а без нейросети работа идёт медленно.
  • Нужен доступ к живым данным, а не к файлу, выгруженному неделю назад.
  • Над одними данными работают разные люди и каждый раз заново объясняют нейросети, что где лежит.

ИИ-агент для Excel или учётной системы сам выполняет цепочку действий: берёт выгрузку, чистит её по заданным правилам, считает итоги и готовит сводку. С чего начать создание агента, описано в статье как создать ИИ-агента. Другие задачи, которые нейросети закрывают в компании, собраны в обзоре нейросети для бизнеса. Если данные лежат в документах, загляните в материал про нейросеть для анализа документов.

Чат с нейросетью или своя система
Нужно анализировать данные
  • Разовая задачаЧат с нейросетью, разрешённый в компании, без персональных данных
  • Повторяется каждую неделю и занимает часы или данные чувствительныеСвоя система или агент с доступом к данным внутри компании

Типичные ошибки

  • Попросили посчитать, а не написать формулу. Итог выглядит правдоподобно, но проверить его нечем.
  • Отдали весь файл ради одной формулы. Хватило бы шапки и пары строк, а персональные данные уже ушли наружу.
  • Не сказали про русский Excel. Формула с английскими функциями и запятыми может не сработать.
  • Применили очистку к оригиналу. Вернуть удалённые строки уже нельзя.
  • Поверили тренду на маленькой выборке. Три точки ещё не закономерность.
  • Вставили в отчёт цифру из ответа, а не из таблицы.

Когда звать подрядчика

Подрядчик нужен, когда анализ данных стал регулярным процессом, а данные нельзя отдавать в публичный сервис. Его работа начинается с разбора процесса: откуда приходят данные, сколько времени уходит на ручные операции и что изменится после внедрения.

Что он должен сделать:

  • разобрать процесс, данные и ручные операции и выбрать задачи, где ИИ принесёт пользу;
  • посчитать эффект до разработки: время на операцию, трудозатраты, стоимость внедрения и эксплуатации;
  • проверить решение на ваших данных и сравнить результат с исходными показателями;
  • определить размещение: на ваших серверах или во внешнем сервисе, и как защищены данные.

Так устроено внедрение ИИ у Designflex: бесплатен аудит процессов, с него начинается работа, дальше концепция, расчёт эффекта и пилот на данных.