Мегапьютер Интеллидженс
Мегапьютер Интеллидженс
  • 129
  • 49 915
Применение инструментов текстового анализа NLP для обработки множества таблиц Excel
Low-code аналитическая платформа PolyAnalyst - система визуального программирования для проведения анализа структурированных данных и интеллектуального текстового анализа.
Система позволяет экспертам из различных бизнес-областей и профессиональным аналитикам разрабатывать автоматизированные аналитические решения без написания программного кода.
Сайт Мегапьютер: www.megaputer.ru
Сообщество в ТГ: t.me/PolyAnalyst
Скачать триал-версию PolyAnalyst: www.megaputer.ru/trial-request/
Галерея проектов, разработанных в PolyAnalyst: www.megaputer.ru/project-gall...
#polyanalyst #lowcode #datascience #megaputer #lowcodeplatform
В видео продемонстрирован один из вариантов применения инструментов текстового анализа NLP для массовой интеллектуальной обработки электронных таблиц. На примере нескольких таблиц Excel, содержащих отчет по исполнению бюджета одного из регионов России проводится пакетная загрузка наборов таблиц.
Далее ML модели под капотом PolyAnalyst разбирают таблицы, как текстово-табличные документы. Это позволяет применять NLP инструменты, в частности проводить извлечение из таблиц сущностей (денежные суммы, компании, геоадминистративные объекты, даты и т.д.).
Что самое важное, аналитик может задавать правила для извлечения элементов таблиц (колонок, строк, ячеек) со специфическим содержимым. Для примера демонстрируется, как можно извлекать суммы дохода по статьям, содержащим акцизные сборы за продажу всевозможных продуктов нефтепереработки (бензина, дизеля, газойля и т.д.). Для этого возможно использовать встроенный в систему менеджер словарей, где создаются необходимые справочники (в данном кейсе справочник продуктов нефтепереработки) и с помощью однострочного правила обрабатывать одновременно сотни таблиц.
В завершении демонстрируется, как за 5 минут в PolyAnalyst исключительно нативными средствами без программирования собирается и публикуется в открытый доступ графический интерактивный отчет с результатами обработки таблиц.
zhlédnutí: 102

Video

Обновление PolyАnalyst 2919 - больше функций, больше AI, больше self-service
zhlédnutí 223Před měsícem
Low-code аналитическая платформа PolyAnalyst - система визуального программирования для проведения анализа структурированных данных и интеллектуального текстового анализа. Система позволяет экспертам из различных бизнес-областей и профессиональным аналитикам разрабатывать автоматизированные аналитические решения без написания программного кода. Сайт Мегапьютер: www.megaputer.ru Сообщество в ТГ:...
Вебинар: Большие языковые модели LLM и система PolyAnalyst для анализа клиентских отзывов
zhlédnutí 129Před 2 měsíci
Low-code аналитическая платформа PolyAnalyst - система визуального программирования для проведения анализа структурированных данных и интеллектуального текстового анализа. Система позволяет экспертам из различных бизнес-областей и профессиональным аналитикам разрабатывать автоматизированные аналитические решения без написания программного кода. Сайт Мегапьютер: www.megaputer.ru Сообщество в ТГ:...
Инструкция по установке PolyAnalyst
zhlédnutí 221Před 3 měsíci
Low-code аналитическая платформа PolyAnalyst - система визуального программирования для проведения анализа структурированных данных и интеллектуального текстового анализа. Система позволяет экспертам из различных бизнес-областей и профессиональным аналитикам разрабатывать автоматизированные аналитические решения без написания программного кода. Сайт Мегапьютер: www.megaputer.ru Сообщество в ТГ:...
Михаил Стрельцов, ГК АЛРОСА. Быстрое прототипирование аналитических решений на PolyAnalyst
zhlédnutí 500Před 3 měsíci
Интервью с Михаилом Стрельцовым, руководителем направлений КХД и BI в ГК АЛРОСА. Многогранное применение аналитической платформы PolyAnalyst для развития компании. Low-code аналитическая платформа PolyAnalyst - система визуального программирования для проведения анализа структурированных данных и интеллектуального текстового анализа. Система позволяет экспертам из различных бизнес-областей и пр...
Вебинар: Создание портрета клиента: ABC, XYZ, RFM анализ в системе PolyAnalyst
zhlédnutí 69Před 3 měsíci
Презентация доступна по ссылке disk.yandex.ru/i/Ch9vdoskzWhagA Low-code аналитическая платформа PolyAnalyst - система визуального программирования для проведения анализа структурированных данных и интеллектуального текстового анализа. Система позволяет экспертам из различных бизнес-областей и профессиональным аналитикам разрабатывать автоматизированные аналитические решения без написания програ...
Лилия Тарасенко, ГК АЛРОСА. Self-Service аналитика на PolyAnalyst в ГК АЛРОСА.
zhlédnutí 199Před 4 měsíci
Интервью с Лилией Тарасенко, главным специалистом ЦК УД направления КХД и BI в ГК АЛРОСА. Low-code аналитическая платформа PolyAnalyst - система визуального программирования для проведения анализа структурированных данных и интеллектуального текстового анализа. Система позволяет экспертам из различных бизнес-областей и профессиональным аналитикам разрабатывать автоматизированные аналитические р...
Дмитрий Тимаков, НОРБИТ, ГК ЛАНИТ. Сотрудничество НОРБИТ и Мегапьютер: развитие клиентов и рынка
zhlédnutí 264Před 4 měsíci
Интервью с Дмитрием Тимаковым, руководителем направления AI, НОРБИТ. Low-code аналитическая платформа PolyAnalyst - система визуального программирования для проведения анализа структурированных данных и интеллектуального текстового анализа. Система позволяет экспертам из различных бизнес-областей и профессиональным аналитикам разрабатывать автоматизированные аналитические решения без написания ...
Сергей Алимбеков, ФРИИ. Создание навигатора мер поддержки ИТ на платформе PolyAnalyst
zhlédnutí 1,3KPřed 5 měsíci
Интервью с Сергеем Алимбековым, заместителем директора по технологическому развитию ФРИИ. Создание цифрового портала на low-code платформе PolyAnalyst Low-code аналитическая платформа PolyAnalyst - система визуального программирования для проведения анализа структурированных данных и интеллектуального текстового анализа. Система позволяет экспертам из различных бизнес-областей и профессиональны...
Большая языковая модель MegaGPT + лингвистические правила: гибридный подход для анализа текстов
zhlédnutí 416Před 6 měsíci
Презентация доступна по ссылке disk.yandex.ru/i/IVwBA2Oa2vzyCg 00:07:51 можно ли сегодня внедрять в продакшн LLM и с какими болями можно столкнуться при их работе 00:14:25 как для повышения качества текстового анализа система PolyAnalyst позволяет совмещать LLM и лингвистические правила; 01:00:59 о преимуществах гибридного подхода перед применением исключительно LLM или правил; 01:02:55 о персп...
Извлечение таблиц из текстовых документов и файлов Excel с помощью PolyAnalyst
zhlédnutí 137Před 6 měsíci
Low-code аналитическая платформа PolyAnalyst - система визуального программирования для проведения анализа структурированных данных и интеллектуального текстового анализа. Система позволяет экспертам из различных бизнес-областей и профессиональным аналитикам разрабатывать автоматизированные аналитические решения без написания программного кода. Сайт Мегапьютер: www.megaputer.ru Сообщество в ТГ:...
Вебинар "Обработка табличных данных из Excel и текстовых документов в системе PolyAnalyst"
zhlédnutí 215Před 8 měsíci
На сегодняшний день электронные таблицы остаются одним из наиболее популярных форматов работы с данными. При этом, работа с ними порой наполнена рутиной и набором операций, повторяющихся ежедневно, ежемесячно, ежеквартально. PolyAnalyst обладает набором инструментов для автоматизации таких рутинных задач. 00:00:00 О том как удобство Excel рано или поздно переходит в Excel Hell 00:15:21 Построен...
Константин Воронцов МГУ, Институт ИИ. PolyAnalyst как инструмент анализа данных для ВУЗов России.
zhlédnutí 212Před 9 měsíci
Low-code аналитическая платформа PolyAnalyst - система визуального программирования для проведения анализа структурированных данных и интеллектуального текстового анализа. Система позволяет экспертам из различных бизнес-областей и профессиональным аналитикам разрабатывать автоматизированные аналитические решения без написания программного кода. Сайт Мегапьютер: www.megaputer.ru Сообщество в ТГ:...
Константин Руденко АО Консист-ОС Росатом. PolyAnalyst для автоматизации анализа текстовых документов
zhlédnutí 116Před 9 měsíci
Low-code аналитическая платформа PolyAnalyst - система визуального программирования для проведения анализа структурированных данных и интеллектуального текстового анализа. Система позволяет экспертам из различных бизнес-областей и профессиональным аналитикам разрабатывать автоматизированные аналитические решения без написания программного кода. Сайт Мегапьютер: www.megaputer.ru Сообщество в ТГ:...
PolyAnalyst для анализа организационной структуры компании по должностным инструкциям сотрудников
zhlédnutí 124Před 9 měsíci
Доклад Виктора Положишникова, главного специалиста Центра моделирования бизнес-процессов РЖД о проведении анализа организационной структуры компании по должностным инструкциям сотрудников. Презентация доклада по ссылке nc.megaputer.ru/s/7adFnpFXKC4reSx Low-code аналитическая платформа PolyAnalyst - система визуального программирования для проведения анализа структурированных данных и интеллекту...
PolyAnalyst для анализа зависимости расхода электроэнергии от веса поезда на 1 секцию локомотива
zhlédnutí 105Před 9 měsíci
PolyAnalyst для анализа зависимости расхода электроэнергии от веса поезда на 1 секцию локомотива
Виктор Положишников ОАО РЖД. PolyAnalyst для анализа бизнес-процессов
zhlédnutí 201Před 9 měsíci
Виктор Положишников ОАО РЖД. PolyAnalyst для анализа бизнес-процессов
Прототипирование цифровых решений с помощью PolyAnalyst без IT-специалистов
zhlédnutí 111Před 9 měsíci
Прототипирование цифровых решений с помощью PolyAnalyst без IT-специалистов
Опыт обработки слабоструктурированных данных с помощью PolyAnalyst А.Тимофеев АНО ЦКИТ
zhlédnutí 109Před 9 měsíci
Опыт обработки слабоструктурированных данных с помощью PolyAnalyst А.Тимофеев АНО ЦКИТ
Александр Тимофеев АНО ЦКИТ. PolyAnalyst в решении задач импортозамещения
zhlédnutí 113Před 9 měsíci
Александр Тимофеев АНО ЦКИТ. PolyAnalyst в решении задач импортозамещения
Кластерная система анализа данных PolyAnalyst
zhlédnutí 210Před 9 měsíci
Кластерная система анализа данных PolyAnalyst
Обновление PolyAnalyst 28xx
zhlédnutí 159Před 9 měsíci
Обновление PolyAnalyst 28xx
Новые продукты Мегапьютер: Sapremo, Megaputer OCR, Text Compare
zhlédnutí 150Před 9 měsíci
Новые продукты Мегапьютер: Sapremo, Megaputer OCR, Text Compare
Лекция для РАНХиГС №4 Автоматическое определение тематик текстов, классификация текстовых документов
zhlédnutí 150Před rokem
Лекция для РАНХиГС №4 Автоматическое определение тематик текстов, классификация текстовых документов
Лекция для РАНХиГС №3 Анализ текстовых данных на примере аналитики клиентских отзывов
zhlédnutí 122Před rokem
Лекция для РАНХиГС №3 Анализ текстовых данных на примере аналитики клиентских отзывов
Лекция для РАНХиГС №2 Прикладной финансовый анализ предприятий с помощью системы PolyAnalyst.
zhlédnutí 97Před rokem
Лекция для РАНХиГС №2 Прикладной финансовый анализ предприятий с помощью системы PolyAnalyst.
Лекция для РАНХиГС №1 Анализ данных в бизнесе. Система PolyAnalyst. Аналитические кейсы.
zhlédnutí 153Před rokem
Лекция для РАНХиГС №1 Анализ данных в бизнесе. Система PolyAnalyst. Аналитические кейсы.
Вебинар: "Интеграция проектов PolyAnalyst с системой контроля версий Git"
zhlédnutí 85Před rokem
Вебинар: "Интеграция проектов PolyAnalyst с системой контроля версий Git"
Анализ финансового состояния компании с помощью платформы PolyAnalyst
zhlédnutí 228Před rokem
Анализ финансового состояния компании с помощью платформы PolyAnalyst
Анализ новостных потоков с помощью PolyAnalyst
zhlédnutí 266Před rokem
Анализ новостных потоков с помощью PolyAnalyst

Komentáře

  • @vzhurkin
    @vzhurkin Před měsícem

    Новые узлы 9:12 RFM-анализ 15:30 Распознавания речи 21:41 Сравнение сущностей 26:22 Извлечение медицинских фактов 30:40 Условие Обновлённые узлы 38:27 Узлы-источники данных 39:17 Экспорт в папку 41:34 ИИ ассистент 52:29 Извлечение таблиц 56:29 Анонимизация сущностей 59:22 Извлечение сущностей 1:02:00 Извлечение сущностей с обучением 1:03:24 Классификация текстов 1:04:40 Интернет 1:07:48 Извлечение терминов 1:08:38 OCR 1:13:43 Диаграмма рассеяния 1:14:37 OLAP 1:15:39 Пузырьковая диаграмма 1:17:22 Иерархическая диаграмма (Treemap) 1:18:41 Отчеты

  • @user-nx4dc7fw7z
    @user-nx4dc7fw7z Před 4 měsíci

    А как сделать такую табличку с пояснениями как в начале? Можно ли просто на в рабочей области оставлять подписи?

    • @Megaputer_Int
      @Megaputer_Int Před 4 měsíci

      Оставлять подписи можно. Достаточно в аналитическом клиенте просто правкой кнопкой мыши вызвать меню и выбрать "Добавить аннотацию".

  • @Pavel_Poluian
    @Pavel_Poluian Před 4 měsíci

    Анализ графов пропустил.

  • @user-mu7sy3oz6v
    @user-mu7sy3oz6v Před 5 měsíci

    ❤❤❤❤❤

  • @absansher
    @absansher Před 6 měsíci

    Супер 👍🏻

  • @mydarkside18plys
    @mydarkside18plys Před 6 měsíci

    Незаменимый инструмент для анализа данных.

  • @cyeta_ha_becb_mup7840
    @cyeta_ha_becb_mup7840 Před 9 měsíci

    Андрей, вы молодец! Выступление на высоком уррвне, Алматы, Казахстан

  • @Pavel_Poluian
    @Pavel_Poluian Před rokem

    Забавное словосочетание Neuro language processing (16.7)))😄😄😄

  • @ged-4138
    @ged-4138 Před rokem

    Пол-видео почему-то чёрный экран.. Это ошибка?

  • @arthurwick
    @arthurwick Před rokem

    Добрый день! Не могли бы вы выгрузить эти материалы на Рутуб?

  • @user-jy5cm9mx7k
    @user-jy5cm9mx7k Před rokem

    Что за PDL? Это собственная разработка?

    • @Megaputer_Int
      @Megaputer_Int Před rokem

      Да, это внутренний синтаксис PolyAnalyst. PDL (pattern definition language) - язык для поиска лингвистических конструкций в неструктурированных текстах. Он предназначен для нахождения в тексте фактов, событий, сущностей и прочих объектов, представляющих интерес для конкретной предметной области. Такими объектами могут быть, например, географические объекты и компании, марки автомобилей, виды поломок и дефектов, названия лекарств и химических соединений, научные публикации, стихийные бедствия и эпидемии, цены акций, курсы валют и т.д. Большинство подобных объектов можно извлечь из текста, описав соответствующие им лингвистические конструкции. Например, найти названия компаний можно с помощью запроса для поиска последовательности, состоящей из слов «ОАО» или «ЗАО», за которыми следуют одно или более слов с заглавной буквы в кавычках (ЗАО «Микросистема», ОАО «Аэропорты регионов» и т.д.). Чтобы найти упоминания министерств, можно составить запрос для поиска слова «министерство», за которым следуют существительные (и опционально прилагательные) в родительном падеже (Министерство финансов, Министерство иностранных дел и т.д.). PDL представляет собой удобный механизм для описания языковых конструкций любой сложности.

  • @astralious
    @astralious Před rokem

    Здорово!

  • @DrSergeyKibalnikov
    @DrSergeyKibalnikov Před rokem

    Не нашел демо, который был сделан для Минцифры о котором упомянули на 9-й минуте. 😞

  • @user-hx5ez2xk6t
    @user-hx5ez2xk6t Před rokem

    было бы интересно посмотреть на некоторые инструменты, из предложенных Комиссаровым, для анализа "успешности(не)" инфобизнесменов/инфоцыган.

  • @Megaputer_Int
    @Megaputer_Int Před rokem

    00:00:39 Что такое дата-центричный дизайн 00:08:00 Сервис "Цифровая модель компетенций" 00:11:01 Цифровой сервис "Data+ диагностика" 00:12:20 Работа с цифровым следом

  • @Megaputer_Int
    @Megaputer_Int Před rokem

    00:00:02 Вступительное слово 00:01:08 Так что же такое Большие данные? 00:03:23 Регулирование доступа к Большим данных в разных странах 00:09:43 Внедрение отечественной системы гибридного обучения 00:10:46 Кейс: Рекрутинг абитуриентов на основе анализа социальных сетей 00:26:49 Кейс: Анализ мнений студентов о качестве образования в постпандемию в социальных сетях 00:37:34 Кейс: Оценка "Третьей миссии университета" 00:43:41 Проектирование образовательных программ на основе анализа данных рынка труда

  • @Megaputer_Int
    @Megaputer_Int Před rokem

    Тайминг: 00:00:24 Приветственное слово Алексей Русских, генеральный директор Мегапьютер 00:07:49 Практические кейсы аналитики и автоматизации с помощью PolyAnalyst. Дмитрий Гольцов, Мегапьютер 00:49:28 Прикладные инструменты обработки и анализа неструктурированных данных в работе инспектора СП РФ. Роман Некрасов, Главный специалист, Счетная Палата РФ 01:36:23 Прогнозирование процентных ставок на основе оценки сентимента заявлений ЦБ РФ. Родион Ломиворотов, Старший экономист, Сбер КИБ. Евгений Нечепоренко, Исполнительный директор по исследованию данных, Сбербанк 02:08:56 Использование PolyAnalyst в задачах анализа текста. Опыт Электроэнергетического дивизиона Росатома. Константин Руденко, руководитель направления роботизации бизнес-процессов, Росэнергоатом, Консист-ОС

  • @Megaputer_Int
    @Megaputer_Int Před rokem

    Тайминг: 0:00:05 вступление 0:01:58 краткая презентация Мегапьютер и PolyAnalyst 0:05:59 возможности PolyAnalyst в области машинного обучения 0:08:57 практический показ реализации цикла процедур MLOps в PolyAnalyst 0:41:18 обучение модели классификации и кластеризации документов 0:56:05 применение в PolyAnalyst внешней модели для распознавания изображений

  • @astralious
    @astralious Před rokem

    мощно

  • @Megaputer_Int
    @Megaputer_Int Před rokem

    Тайминг: 0:00:00 вступление 0:04:59 краткая презентация Мегапьютер и PolyAnalyst 0:25:17 сессия вопросов после презентации 0:35:02 демонстрация системы и инструментов ETL 1:20:22 заключительная сессия вопросов

  • @SharedGPA
    @SharedGPA Před rokem

    Мощная команда у вас! Я думал, такое только в фантастических фильмах бывает

  • @jackma2760
    @jackma2760 Před 2 lety

    Очень понятно, спасибо

  • @astralious
    @astralious Před 2 lety

    Спасибо

  • @MrFrain-047
    @MrFrain-047 Před 2 lety

    Амогус

  • @user-hu1xl3ez7o
    @user-hu1xl3ez7o Před 3 lety

    Приглашаем в группу по методам машинного обучения и Data Science - без формул: vk.com/dm_azforus