Voice2Med
Система распознавания речи в медицине

Основные статьи:

• Распознавание речи врачей
• Голосовая биометрия
• Технологии биометрической идентификации

2023: Доступность для врачей девяти специальностей

31 мая 2023 года Группа компаний ЦРТ представила обновленный продуктовый релиз Voice2Med — голосового заполнения медицинских протоколов на основе искусственного интеллекта. Теперь возможности Voice2Med значительно расширены — к имеющимся словарям врача общей практики и педиатра, рентгенолога КТ, МРТ, патоморфолога, врача ультразвуковой диагностики и эндоскописта, кардиолога, хирурга и стоматолога добавлен словарь медицинских терминов — словарь онколога. Решение входит в реестр отечественного ПО, поддерживает работу на российских операционных системах.

Врачу достаточно произнести результат исследования или осмотра в гарнитуру, Voice2Med преобразует речь в текст и обеспечит заполненный протокол, который требует минимума корректировок.

Мы объявляем о доступности голосового ввода для врачей уже девяти специальностей. Теперь еще больше специалистов смогут оценить плюсы распознавания речи и оптимизировать работу с документами. При этом каждый специализированный медицинский словарь непрерывно развивается, для этого мы реализовали функцию, с помощью которой каждый врач самостоятельно может добавлять новые термины и выражения. Кроме того, за счет перевода Voice2Med на распознавание речи нового поколения, нам удалось существенно снизить требования к гарнитурам, что значительно расширяет возможности масштабирования голосового ввода, сказал Дмитрий Дырмовский, генеральный директор группы компаний ЦРТ.

Первое масштабное внедрение Voice2Med было реализовано в Москве, что стало возможным благодаря единой цифровой платформе здравоохранения, разработанной столичным комплексом социального развития и Департаментом информационных технологий. Продукт уже успешно применяется врачами лучевой диагностики: работает в 120 медицинских учреждениях Москвы. Центр диагностики и телемедицины зафиксировал в медицинских организациях Департамента здравоохранения Москвы сокращение более 20% времени на подготовку медицинских протоколов.

2022

Заполнение с помощью сервиса голосового ввода более 210 тыс. медпротоколов лучевых исследований

В московских поликлиниках и стационарах с помощью сервиса голосового ввода заполнено более 210 тысяч медицинских протоколов лучевых исследований. Технология распознавания речи позволяет надиктовывать описание исследования и экономить время врачей на ввод информации вручную, что ускоряет выполнение этой работы более чем на 20%. Об этом 9 января 2022 года сообщил заместитель руководителя Департамента здравоохранения Москвы Илья Тыров.

На январь 20223 года решение используется в детских и взрослых поликлиниках, московском референс-центре, многопрофильных стационарах и медицинских организациях, оказывающих специализированную помощь. Рентгенологи столицы заполнили голосом уже более 210 тысяч медицинских протоколов. Количество заполняемых с помощью цифрового помощника документов растет, с начала 2022 года заполнено на 80% протоколов больше, чем в 2021 году. Качество распознавания речи при этом достигло 98%. Технология распознавания речи позволяет надиктовывать описание исследования, а не вводить информацию вручную, что ускоряет подготовку протоколов исследований более чем на 20%, — рассказал заместитель руководителя Департамента здравоохранения Москвы Илья Тыров.

Благодаря единой цифровой платформе здравоохранения, развиваемой Комплексом социального развития города Москвы и Департаментом информационных технологий, удалось реализовать первое масштабное применение голосового ввода в стране. В основе продукта — решение на основе искусственного интеллекта, которое преобразует голос врача в текст. Во время интерпретации исследования врач надиктовывает информацию, которая моментально расшифровывается и переносится в открытый протокол медицинской информационной системы в виде текста.

Мы работаем над развитием голосового ввода совместно с разработчиком решения — группой ЦРТ — с 2020 года. Обратная связь врачей Центра диагностики и телемедицины позволяет разработчикам системно и быстро пополнять словарь сложными и редкими медицинскими терминами, подстраивать под особенности произношения разных врачей, охватывать все новые диагностические и лечебные задачи. И это действительно масштабная деятельность. В процессе работы были протестированы различные гарнитуры, разработчики реализовали интеграции с несколькими видами микрофонов. Также позаботились об адаптации врачей: подготовили учебно-методические материалы, памятки, инструкции, видеоуроки, — отметил Юрий Васильев, главный внештатный специалист по лучевой и инструментальной диагностике Москвы, директор столичного Центра диагностики и телемедицины.

Совместная работа позволила достичь качества распознавания речи 98%, в том числе — специализированной медицинской лексики. Мы стремимся перенести опыт столичных рентгенологов, открыть возможности технологичных сервисов для врачей разных специальностей и уже сделали голосовой ввод доступным для врачей восьми специализаций. Voice2Med — полностью отечественное решение, не содержит заимствованных компонентов, внесено в реестр отечественного ПО, поддерживает работу на российских операционных системах, — отметил Дмитрий Дырмовский, генеральный директор группы компаний ЦРТ.

Премия Правительства РФ за разработку голосового ввода для рентгенологов

Ученые Центра диагностики и телемедицины ДЗМ и группы компаний ЦРТ получили премию Правительства Российской Федерации за адаптацию и внедрение технологии распознавания речи для подготовки протоколов рентгенологических и ультразвуковых исследований. Об этом 26 декабря 2022 года Zdrav.Expert сообщили представители Центра диагностики и телемедицины ДЗМ.

На фото (слева-направо): Михаил Мишустин, Премьер-министр РФ, и Никита Кудрявцев, младший научный сотрудникcектора стандартизации и контроля качества ЦДиТ ДЗ
Вручение Премии Правительства РФ
Фото: Youtube-канал Правительства РФ

В основу технологии легло решение Voice2Med – продукт на основе искусственного интеллекта для заполнения медицинских протоколов. Сервис позволяет врачам-рентгенологам надиктовывать описание исследования и не терять время на ввод информации вручную, это ускоряет выполнение бумажной работы более чем на 20%.

В составе команды, принимавшей участие в проекте:

• Алексей Петряйкин, кандидат медицинских наук, доцент, ведущий научный сотрудник сектора стандартизации и контроля качества ЦДиТ ДЗМ научный руководитель авторского коллектива,
• Никита Кудрявцев, младший научный сотрудникcектора стандартизации и контроля качества ЦДиТ ДЗМ,
• Дмитрий Семенов, начальник сектора стандартизации и контроля качества ЦДиТ ДЗМ,
• Дарья Шарова, руководитель отдела инновационных технологий ЦДиТ ДЗМ
• и научный сотрудник группы компаний ЦРТ Мария Митрофанова.

Как рассказал главный внештатный специалист по лучевой и инструментальной диагностике Москвы, директор столичного Центра диагностики и телемедицины Юрий Васильев, московские рентгенологи уже используют технологию голосового ввода в поликлиниках и стационарах. По состоянию на конец декабря 2022 года с помощью сервиса голосового ввода уже заполнены сотни тысяч медицинских протоколов лучевых исследований.

«Технология распознавания речи позволяет не терять время врачей на ввод информации вручную, рентгенологи надиктовывают описание в микрофон, и текст сразу появляется на экране – это ускоряет выполнение бумажной работы более чем на 20%», – отметил Юрий Васильев.

По словам Дмитрия Дырмовского, генерального директора группы компаний ЦРТ, первое масштабное применение голосового ввода было реализовано в Москве, что стало возможным благодаря единой цифровой платформе здравоохранения, разработанной столичным комплексом социального развития и Департаментом информационных технологий.

«Высокая оценка решения и получение премии Правительства Российской Федерации в области науки и техники — большая честь для нас. Совместная работа позволила достичь качества распознавания речи 98%, в том числе — специализированной медицинской лексики. Мы стремимся перенести уникальный опыт столичных рентгенологов, открыть возможности современных технологичных сервисов для врачей разных специальностей и уже сделали голосовой ввод доступным для врачей восьми специализаций», – добавил Дмитрий Дырмовский.

Как он подчеркнул, Voice2Med — это полностью отечественное решение, которое не содержит заимствованных компонентов, внесено в реестр отечественного ПО, поддерживает работу на российских операционных системах.Михаил Рожков, PARMA TG: Большинство наших BPM-проектов выходят за рамки отдельных процессов и организаций 3.3 т

Заполнение с помощью технологии голосового ввода 160 тыс. медицинских документов

Москва продолжает развитие сервисов единой цифровой платформы здравоохранения. Технология голосового ввода зарекомендовала себя и востребована среди специалистов лучевой диагностики: за два года активного использования было заполнено более 160 тысяч медицинских документов, а за первое полугодие 2022 года уже на 80% протоколов больше, чем в 2021 году. Об этом 8 июля 2022 года сообщила компания ЦРТ. Этот сервис доступен московским врачам и позволяет экономить более 20% времени, рассказал директор Центра диагностики и телемедицины Департамента здравоохранения города Москвы Юрий Васильев.

Голосовой помощник Voice2Med создан на основе искусственного интеллекта и позволяет заполнять медицинские документы голосом. При осмотре пациентов или проведении исследования врач с помощью гарнитуры надиктовывает информацию, которая расшифровывается и автоматически переносится в открытый протокол медицинской информационной системы. Благодаря оперативной обратной связи от врачей, словарь цифрового помощника обогащается сложными и редкими медицинскими терминами, аббревиатурами и сокращениями, подстраивается под особенности произношения разных врачей. Голосовое заполнение медицинской документации позволяет экономить время врачей, повышает качество заполнения протоколов, улучшает эргономику рабочих мест. Голосовой интерфейс является естественным и интуитивно понятным, его легко изучить и освоить. Передовой опыт рентгенологов Москвы перенимают в регионах — Voice2Med работает на июль 2022 года уже в 65 регионах страны, развиваются новые словари — врачи восьми специальностей могут использовать голосовой ввод, решение масштабируется, — прокомментировал Дмитрий Дырмовский, генеральный директор группы компаний ЦРТ.

Голосовой помощник постоянно дообучается: пополняет словарь сложными и редкими медицинскими терминами, подстраивается под особенности произношения разных врачей, охватывает новые диагностические и лечебные задачи. Благодаря этому точность распознавания речи достигла 98%.

Первое масштабное внедрение стационарной версии голосового помощника было реализовано в Москве, что стало возможным благодаря единой цифровой платформе здравоохранения, разработанной Комплексом социального развития города Москвы и Департаментом информационных технологий.

Возможность голосового ввода для врачей восьми специальностей и мобильное рабочее место

1 июня 2022 года Группа компаний «ЦРТ» представила очередной продуктовый релиз Voice2Med с возможностью голосового заполнения медицинских протоколов на основе искусственного интеллекта.

«Возможности Voice2Med значительно расширены - к имеющимся словарям врача общей практики и педиатра, рентгенолога КТ, МРТ, патоморфолога, врача ультразвуковой диагностики и эндоскописта, кардиолога и хирурга добавлен словарь медицинских терминов - словарь стоматолога. Теперь врачи уже восьми специальностей могут оценить возможности голосового ввода. Кроме того, мы разработали мобильное рабочее место врача сделали возможным использование голосового ввода с помощью планшета, что удобно, когда полноценное рабочее место, со cтационарным компьютером, не доступно. Мобильные рабочие места могут быть востребованы специалистами скорой помощи, патоморфологами. судмедэкспертами, врачами на обходах. Решение позволяет фиксировать детали голосом, не отвлекаясь от проведения операции или обследования, уделять больше времени пациенту, а не рутине», - говорит Дмитрий Дырмовский, генеральный директор группы компаний «ЦРТ».

Voice2Med позволяет в режиме реального времени заполнять медицинские документы, преобразуя голос врача в текст. Во время осмотра врач с помощью специального микрофона надиктовывает информацию, которая моментально расшифровывается и переносится в открытый протокол медицинской информационной системы. Решение, по утверждению компании, экономит более 20% времени врачей на подготовку протоколов. Высокое качество технологии распознавания речи, которая используется в продукте (надежность распознавания достигает 97-98%) и возможность подключения тематических языковых моделей для различных врачебных специализаций обеспечивает наличие по окончанию осмотра полностью заполненного медицинского протокола, требующего минимума исправлений. Кроме того, поддержка голосовых команд значительно повышает эргономичность рабочего места.

Все данные в режиме реального времени синхронизируются с информационными системами. Продукт Voice2Med может устанавливаться в закрытом контуре заказчика, обеспечивая безопасность медицинских и персональных данных. Для упрощения процесса внедрения разработаны коробочные решения для поликлиник и больниц. В состав и стационарного и мобильного рабочего места врача, помимо ПО и обучающих вебинаров, входит профессиональная гарнитура: комплексное решение нивелирует необходимость самостоятельного подбора оптимальных гарнитур - всё доступно в едином решении. Voice2Med входит в реестр Отечественного ПО.

Изначально внедрение стационарной версии Voice2Med было реализовано в Москве, что стало возможным благодаря единой цифровой платформе здравоохранения, разработанной столичным комплексом социального развития и Департаментом информационных технологий. Продукт уже применяется врачами лучевой диагностики: работает в 80 медицинских учреждениях Москвы. Центр диагностики и телемедицины зафиксировал в медицинских организациях Департамента здравоохранения Москвы сокращение на 22% времени на подготовку медицинских протоколов: до внедрения голосового ввода заполнение протокола занимало 5-6 минут, после - 3-4 минуты. Рентгенологи Москвы заполнили уже более 100 тысяч медпротоколов с помощью голоса. Также решение применяется в Мордовии, Удмуртии, Мурманске, Кемерове, Иркутске, более чем в 65 регионах страны, продолжает развиваться и масштабироваться.

2021: Возможность заполнять медицинские документы голосом

Группа компаний ЦРТ (входит в экосистему Сбера) 12 августа 2021 года представила очередной продуктовый релиз Voice2Med с возможностью голосового заполнения медицинских протоколов на основе искусственного интеллекта.

Voice2Med позволяет в режиме реального времени заполнять медицинские документы, преобразуя голос врача в текст. К имеющимся словарям врача общей практики и педиатра, рентгенолога КТ, МРТ, ПЭТ (позитронно-эмиссионная томография), патоморфолога, врача ультразвуковой диагностики и эндоскописта добавлены два словаря медицинских терминов. Это словарь хирурга, используемый при заполнении дневников больных, протоколов операций, в экстренном приемном покое, и словарь кардиолога, применяемый в ходе кардиологических обследований. Для создания словарей было обработано более 500 тыс. обезличенных протоколов, что позволило обеспечить точность распознавания терминов более 93%.

Теперь Voice2Med поддерживает ещё и словари медицинских терминов для хирургов и кардиологов, что позволяет фиксировать детали голосом, не отвлекаясь от проведения операции или обследования, уделять больше времени пациенту, а не рутинному оформлению документов. Кроме того, для упрощения процесса внедрения разработаны коробочные решения для поликлиник и больниц: Voice2Med.Больница и Voice2Med.Поликлиника. В состав рабочего места, помимо ПО и обучающих вебинаров, входит профессиональная гарнитура: комплексное решение нивелирует необходимость самостоятельного подбора оптимальных гарнитур — теперь всё доступно в едином решении, — рассказал Дмитрий Дырмовский, генеральный директор группы компаний ЦРТ.

Voice2Med уже применяется врачами лучевой диагностики: работает в 80 медицинских учреждениях Москвы, 35 медучреждениях Мордовии, а также в Удмуртии, Мурманске, Кемерове, Волгограде и продолжает своё развитие. Во время исследования врач с помощью специального микрофона надиктовывает информацию, которая расшифровывается и переносится в открытый протокол медицинской информационной системы. Высокое качество распознавания речи обеспечивает полностью заполненный медицинский протокол, требующий минимума корректировок. Центр диагностики и телемедицины зафиксировал в медицинских организациях Департамента здравоохранения Москвы сокращение на 22% времени на подготовку медицинских протоколов: до внедрения голосового ввода заполнение протокола занимало 5–6 минут, после — 3–4 минуты.

Ведётся непрерывная работа над расширением перечня отечественных операционных систем, которые поддерживаются Voice2Med. На август 2021 года это различные версии Astra Linux и «Альт».

2015: Описание работы и особенности Voice2Med

Комплекс для голосового заполнения медицинских документов «Voice2Med» использует технологию распознавания естественной слитной русской речи. Технология голосового ввода текста позволяет в режиме реального времени заполнять медицинские документы: во время осмотра врач с помощью гарнитуры надиктовывает информацию, которая моментально расшифровывается и автоматически переносится в открытый протокол. Качество распознавания речи и возможность подключения тематических языковых моделей обеспечивает наличие по окончании процедуры осмотра полностью заполненного медицинского протокола, требующего минимум исправлений.

Ценность система представляет для врачей ультразвуковой диагностики, хирургов, стоматологов и многих других специалистов, руки которых заняты во время осмотра или лечения пациентов. «Voice2Med» интегрируется с медицинскими информационными системами (МИС), позволяет экономить время врачей и обеспечивать достоверность данных.

«Документирование процесса лечения и подготовка медицинских документов отнимает значительную часть времени, отведенного для обследования пациента, даже в клиниках с высоким уровнем автоматизации - более 30% у врача-педиатра и более 40% у врача общей практики. Первые пилотные проекты уже показывали высокую эффективность речевых технологий, которые позволяют врачу сосредоточиться на пациенте, а не на документах, одновременно также повышая качество информации, фиксируемой в электронных медицинских картах», - прокомментировал генеральный директор ЦРТ Дырмовский Дмитрий Викторович .

Описание работы

• Во время осмотра врач надиктовывает текст. Произнесённые данные распознаются в режиме реального времени и автоматически переносятся в состав открытого у врача протокола.
• По окончании процедуры, у врача уже имеется полностью заполненный протокол, т.е. отсутствует необходимость заполнения его вручную.
• Нет необходимости хранить информацию (размеры и другие важные параметры исследования) в памяти или фиксировать на бумаге. Достаточно проговорить и Voice2Med сам внесет в документ все необходимые данные.

Преимущества

• Качество распознавания речи достигает 99.7%
• Распознаются все медицинские термины и выражения
• Система легко адаптируема к произношению человека и обучаема любым тематикам и базам слов
• Voice2Med подстраивается под речь конкретного врача, учитывая персональную хезитацию, возможные дефекты дикции и акценты
• Система умеет распознавать и удалять из протокола паразитную общую лексику, связанную с переговорами персонала в помещении, разговорами с пациентом и т.п.
• Voice2Med поддерживает использование профессиональных гарнитур, благодаря чему в систему не попадают посторонние голоса и шумы
• Решение легко интегрируется со сторонними медицинскими информационными системами (МИС), что обеспечивает быстрое и простое внедрение