ChatGPT на основе зрения демонстрирует дефицит интерпретации радиологических изображений
Результаты исследования были опубликованы в журнале Radiology. Chat GPT-4 Vision — первая версия большой языковой модели, которая может интерпретировать как текст, так и изображения.
«ChatGPT-4 показал себя многообещающим инструментом для помощи рентгенологам в таких задачах, как упрощение отчетов по рентгенологии для пациентов и определение соответствующего протокола для визуализационных исследований», — сказал Чад Клочко, доктор медицины, рентгенолог опорно-двигательного аппарата и исследователь искусственного интеллекта (ИИ) в Henry Ford Health в Детройте, штат Мичиган.
«Благодаря возможностям обработки изображений GPT-4 Vision открывает новые потенциальные возможности для применения в радиологии».
Для исследования исследовательская группа доктора Клочко использовала устаревшие вопросы из Американского колледжа радиологии Diagnostic Radiology In-Training Examinations, серии тестов, используемых для оценки прогресса резидентов-радиологов.
После исключения дубликатов исследователи использовали 377 вопросов в 13 доменах, включая 195 вопросов, которые были только текстовыми, и 182 вопроса, которые содержали изображение.
GPT-4 Vision ответила правильно на 246 из 377 вопросов, получив общий балл 65,3%.
Модель правильно ответила на 81,5% (159) из 195 текстовых запросов и на 47,8% (87) из 182 вопросов с изображениями. «Точность 81,5% для текстовых вопросов отражает производительность предшественника модели», — сказал он.
«Эта согласованность в текстовых вопросах может указывать на то, что модель имеет определенную степень текстового понимания в радиологии». Радиология мочеполовой системы была единственной подспециализацией, в которой GPT-4 Vision показала лучшие результаты по вопросам с изображениями (67%, или 10 из 15), чем по вопросам, содержащим только текст (57%, или четыре из семи).
Модель показала лучшие результаты по вопросам, содержащим только текст, во всех других подспециализациях.
Модель показала наилучшие результаты на вопросах, основанных на изображениях, в областях грудной клетки и мочеполовой системы, правильно ответив на 69% и 67% вопросов, содержащих изображения, соответственно.
Наихудшие результаты модель показала на вопросах, содержащих изображения, в области ядерной медицины, правильно ответив только на два из 10 вопросов.
В исследовании также оценивалось влияние различных подсказок на эффективность GPT-4 Vision. Оригинал: Вы сдаете экзамен по рентгенологии.
Изображения вопросов будут загружены. Выберите правильный ответ на каждый вопрос. Базовый: Выберите единственный лучший ответ на следующий вопрос экзамена по рентгенологии для пенсионеров. Краткая инструкция: Это вопрос экзамена на должность рентгенолога для пенсионеров, чтобы оценить ваши медицинские знания.
Выберите одну лучшую букву от.
Использование иллюстраций для обучения системы компьютерного зрения без изображений распознаванию реальных фотографий Вы, вероятно, слышали, что изображение стоит тысячи слов, но может ли модель большого языка (LLM) получить изображение, если оно никогда раньше не ви …
Интернет и Игры 00:26, июня 22, 2024 | android-robot.comУченые улучшили качество изображений камеры на основе металинзы Исследователи из Китая научили искусственный интеллект улучшать качество фотографий с камер на металинзах. Металинзы — это очень тонкие пластины, кот …
Наука и Технологии 05:12, мая 17, 2024 | ferra.ru
Отчет Bitget о прозрачности за второй квартал 2025 года демонстрирует высокие результаты с точки зрения влияния, инноваций и роста Bitget, ведущая мировая криптовалютная биржа и компания Web3, опубликовала свой... Сообщение Отчет Bitget о прозрачности за второй квартал 2025 года …
Наука и Технологии 07:26, июля 21, 2025 | gadgets.su
Машина зрения: в России разработали робота-поводыря с ChatGPT Гаджет может читать надписи на упаковках и выбирать наиболее свежие продукты, а также ориентироваться в пространстве …
Общие новости 10:42, апреля 19, 2024 | iz.ruTECNO представит систему обработки изображений на основе ИИ и процессора собственной разработки на MWC 2024 Бренд TECNO готовится представить новую технологию обработки изображений TECNO PolarAce на выставке MWC 2024 в Барселоне. Это будет первая подобная т …
Наука и Технологии 10:54, мая 17, 2024 | droider.ruИИ выявил ошибки в радиологических отчетах на уровне профессионалов Недавнее исследование, опубликованное в журнале Radiology, показало, что большие языковые модели, такие как GPT-4, способны обнаруживать ошибки в рад …
Наука и Технологии 12:48, апреля 17, 2024 | ferra.ru
Дефицит, перепроизводство и снова дефицит. Производители SSD кошмарят пользователей, продавая накопители ИИ-компаниям и завышая цены Цены на SSD стремительно растут, но если раньше виноваты в этом были только производители накопителей и памяти, создавшие искусственный дефицит, то т …
Наука и Технологии 12:48, мая 31, 2024 | zoom.cnews.ru«Существует проблема интерпретации» // Педагоги — о нагрузке на школьников из-за контрольных работ Контрольные работы в школах не должны занимать больше 10% учебного времени. Об этом в ходе Петербургского международного экономического форума заявил …
Общество и Регионы 16:06, июня 9, 2024 | kommersant.ru
ChatGPT пошатнул ещё один из столпов Google — chatgpt.com набирает популярность в качестве домашней страницы Многие платные пользователи ChatGPT стали добавлять сервис как домашнюю страницу в браузере или иными способами ускоряют свой доступ к сервису. Это г …
Hardware 00:26, января 22, 2026 | 3dnews.ru
Архитектура классицизма в ювелирной интерпретации // Бренд Epic Jewellery представил капсулу подвесок «Львов» по мотивам беседки-ротонды Российская ювелирная компания уже три года является партнером Музея архитектуры им. А. В. Щусева (МуАр) и принимает активное участие в его выставочны …
Знаменитости 21:36, апреля 23, 2024 | kommersant.ru iPhone 17 Pro демонстрирует высокий FPS в играх Apple сняла эмбарго на обзоры iPhone 17 Pro и iPhone 17 Pro Max, и интернет тут же заполонили тесты новых флагманов. Главное внимание, разумеется, пр …
Гаджеты 21:26, сентября 18, 2025 | megaobzor.com
Релиз инструментария для обработки изображений G'MIC 3.6 Состоялся релиз фреймворка G'MIC 3.6, предоставляющего универсальный язык сценариев для обработки изображений и графические интерфейсы для преобразов …
Интернет и Игры 00:26, августа 25, 2025 | opennet.ru Intel демонстрирует сверхбыструю версию Thunderbolt Интерфейс обеспечивает обмен данными с периферийными устройствами на скорости 80 Гбит/с — как только что анонсированная спецификация USB4. Компания I …
Наука и Технологии 14:42, мая 16, 2024 | cwr.osp.ru Доллар демонстрирует первое месячное снижение за ... График индекса доллара интервалами в 1 неделю Доллар снизился во вторник, но оставался в узких диапазонах по отношению к другим валютам в преддверии …
Forex 16:18, мая 28, 2024 | profinance.ru
Нефть демонстрирует самый значительный недельный ... Цена на нефть марки Brent, являющейся мировым эталонным сортом, выросла примерно на 8% за неделю. Это самый значительный рост с начала года. В пятниц …
Экономика и Финансы 07:26, октября 6, 2024 | profinance.ru
Экономика Москвы демонстрирует уверенный рост Экономика столицы показывает высокие темпы роста, несмотря на глобальные вызовы. Об этом сообщил мэр Москвы Сергей Собянин, слова которого приводит п …
Экономика 21:26, июля 11, 2025 | mockva.ru Sollers демонстрирует рост продаж в 2,5 раза Sollers демонстрирует рост продаж в 2,5 раза. 4451 автомобиль Sollers нашел своих покупателей за первые пять месяцев 2024 года. По сравнению с аналог …
Бизнес и Промышленность 11:12, июня 4, 2024 | finam.ru Утечка живых изображений Google Pixel 9 Pro Согласно недавним слухам, Google планирует выпустить три новых смартфона на своем ежегодном мероприятии в октябре - Pixel 9, Pixel 9 Pro и Pixel 9 Pr …
Гаджеты 12:36, апреля 21, 2024 | gagadget.com Выставка-перфоманс или трансформация изображений и пространства Проект создан на основе техники двойного изображения. Благодаря инсталляциям, интерактивным, кинетическим, световым объектам и артистам балета изобра …
Культура и искусство 21:26, октября 27, 2024 | versia.ru
OpenAI разработала инструмент для обнаружения ИИ-изображений Американская компания OpenAI, разработчик чат-бота ChatGPT, разработала инструмент для обнаружения изображений, созданных системой искусственного инт …
Экономика и Финансы 21:12, мая 7, 2024 | finam.ru РУСАДА: Валиева демонстрирует уважение к антидопинговым правилам Генеральный директор Российского антидопингового агентства (РУСАДА) Вероника Логинова оценила позицию фигуристки Камилы Валиевой по антидопинговым пр …
Общие новости 21:26, января 25, 2025 | russian.rt.com
EUR: пара EURUSD демонстрирует редкий позитивный настрой - ING В настоящее время экономике еврозоны не о чем кричать. А отскок в китайской экономике остается маловероятным, отмечает валютный стратег ING Крис Терн …
Forex 00:26, августа 16, 2024 | fxteam.ru
Представлен формат сжатия изображений Spectral JPEG XL Инженеры из компании Intel представили формат изображений Spectral JPEG XL, оптимизированный для эффективного сжатия изображений, охватывающих област …
Наука и Технологии 21:26, апреля 1, 2025 | opennet.ru iPhone 16 Pro поддерживает новейший формат изображений JPEG XL Модели iPhone 16 Pro будут поддерживать формат JPEG XL, согласно информации, опубликованной в исходном коде iOS 18. По сравнению с JPEG, JPEG XL обес …
Наука и Технологии 07:26, сентября 10, 2024 | ixbt.com