Компактная языковая модель Phi Silica стала мультимодальной
Сейчас модель работает только с процессором Snapdragon X, но в ближайшее время появится поддержка чипов от AMD и Intel. Вместо добавления отдельной громоздкой модели для анализа изображений, инженеры Microsoft объединили существующие компоненты.
Базой осталась уже развернутая модель Phi Silica. Для машинного зрения применяется кодировщик изображений Florence, который также используется в предварительной версии Windows Recall и улучшенном поиске на базе ИИ.
И, наконец, разработан небольшой дополнительный модуль «Projector» (всего 80 млн параметров), который преобразует визуальные данные от Florence в формат, понятный Phi Silica. Так Microsoft удалось избежать необходимости развёртывания ещё одной громоздкой модели на устройствах пользователей.
Этого подход позволил сэкономить дисковое пространство и уменьшить вычислительную нагрузку. Кроме этого, повторное использование существующих компонентов сократило затраты и время на обучение моделей.
Главным примером практического применения новой технологии стала функция генерации описаний изображений для незрячих или слабовидящих пользователей. Мультимодальная Phi Silica может генерировать для «Экранного диктора» описания изображений с разной степенью детализации, [media=https://vkvideo.
ru/video-3783130_456239407] Phi Silica создаёт краткие описания изображений из 135 символов в среднем за 4 секунды, тогда как для подробного описания из 400-500 символов требуется около 7 секунд.
Текущая версия оптимизирована для английского языка, но в будущем планируется поддержка других языков. Пример описания изображения с картой острова Оаху Краткое описание: На изображении представлена карта Гавайского острова Оаху, на которой обозначены различные места, такие как мыс Кахуку (Kahuku Point), залив Кавела (Kawela Bay), Кахуку (Kahuku) и другие точки и поселения, включая Перл-Сити (Pearl City) и Эва-Бич (Ewa Beach).
Подробное описание: Изображение представляет собой карту Гавайского острова Оаху, на которой обозначены различные места и географические объекты.
Ключевые места включают мыс Кахуку (Kahuku Point), залив Кавела (Kawela Bay), Кахуку (Kahuku) и Кауаи (Kauai).
Другие примечательные места: Лайе (Laie), Коолау (Koolau), Хауула (Hauula), Пуналу (Punaluu), Мокулея (Mokulēia), Анахулу (Anahulu), Вайалуа (Waialua), Кааава (Kaaawa) и Кауконахуа (Kaukonahua). Также виден Тихий океан (Pacific Ocean). Среди других упомянутых мест — Уитмор-Виллидж (Whitmore Village), гора Кала (Mt.
Kala), мыс Куалоа (Kualoa Point), Вахиава (Wahiawa) и Канеохе (Kaneohe). На изображении также показаны различные поселки и города, такие как Милилани (Mililani), Ахуиману (Ahuimanu), Перл-Сити (Pea.
Microsoft представила языковую модель Phi Silica для Windows Copilot Library На конференции разработчиков Build 2024 Microsoft представила новую компактную языковую модель Phi Silica, которая станет частью библиотеки Windows C …
Интернет и Игры 23:42, мая 22, 2024 | thecommunity.ruMicrosoft представила малую языковую модель Phi-3-Silica для компьютеров Copilot Plus PC Вслед за презентацией компактной ИИ-модели Phi-3-vision, компания Microsoft представила на ежегодной конференции Microsoft Build 2024 ещё одну малую …
Hardware 15:42, мая 22, 2024 | 3dnews.ruКомпактная модель Phi-3-vision от Microsoft умеет «читать» изображения Компания Microsoft анонсировала ИИ-модель Phi-3-vision, новую версию своей небольшой языковой модели Phi-3, способную просматривать изображения и рас …
Hardware 18:18, мая 22, 2024 | 3dnews.ruПароочиститель Hiomee: довольно компактная модель для уборки дома Мы протестировали компактный пароочиститель Hiomee, который легко взять с собой и положить в шопер. В обзоре мы покажем, на каких задачах он работает …
Наука и Технологии 07:26, ноября 28, 2025 | ixbt.comМикроволновая печь Redmond («Редмонд») MW2900: эффективная компактная модель с механическим управлением Redmond MW2900 подкупает своей простотой. В ней нет ничего лишнего и навороченного, только старые добрые механические ручки, довольно высокая мощност …
Наука и Технологии 21:26, февраля 27, 2025 | ixbt.comКофеварка Lex LXCM 3507-1: компактная модель с управлением одной кнопкой и съемным молочным контейнером Lex LXCM 3507-1 — компактная кофеварка для тех, кто ценит простоту и удобство в приготовлении классических напитков дома. Эспрессо, капучино и латте …
Наука и Технологии 00:26, июля 30, 2025 | ixbt.comВидеокарта Palit GeForce RTX 3050 KalmX (6 ГБ): младшая модель в ассортименте производителя, компактная и бесшумная, но с нагревом на пределе Если говорить о GeForce RTX 3050 с 6 ГБ памяти в целом и абстрагироваться от путаницы с наименованием, то этот ускоритель может быть замечательным вы …
Наука и Технологии 21:26, октября 1, 2024 | ixbt.comНазвана языковая ловушка для манипулирования людьми Частица "не" смягчает смысл фразы, а не меняет его на противоположный. Поэтому из фразы "этот кофе не горячий" большинство поймут, что кофе теплый, а …
Наука 15:00, июня 2, 2024 | gazeta.ru
Волгоградская модель стала лучшей женой России 38-летняя волгоградка Вера одержала победу во втором сезоне шоу «Четыре жены». Проект транслируют на телеканале «Пятница». …
Общие новости 12:42, июня 7, 2024 | novostivolgograda.ru БРИКС планирует создание единой транспортной платформы для мультимодальной логистики Страны, состоящие в БРИКС, изучают возможность создания единой транспортной платформы для обеспечения мультимодальной логистики между государствами о …
Экономика 00:26, октября 24, 2024 | pravda.ru Модель выложила фотографию из ресторана в соцсети и стала жертвой киллеров В Эквадоре участница конкурса красоты Лэнди Паррага была убита во время посещения ресторана. Её нашли после того, как она выложила в соцсети фотограф …
Общество и Регионы 00:18, мая 9, 2024 | versia.ru В России модель Chery обзавелась "народной" версией и стала дешевле В России в продаже появился седан Chery Arrizo 8 в "народной" комплектации Comfort. Об этом сообщает портал Quto.ru. Новая версия Comfort теперь стал …
Авто / Мото 21:12, мая 20, 2024 | gazeta.ru Плюс-сайз-модель Сара Милликен стала победительницей конкурса "Мисс Алабама" Плюс-сайз-модель Сара Милликен стала победительницей конкурса красоты "Мисс Алабама" и тут же столкнулась с критикой: 23-летнюю девушку затравили в с …
Знаменитости 19:42, июня 7, 2024 | spletnik.ru Nissan Qashqai подешевел в России. Популярная японская модель стала доступнее китайских аналогов Популярный в России компактный кроссовер Nissan Qashqai, который ввозится по системе параллельного импорта, продолжает дешеветь, пусть и не так быстр …
Наука и Технологии 10:18, апреля 24, 2024 | ixbt.com Популярная японская модель в России стала доступнее китайских аналогов: сколько просят за Nissan Qashqai? Популярный в России компактный кроссовер Nissan Qashqai, который ввозится по системе параллельного импорта, продолжает дешеветь, пусть и не так быстр …
Наука и Технологии 11:24, апреля 24, 2024 | ixbt.com Компактная зарядка Xiaomi 45W GaN оценена в 8 долларов Компания Xiaomi пополнила ассортимент компактных зарядных устройство моделью Xiaomi 45W GaN (Little Pudding), которая может похвастаться мощностью в …
Гаджеты 21:24, мая 20, 2024 | megaobzor.com
Обзор Tronsmart Mirtune H1: компактная походная колонка Обзор портативной колонки Tronsmart Mirtune H1 с металлическим карабином, высокой громкостью и полной влагозащитой. Технические характеристики Tronsm …
Наука и Технологии 21:26, сентября 21, 2024 | androidlime.ru Представлена компактная клавиатура Samsung Smart Keyboard Samsung представила компактную клавиатуру формата tenkeyless, которую можно использовать с смартфоном, планшетом или ноутбуком Galaxy — более того, о …
Наука и Технологии 21:26, ноября 21, 2025 | ilenta.com
Клавиатура Acer OKW302: компактная, яркая и функциональная В начале 2024 года компания Acer представила на российском рынке две новые проводные клавиатуры для геймеров: OKW300 в Full-size форм-факторе и компа …
Наука и Технологии 00:26, сентября 8, 2024 | ict-online.ru Посудомоечная машина Candy CP 6F51LW-08: настольная, компактная и эффективная Настольная посудомоечная машина Candy CP 6F51LW-08 — это оптимальный вариант для небольшой кухни, куда очень хочется, но не получается разместить пол …
Наука и Технологии 21:26, августа 31, 2024 | ixbt.com Insta360 GO Ultra: компактная камера для влогов и экшн-съёмки Insta360 представила новую камеру, которая займёт место между миниатюрной GO и более профессиональной Ace Pro. Insta360 GO Ultra сохранила съёмный фо …
Наука и Технологии 14:26, августа 24, 2025 | itzine.ru Компактная камера Fujifilm X Half возглавила японский рынок Map Camera опубликовал список самых продаваемых фотокамер в Японии за последний месяц. Первое место заняла полукадровая модель Fujifilm X Half, котор …
Гаджеты 07:26, августа 21, 2025 | megaobzor.com «Scirocco — это совершенно особенная модель». Volkswagen ценит свою историю и не собирается превращать модель в кроссовер или внедорожник Volkswagen ценит историю и наследие своих автомобилей и не заинтересована в том, чтобы играть на ностальгии поклонников, используя известные названия …
Наука и Технологии 14:26, марта 3, 2025 | ixbt.com Тест и обзор: Lian Li O11 Vision Compact – компактная версия стеклянного панорамного корпуса Панорамные корпуса часто бывают слишком просторными. С моделью O11 Vision Compact компания Lian Li предлагает компактный вариант, который подходит дл …
Наука и Технологии 00:26, октября 25, 2024 | hardwareluxx.ru