lab Microsoft Research Blog · 98 д назад · research

Talos: автоматизированный пересмотр геномных данных для диагностики редких заболеваний

Переведено с English → Русский

Talos — это открытый инструмент, который автоматизирует итеративный пересмотр геномных данных для выявления диагнозов редких заболеваний. Он достиг 90% восстановления диагнозов в рамках охвата при только 1,3 кандидатных вариантах на пациента, и предоставил 241 новый диагноз среди 5 000 незапланированных пациентов, при этом большинство новых находок появлялись в течение 32 дней после публикации доказательств.

Важность 2/3 Доверие 3/3 Microsoft Research Blog Microsoft Research Evaluation & benchmarks Research paper

Оригинал

Стабилизация намерения инструмента в потоковом RAG

Исследование оценивает стабилизацию намерения инструмента в потоковом RAG, определяя момент, когда спекулятивные запросы на инструменты сходятся к правильным ответам. На бенчмарке CRAG 73,9% запросов позволяют значительное скрытие задержки, при этом ранняя стабилизация наблюдается в вопросах с прямым извлекаемым доказательством. Тип вопроса значительно предсказывает раннюю или позднюю стабилизацию, что позволяет определить, когда спекулятивные триггеры оказываются эффективными.

arxiv arXiv cs.CL · 2 д назад · 1 просмотр

Rep2Act выравнивает представления VLM для улучшения отказа от ответов на новом бенчмарке VAD-R

Исследователи представляют Visual Answerability Diagnosis with Rationales (VAD-R), новый бенчмарк, предназначенный для оценки способности моделей «зрение-язык» воздерживаться от ответов на вопросы, не имеющие ответа, без использования упрощающих подсказок. Исследование показывает, что, хотя скрытые состояния могут различать наличие ответа, текущие модели не способны перевести это в явные решения.

lab Microsoft Research Blog · 9 д назад · 62 просмотра

Microsoft выпустила RetroChimera для предсказания ретросинтеза

Microsoft Research опубликовала и открыла исходный код RetroChimera, новой системы для предсказания ретросинтеза, которая объединяет две взаимодополняющие модели для предложения высококачественных путей синтеза. Система интегрирует R-SMILES 2, модель на основе Transformer для de-novo генерации, с NeuralLoc, моделью на основе графовых нейронных сетей (GNN), используя обученную стратегию ансамблирования для ранжирования предсказаний.

media Hugging Face Forums · 10 д назад · 22 просмотра

Исследователь ищет одного независимого аннотатора для разрешения неоднозначности согласия LLM

Исследователь просит одного независимого человеческого аннотатора разметить 100 турецких нарративных сцен, чтобы определить, обусловлено ли низкое межрейтерское согласие интерпретационной природой задачи или нечёткими определениями аннотации. Исследование показало, что четыре LLM и детектор на основе правил согласовывались друг с другом и человеческим эталоном примерно на уровне случайного угадывания, при этом значения κ Коэна варьировались от 0.000 до 0.185.

media Hugging Face Forums · 17 д назад · 29 просмотров

Исследование выявляет FragileTokens, не справляющиеся с контекстным копированием, несмотря на успешное прохождение изоляционных тестов

В исследовании описываются «FragileTokens» — элементы словаря моделей языка с открытым весом, которые успешно копируются при изоляции, но демонстрируют ошибки при встраивании в окружающий текст. Исследование подчеркивает, что буквальное сохранение идентичности не гарантируется стандартными изоляционными тестами, поскольку токены могут быть удалены, заменены или усечены внутри последовательностей.