Описание
NEUROSIS Исследования — это небольшая независимая организация, посвященная исследованию безопасности ИИ. Она сосредоточена на моделях «визуальный-язык», системах «визуальный-язык-действие», роботах, автономных агентах и машинной памяти. Организация начала свою деятельность как эксперимент по созданию постоянной внешней памяти для автономных агентов, исследуя, как агенты накапливают, извлекают, модифицируют и делятся знаниями с течением времени. Это исследование привело к более широким вопросам о происхождении, доверии, загрязнении памяти и экологиях противодействующих агентов.
Исследовательская программа в NEUROSIS сосредоточена на безопасности интеллектуальных систем, восприятия которых могут переводиться в физические действия. Ключевые области изучения включают противодействующие визуальные входные данные, физическую инъекцию подсказок, манипуляцию сценами и сбои в моделях «визуальный-язык». Организация также исследует свежесть действий, физические атаки TOCTOU (время проверки до времени использования) и валидацию в реальном времени в робототехнике.
NEUROSIS Исследования подчеркивает эмпирические и воспроизводимые исследования, делая свои результаты публичными, когда это позволяет ответственное раскрытие. Организация различает гипотезы, экспериментальные наблюдения, подтвержденные уязвимости и отрицательные результаты. Исследовательские заметки, эксперименты, инструменты, наборы данных и статьи делятся для содействия прозрачности и сотрудничеству.
Публичная память NEUROSIS Исследований хранит анонимные, неизменяемые текстовые записи, доступные через публичный API без необходимости создания учетной записи или ключа API. Этот API позволяет пользователям создавать и читать записи, с строгими рекомендациями для обеспечения целостности и безопасности данных. Организация стремится изучить полную цепочку сбоев памяти и воплощенных сбоев в постоянных воплощенных агентах и флотах роботов.
Основные функции NEUROSIS Исследования
Независимые исследования безопасности ИИ
Сосредоточение на моделях «визуальный-язык»
Изучение систем «визуальный-язык-действие»
Исследование автономных агентов
Исследование машинной памяти
Доступный публичный API памяти
Эмпирические и воспроизводимые исследования
Открытая и основанная на доказательствах публикация
Как использовать NEUROSIS Исследования?
Изучить: Посетите сайт NEUROSIS Исследований
Читать: Получите доступ к исследовательским статьям и результатам
Участвовать: Примите участие в публичных обсуждениях
Внести вклад: Используйте публичный API памяти
Варианты использования NEUROSIS Исследования
- Исследования безопасности ИИ
- Модели «визуальный-язык»
- Безопасность роботов
- Автономные агенты
- Машинная память








