본문으로 건너뛰기
ToolPotion
AI 어드바이저
제출 (무료)

Portal2Bench

AI 앱AI 에이전트 빌더API List Prices · 웹

Portal2Bench는 비디오 게임 Portal 2에서 AI 에이전트가 테스트 챔버를 해결하는 능력을 평가하는 벤치마크입니다. 이 플랫폼은 성공률, 실행 비용 및 실행된 계획을 추적하여 에이전트 성능을 측정하며, 자원과 행동에 대한 엄격한 제한을 둡니다. 이 플랫폼은 복잡한 가상 세계에서 다양한 AI 모델의 문제 해결 능력을 비교할 수 있는 표준화된 환경을 제공합니다.

URL 방문
공유
Portal2Bench 스크린샷
Portal2Bench 스크린샷

Portal2Bench는 Valve의 Portal 2의 복잡한 환경 내에서 AI 에이전트의 문제 해결 능력을 평가하기 위해 설계된 전문 벤치마크입니다. 이 플랫폼은 AI 에이전트가 게임의 2장부터 5장까지의 26개의 독립적인 테스트 챔버를 얼마나 효과적으로 탐색하고 완료할 수 있는지를 측정합니다. 각 챔버는 에이전트에게 새로운 독립적인 도전을 제공합니다.

더 읽기

핵심 방법론은 AI 모델이 정보를 처리하고 다음 행동을 계획하는 동안 Portal 2를 일시 중지하는 것입니다. 에이전트는 키 입력과 시점 전환을 통해 게임과 상호작용하며, 스크린샷과 게임 세계 내 현재 위치와 같은 실시간 피드백을 받습니다. 공정하고 통제된 평가를 보장하기 위해 에이전트는 내부 처리를 위한 제한된 '노트 폴더'를 제공받지만, 셸, 웹 또는 콘솔과 같은 외부 자원에 대한 접근은 엄격히 금지됩니다.

챔버는 AI 에이전트가 엄격한 제한 내에서 다음 맵에 성공적으로 도달할 경우에만 '해결'된 것으로 간주됩니다: 최대 300개의 '계획'(아마도 행동 또는 계산 단계)과 모델 사용에 대한 API 목록 가격을 기준으로 계산된 $30의 비용 한도입니다. 이 이중 제약은 AI 에이전트 성능에서 효율성과 경제적 실행 가능성을 강조합니다.

Portal2Bench는 '부정행위'에 대한 우려를 해결하기 위해 강력한 QA 검사를 구현합니다. 에이전트는 지정된 노트 폴더에 제한되어 있어 무단 외부 상호작용을 방지합니다. 에이전트가 게임 내에서 '죽음'을 맞이할 경우, 일반적인 Portal 2 게임 플레이와 유사하게 마지막 체크포인트에서 다시 태어나며, 추가적인 맥락 없이 단순히 자신의 죽음을 통보받습니다. 이 벤치마크는 Valve와 제휴하거나 승인되지 않았음을 명시하여 독립적인 연구 초점을 보장합니다.

  • 카테고리AI 에이전트 빌더
  • 요금제API List Prices
  • 배포클라우드
  • 플랫폼웹

  • Portal 2에 대한 AI 에이전트 성능 벤치마킹

  • 26개의 독립적인 테스트 챔버 평가

  • 챔버당 계획(300) 및 비용($30)에 대한 엄격한 제한

  • 키 입력 및 시점 전환을 통한 실시간 게임 상호작용

  • 스크린샷 및 위치 데이터를 통한 시각적 입력

  • 셸, 웹 또는 콘솔 접근이 없는 격리된 환경

  • 에이전트 처리를 위한 내부 '노트 폴더'

  • 에이전트 사망 시 체크포인트에서의 리스폰 메커니즘

  • 비용 계산에 사용되는 API 목록 가격

  • 무단 에이전트 행동 방지를 위한 QA 검사

  • 다양한 AI 모델에 대한 리더보드 추적

  • Valve와 제휴하지 않은 독립 연구 플랫폼

  1. 목표 이해하기: Portal2Bench가 AI 에이전트의 Portal 2 테스트 챔버 해결 능력을 평가한다는 것을 배우십시오.

  2. 벤치마킹 기준 검토하기: 성공은 300개의 계획과 $30의 비용 한도 내에서 챔버를 해결하는 것으로 정의됩니다.

  3. 에이전트 상호작용 관찰하기: 에이전트가 키를 보내고 시점을 전환하는 동안 스크린샷과 위치 데이터를 받는 방식을 확인하십시오.

  4. 모델 성능 확인하기: 리더보드를 확인하여 다양한 AI 모델이 벤치마크에서 어떻게 수행되는지 비교하십시오.

  5. 비용 및 효율성 분석하기: 챔버당 비용, 챔버당 계획 및 챔버당 시간 지표를 검토하여 통찰력을 얻으십시오.

  • AI 에이전트 성능 평가
  • 게임 AI 연구
  • 비교 AI 벤치마킹
  • AI 모델의 비용 효율성 분석
  • AI 계획 및 전략 개발

Portal2Bench 리뷰

로딩 중...

Portal2Bench와(과) 비슷한 인기 AI 도구

Sketch Stadium은 AI 에이전트와 연결하고 게임을 플레이하기 위해 설계된 온라인 플랫폼입니다. 사용자가 자신이 만든 에이전트를 통합하여 다양한 게임 시나리오에 참여할 수 있는 환경을 제공합니다. 이 플랫폼은 에이전트 기반 게임 플레이를 촉진하는 데 중점을 두며, 구조화된 게임 생태계 내에서 개발, 테스트 및…

AI 게임 개발 도구게임 및 e스포츠
도구 보기

AI 에이전트와 연결하고 게임을 플레이하기 위해 설계된 온라인 플랫폼입니다. 사용자가 자신이 만든 에이전트를 통합하여 다양한 게임 시나리오에 참여할 수 있는 환경을 제공합니다. 이 플랫폼은 에이전트 기반 게임 플레이를 촉진하는 데 중점을 두며, 구조화된 게임 생태계 내에서 개발, 테스트 및…Sketch Stadium은 AI 에이전트와 연결하고 게임을 플레이하기 위해 설계된 온라인 플랫폼입니다. 사용자가 자신이 만든 에이전트를 통합하여 다양한 게임 시나리오에 참여할 수 있는 환경을 제공합니다. 이 플랫폼은 에이전트 기반 게임 플레이를 촉진하는 데 중점을 두며, 구조화된 게임 생태계 내에서 개발, 테스트 및…

AI 게임 개발 도구게임 및 e스포츠
AI 앱 TOP 250 보기

nunu.ai는 AI 에이전트를 통해 게임 테스트를 자동화하여 수작업 비용을 최대 50%까지 줄입니다. 인간과 유사한 인터페이스를 제공하며 여러 플랫폼을 지원하여 실시간 모니터링과 상세한 통찰력을 제공합니다.

AI 코드 리뷰 및 테스트게임 및 e스포츠

AI 코드 리뷰 및 테스트 106위

도구 보기

AI 에이전트를 통해 게임 테스트를 자동화하여 수작업 비용을 최대 50%까지 줄입니다. 인간과 유사한 인터페이스를 제공하며 여러 플랫폼을 지원하여 실시간 모니터링과 상세한 통찰력을 제공합니다.nunu.ai는 AI 에이전트를 통해 게임 테스트를 자동화하여 수작업 비용을 최대 50%까지 줄입니다. 인간과 유사한 인터페이스를 제공하며 여러 플랫폼을 지원하여 실시간 모니터링과 상세한 통찰력을 제공합니다.

AI 코드 리뷰 및 테스트게임 및 e스포츠
AI 코드 리뷰 및 테스트 106위

Otto

AI 앱

Otto는 미리 정의된 기준에 따라 자신의 작업을 평가하는 터미널 AI 에이전트입니다. 코드베이스와 브라우저를 포함한 다양한 플랫폼에서 작동하며, 높은 정확도와 효율성을 보장하기 위해 루브릭 우선 평가기와 계층 메모리를 사용합니다.

AI 에이전트 빌더

브라우저 및 웹 자동화 63위

도구 보기

AI 앱

미리 정의된 기준에 따라 자신의 작업을 평가하는 터미널 AI 에이전트입니다. 코드베이스와 브라우저를 포함한 다양한 플랫폼에서 작동하며, 높은 정확도와 효율성을 보장하기 위해 루브릭 우선 평가기와 계층 메모리를 사용합니다.Otto는 미리 정의된 기준에 따라 자신의 작업을 평가하는 터미널 AI 에이전트입니다. 코드베이스와 브라우저를 포함한 다양한 플랫폼에서 작동하며, 높은 정확도와 효율성을 보장하기 위해 루브릭 우선 평가기와 계층 메모리를 사용합니다.

AI 에이전트 빌더
브라우저 및 웹 자동화 63위

Windows Agent Arena

AI 프레임워크

Windows Agent Arena(WAA)는 Windows OS에서 멀티모달 AI 에이전트를 평가하기 위한 확장 가능하고 오픈 소스인 프레임워크입니다. 다양한 작업을 통해 에이전트 워크플로를 테스트할 수 있는 현실적인 환경을 제공하며, 데스크톱 운영 체제에서 AI 에이전트의 기능을 신속하게 벤치마킹하고 연구할 수…

AI 에이전트 빌더
도구 보기

AI 프레임워크

Windows OS에서 멀티모달 AI 에이전트를 평가하기 위한 확장 가능하고 오픈 소스인 프레임워크입니다. 다양한 작업을 통해 에이전트 워크플로를 테스트할 수 있는 현실적인 환경을 제공하며, 데스크톱 운영 체제에서 AI 에이전트의 기능을 신속하게 벤치마킹하고 연구할 수…Windows Agent Arena(WAA)는 Windows OS에서 멀티모달 AI 에이전트를 평가하기 위한 확장 가능하고 오픈 소스인 프레임워크입니다. 다양한 작업을 통해 에이전트 워크플로를 테스트할 수 있는 현실적인 환경을 제공하며, 데스크톱 운영 체제에서 AI 에이전트의 기능을 신속하게 벤치마킹하고 연구할 수…

AI 에이전트 빌더
AI 프레임워크 TOP 50 보기

Tabloy AI Agent는 앱, 웹사이트 및 3D 게임을 구축하고, 문서 및 비디오를 생성하며, 웹 조사를 수행하는 다재다능한 AI 도구입니다. 설치 없이 브라우저에서 직접 작동하여 매끄러운 경험을 제공합니다.

AI 에이전트 빌더

AI 웹사이트 빌더 197위

도구 보기

앱, 웹사이트 및 3D 게임을 구축하고, 문서 및 비디오를 생성하며, 웹 조사를 수행하는 다재다능한 AI 도구입니다. 설치 없이 브라우저에서 직접 작동하여 매끄러운 경험을 제공합니다.Tabloy AI Agent는 앱, 웹사이트 및 3D 게임을 구축하고, 문서 및 비디오를 생성하며, 웹 조사를 수행하는 다재다능한 AI 도구입니다. 설치 없이 브라우저에서 직접 작동하여 매끄러운 경험을 제공합니다.

AI 에이전트 빌더
AI 웹사이트 빌더 197위

WorldClaw

AI 앱

WorldClaw는 AI 에이전트를 위한 운영 체제로, WorldRouter를 통해 300개 이상의 AI 모델에 접근할 수 있습니다. 경쟁력 있는 토큰 패키지를 제공하며, 사용자가 AI 에이전트를 쉽게 배포할 수 있도록 하여 다양한 애플리케이션에서 생산성을 향상시킵니다.

AI 에이전트 빌더

자동화 및 에이전트 174위

도구 보기

AI 앱

AI 에이전트를 위한 운영 체제로, WorldRouter를 통해 300개 이상의 AI 모델에 접근할 수 있습니다. 경쟁력 있는 토큰 패키지를 제공하며, 사용자가 AI 에이전트를 쉽게 배포할 수 있도록 하여 다양한 애플리케이션에서 생산성을 향상시킵니다.WorldClaw는 AI 에이전트를 위한 운영 체제로, WorldRouter를 통해 300개 이상의 AI 모델에 접근할 수 있습니다. 경쟁력 있는 토큰 패키지를 제공하며, 사용자가 AI 에이전트를 쉽게 배포할 수 있도록 하여 다양한 애플리케이션에서 생산성을 향상시킵니다.

AI 에이전트 빌더
자동화 및 에이전트 174위

modl.ai

AI 앱

modl.ai는 AI 에이전트와 분석가를 사용하여 게임 테스트 및 품질 보증(QA)을 자동화하여 팀이 SDK나 코드 없이도 더 빠르게 버그, 결함 및 성능 문제를 찾을 수 있도록 합니다. 이는 테스트 프로세스를 간소화하고 게임 품질을 향상시킵니다.

AI 게임 개발 도구게임 및 e스포츠

게임 및 엔터테인먼트 19위

도구 보기

AI 앱

AI 에이전트와 분석가를 사용하여 게임 테스트 및 품질 보증(QA)을 자동화하여 팀이 SDK나 코드 없이도 더 빠르게 버그, 결함 및 성능 문제를 찾을 수 있도록 합니다. 이는 테스트 프로세스를 간소화하고 게임 품질을 향상시킵니다.modl.ai는 AI 에이전트와 분석가를 사용하여 게임 테스트 및 품질 보증(QA)을 자동화하여 팀이 SDK나 코드 없이도 더 빠르게 버그, 결함 및 성능 문제를 찾을 수 있도록 합니다. 이는 테스트 프로세스를 간소화하고 게임 품질을 향상시킵니다.

AI 게임 개발 도구게임 및 e스포츠
게임 및 엔터테인먼트 19위

Cadenya

AI 앱

Cadenya는 도구, 에이전트 및 목표를 통합하여 테스트 및 효율성을 향상시키는 에이전트 런타임 플랫폼입니다. 사용자는 기존 API를 수정하지 않고도 에이전트를 구축하고 개선할 수 있으며, 웹후크, SSE 및 프론트엔드 위젯과 같은 기능을 제공합니다.

AI 에이전트 빌더
도구 보기

AI 앱

도구, 에이전트 및 목표를 통합하여 테스트 및 효율성을 향상시키는 에이전트 런타임 플랫폼입니다. 사용자는 기존 API를 수정하지 않고도 에이전트를 구축하고 개선할 수 있으며, 웹후크, SSE 및 프론트엔드 위젯과 같은 기능을 제공합니다.Cadenya는 도구, 에이전트 및 목표를 통합하여 테스트 및 효율성을 향상시키는 에이전트 런타임 플랫폼입니다. 사용자는 기존 API를 수정하지 않고도 에이전트를 구축하고 개선할 수 있으며, 웹후크, SSE 및 프론트엔드 위젯과 같은 기능을 제공합니다.

AI 에이전트 빌더
AI 앱 TOP 250 보기
1/8