HyperTeams같은 모델, 같은 400문제.
브라우저만 바꿨습니다.
에이전트가 웹을 쓰는 손인 브라우저 도구 일곱 개를, 같은 Claude Code · 같은 모델로 모든 과제를 끝까지 돌렸습니다. 하이퍼팀즈의 내장 브라우저가 종합 점수와 전체 과제 정확도에서 1위이고, 가장 빨리 끝냅니다.
- 종합 점수 84.9
- 종합 정확도 83.9%
- 실제 서비스 REAL 74%
- 웹 조작 MiniWoB++ 95%
- 1위HyperTeamsHyperTeams84.983.9%
- 2위AsideAside83.982.2%
- 3위Ego LiteEgo Lite81.980.4%
- 4위Playwright MCPPlaywright MCP81.680.9%
- 5위agent-browseragent-browser80.880.6%
- 6위DevTools MCPChrome DevTools MCP80.380.1%
- 7위browser-usebrowser-use80.280.1%
- 모델 — 일곱 도구 모두 Claude Sonnet 5
- 1
- 과제 — 공개 벤치마크 4종과 프롬프트 인젝션 8개
- 400
- 브라우저 도구 — 같은 지시문 · 같은 시간 제한
- 7
- AI 채점 — 전부 프로그램이 채점
- 0
벤치별 결과
칸 색이 진할수록 많이 풀었습니다.
옆으로 밀어 일곱 도구를 모두 보세요
| 벤치마크 | HyperTeams | Aside | Ego Lite | Playwright MCP | DevTools MCP | browser-use | agent-browser |
|---|---|---|---|---|---|---|---|
| 종합벤치마크 4종 통과율의 평균 | 84.9 | 83.9 | 81.9 | 81.6 | 80.3 | 80.2 | 80.8 |
| 종합 정확도392과제 중 푼 비율 | 83.9% | 82.2% | 80.4% | 80.9% | 80.1% | 80.1% | 80.6% |
| REAL원 저자의 설명 보기(새 창)121과제 | 74%89/12195% 신뢰구간 65–81 | 69%83/12195% 신뢰구간 60–76 | 69%83/12195% 신뢰구간 60–76 | 70%85/12195% 신뢰구간 62–78 | 69%83/12195% 신뢰구간 60–76 | 70%85/12195% 신뢰구간 62–78 | 70%85/12195% 신뢰구간 62–78 |
| WebGames원 저자의 설명 보기(새 창)53문제 | 96%51/5395% 신뢰구간 87–99 | 98%52/5395% 신뢰구간 90–100 | 93%49/5395% 신뢰구간 82–97 | 91%48/5395% 신뢰구간 80–96 | 87%46/5395% 신뢰구간 75–94 | 87%46/5395% 신뢰구간 75–94 | 87%46/5395% 신뢰구간 75–94 |
| MiniWoB++원 저자의 설명 보기(새 창)128과제 | 95%122/12895% 신뢰구간 90–98 | 92%118/12895% 신뢰구간 86–96 | 88%112/12895% 신뢰구간 81–92 | 92%118/12895% 신뢰구간 86–96 | 94%120/12895% 신뢰구간 88–97 | 94%120/12895% 신뢰구간 88–97 | 94%120/12895% 신뢰구간 88–97 |
| GAIA 웹원 저자의 설명 보기(새 창)90문제 | 74%67/9095% 신뢰구간 65–82 | 77%69/9095% 신뢰구간 67–84 | 79%71/9095% 신뢰구간 69–86 | 73%66/9095% 신뢰구간 63–81 | 72%65/9095% 신뢰구간 62–80 | 70%63/9095% 신뢰구간 60–79 | 72%65/9095% 신뢰구간 62–80 |
74%실제 서비스에서 일을 끝까지 해낸 것도 가장 많습니다
메일 · 쇼핑 · 식당 예약 · 일정 · 채용처럼 실제 서비스를 복제한 사이트 11곳에서, 일을 마친 뒤 사이트에 남은 상태로 채점합니다. 하이퍼팀즈가 89/121로 1위입니다.
같은 과제끼리 짝지어 보면 여섯 도구 모두보다 더 많이 풀었습니다.
같은 과제, 한쪽만 푼 수
하이퍼팀즈만상대만- Aside82
- Ego Lite71
- Playwright MCP51
- Chrome DevTools MCP93
- browser-use62
- agent-browser51
둘 다 풀었거나 둘 다 못 푼 과제는 세지 않습니다(McNemar 검정).
95%페이지를 직접 다루는 과제에서 가장 많이 풀었습니다
폼 · 목록 · 달력 · 드래그처럼 페이지를 직접 조작하는 과제를 페이지가 스스로 채점합니다. 하이퍼팀즈가 122/128로 1위입니다.
같은 과제끼리 짝지어 보면 Ego Lite보다 통계적으로 확실하게 더 많이 풀었습니다.
같은 과제, 한쪽만 푼 수
하이퍼팀즈만상대만- Aside73
- Ego Lite확실한 차이 · p 0.031144
- Playwright MCP40
- Chrome DevTools MCP64
- browser-use53
- agent-browser31
둘 다 풀었거나 둘 다 못 푼 과제는 세지 않습니다(McNemar 검정).
MiniWoB++
다음으로 빠른 도구보다 11초 짧음- HyperTeams 25초
- Playwright MCP 36초
- DevTools MCP 69초
- Aside 79초
- agent-browser 93초
- Ego Lite 107초
- browser-use 114초
REAL
- HyperTeams 85초
- DevTools MCP 85초
- agent-browser 90초
- Playwright MCP 92초
- browser-use 108초
- Aside 135초
- Ego Lite 190초
가장 빨리 끝냅니다
푼 과제에 걸린 시간의 중앙값입니다. 하이퍼팀즈는 MiniWoB++ 에서 가장 짧았고, REAL 에서도 가장 짧은 편이었습니다.
점 하나가 도구 하나입니다.
에이전트가 막히면, 어디서 넘겨받을 수 있나요?
몇 시간짜리 일을 맡기면 사람은 자리를 뜹니다. 점수는 비슷해도, 그때 손을 쓸 수 있는 곳은 도구마다 다릅니다.
- 폰
- 다른 컴퓨터
- 에이전트가 도는 그 컴퓨터
어디서든
폰이나 다른 컴퓨터의 대시보드에서 실시간으로 보고, 바로 넘겨받습니다.
- 폰 — 됨
- 다른 컴퓨터 — 됨
- 에이전트가 도는 그 컴퓨터 — 됨
- HyperTeams
그 컴퓨터 앞에서만
에이전트가 도는 컴퓨터 앞에 앉아 있어야 보고 넘겨받을 수 있습니다.
- 폰 — 안 됨
- 다른 컴퓨터 — 안 됨
- 에이전트가 도는 그 컴퓨터 — 됨
- Aside
- Ego Lite
볼 수 없음
사람이 에이전트의 화면을 보거나 넘겨받는 방법이 없습니다.
- 폰 — 안 됨
- 다른 컴퓨터 — 안 됨
- 에이전트가 도는 그 컴퓨터 — 안 됨
- Playwright MCP
- Chrome DevTools MCP
- browser-use
- agent-browser
어떻게 쟀나
- 같은 조건
- Claude Code · claude-sonnet-5 · 같은 지시문 · 같은 시간 제한. 다른 것은 브라우저 도구뿐입니다. Apple M1 · 16GB, 2026년 9월 28일 – 2026년 10월 7일.
- 프로그램 채점
- 정답 일치 · 페이지가 낸 점수 · 사이트에 남은 결과로만 채점했습니다. AI 채점은 쓰지 않았고, 도구 사이의 차이는 같은 과제끼리 짝지어 통계 검정(McNemar, p < 0.05)으로 확인했습니다.
- 빠짐없이
- 일곱 도구 × 400과제를 모두 쟀습니다. 시간이 초과됐거나 실패한 과제는 일곱 도구 모두 같은 규칙으로 한 번 더 쟀습니다.
측정한 버전
| 도구 | 버전 |
|---|---|
| HyperTeams | 2026-10 |
| Aside | 1.0.922.1 · 1.0.928.1 |
| Ego Lite | 0.5.1.13 |
| Playwright MCP | @playwright/mcp 0.0.82 |
| Chrome DevTools MCP | chrome-devtools-mcp 1.10.1 |
| browser-use | browser-harness 0.1.13 |
| agent-browser | 0.38.1 |
직접 맡겨 보세요
내장 브라우저는 하이퍼팀즈에 들어 있습니다. 폴더 설정에서 브라우저 도구를 켜면 그 폴더의 업무가 Claude Code · Codex · Antigravity · Pi 어느 엔진이든 같은 도구로 웹을 씁니다.
curl -fsSL https://hyperteams.net/install.sh | bash