불꽃놀이 벤치마크

프롬프트 하나, 모델이 바뀔 때마다 한 회차 — 모델 32 · 회차 63

기준2026년 10월

끌어서 그 달까지만 보기

나란히 볼 모델을 2~4개 고른다 0 / 4

2026

모델 21
2026-10

gpt-6.1-terraOpenAI2026-10-26

claude-haiku-5-5Anthropic2026-10-07

실행 실패

solar-mini4-260922Upstage2026-10-01

2026-09

gpt-6.1-solOpenAI2026-09-29

claude-sonnet-5-5Anthropic2026-09-28

gpt-6-lunaOpenAI2026-09-22

claude-opus-5-5Anthropic2026-09-22

산출물 없음

HCX-003NAVER Cloud출시일 미상

gpt-6-astraOpenAI2026-09-03

gemini-3.8-flash-highGoogle2026-09-02

claude-fable-5-1Anthropic2026-09-01

2026-08

실행 실패

solar-pro4-260806Upstage2026-08-11

2026-07

산출물 없음

kimi-k3Moonshot2026-07-16

gpt-5.6-terraOpenAI2026-07-09

2026-06

kimi-k2.7-code-highspeedMoonshot2026-06-15

kimi-k2.7-codeMoonshot2026-06-12

gemma4:12bGoogle2026-06-03

2026-04

gpt-5.5OpenAI2026-04-24

kimi-k2.6Moonshot2026-04-20

2026-02

gemini-3.1-pro-highGoogle2026-02-19

gpt-5.3-codex-sparkOpenAI2026-02-12

2025

모델 9
2025-10

claude-haiku-4-5-maxAnthropic2025-10-15

2025-08

gpt-oss:20bOpenAI2025-08-05

gpt-oss-120b-mediumOpenAI2025-08-05

2025-07

실행 실패

qwen3-coder:30bAlibaba2025-07-31

실행 실패

HCX-007NAVER Cloud2025-07-29

2025-05

실행 실패

devstral:24bMistral2025-05-21

2025-04

실행 실패

HCX-DASH-002NAVER Cloud2025-04-17

실행 실패

HCX-005NAVER Cloud2025-04-17

2025-03

gemma3:27bGoogle2025-03-12

2024

모델 2
2024-11

qwen2.5-coder:32bAlibaba2024-11-12

2024-05

실행 실패

codestral:22bMistral2024-05-29

프롬프트

판마다 한 번 던지고 나온 그대로 — 후속 지시·수정 없음. 사진을 못 보는 모델에도 같은 문장을 보낸다.

v01

prompt/v01.md sha256 84e3646d28da3b0860f3e0e9ad079ea9d040a4e8bedf82bcd5ac3419f1bcd6c8

첨부한 사진은 빈(Vienna)의 다뉴브강 야경이다. 이 장면에 불꽃놀이가 벌어지는 모습을 **단일 HTML 파일** 하나로 만들어줘.

외부 라이브러리·CDN·이미지 파일 없이 순수 HTML/CSS/JavaScript만 쓰고, 인터넷 연결 없이 `file://` 로 열어도 완전히 동작해야 한다.

다음 세 가지는 반드시 있어야 한다.

① 도시의 스카이라인
② 여러 발의 불꽃이 시간차를 두고 올라가 터지는 것
③ 불꽃의 빛이 도시에 닿아 생기는 것 — 건물이든 물이든, 빛을 받는 무언가

그 밖의 것은 전부 네 판단에 맡긴다.

v02

prompt/v02.md sha256 29a8d496c6dde8a70b45bc67217a61bbde0ea37804b0ba61730a0c9b69355ca0

첨부한 사진은 빈(Vienna)의 다뉴브강 야경이다. 이 사진을 보고 참고해서, 이 장면에 불꽃놀이가 벌어지는 모습을 **단일 HTML 파일** 하나로 만들어줘.

사진은 참고 자료일 뿐이다 — 결과물이 사진 파일을 불러오거나 넣지 말고, 장면 전체를 코드로 직접 그려라. 외부 라이브러리·CDN·이미지 파일 없이 순수 HTML/CSS/JavaScript만 쓰고, 인터넷 연결 없이 `file://` 로 열어도 완전히 동작해야 한다.

다음 세 가지는 반드시 있어야 한다.

① 도시의 스카이라인
② 여러 발의 불꽃이 시간차를 두고 올라가 터지는 것
③ 불꽃의 빛이 도시에 닿아 생기는 것 — 건물이든 물이든, 빛을 받는 무언가

그 밖의 것은 전부 네 판단에 맡긴다.

조건

모든 회차에 같은 것 — 원샷 · 판 3개 · 같은 참조 사진 · 같은 프롬프트 판본. 회차마다 다른 것은 아래 23필드로 적고, 값은 각 카드의 상세에 있다.

참조 자산

빈 다뉴브강 야경 — 회차마다 같은 참조 사진

assets/ref-01.jpg sha256 2c3b19ab8e3b38081e6f80bc2195ec2e4ce36655a0139aaf5066b6c3d3b14af4

원문 페이지
https://unsplash.com/photos/a-city-skyline-is-reflected-in-the-water-at-night-4m85TVQq86Y
라이선스
Unsplash License — 상업적 이용·수정·재배포 자유, 출처 표기 의무 없음 (원문 페이지에서 축자 확인)
저작자
Markos Mant (@markos_mant)
접근일
2026-09-07

회차마다 적는 필드

값만 적는 필드
날짜 · 모델 ID · 프롬프트 판본 · 프롬프트 해시 · 참조 자산 해시 · 원샷 여부 · 개입 횟수 · 총 소요시간 · 모델 교체 여부 · 실행 환경 · 판 수 · 사진 전달 · 버린 시도 수 · 비용(추정) · 파일 크기 · 코드 라인 수
외부 요청 수
0 이 아닌 회차는 프롬프트의 명시적 제약을 어긴 것이다. 그래도 회차는 그대로 둔다 — 어긴 것 자체가 측정값이고, 다시 돌리면 원샷 규율이 깨진다.
입력 토큰
토크나이저가 모델마다 달라 모델 간 비교에 쓰지 않는다 — 같은 프롬프트의 입력 토큰이 95 vs 26 vs 16 으로 갈린 실측이 있다(`research/2026-09-08-quantitative-metrics-for-personal-bench.md` §A). 한 모델의 회차끼리 보거나 비용을 어림하는 데만 쓴다. 값의 출처도 회차마다 다르다 — Claude 회차는 서브에이전트 usage 라 실행 래퍼가 삼킨 토큰까지 들어 있고, Codex 회차는 companion 이 보고하면 그 값 아니면 `미상`이다(002 는 companion 경로, 003~009 는 `codex exec` 직접 호출). 열이 같아 보여도 같은 자로 잰 것이 아니다.
출력 토큰
입력 토큰과 같다 — 모델 간 비교에 쓰지 않고, 출처도 회차마다 다르다.
폭발 횟수(60초)
헤드리스 브라우저로 60초를 실제로 돌려 뷰포트 평균 밝기가 +3.0 이상 오른 지점을 센 값이다(250ms × 240프레임). 선례가 없는 자체 설계라 순위에 쓰지 않고 설명 재료로만 둔다 — 빠르게 깜빡이는 노이즈도 높게 나오고, 같은 회차를 다시 재도 몇씩 흔들린다. 2026-10-13 부터 재지 않는다 — 새 회차는 「해당 없음」이고 옛 회차 값은 그대로 둔다.
관측 ① 스카이라인이 있나
관측 3항목은 점수가 아니라 예/아니오다. 프롬프트가 못박은 것이 실제로 있었는지만 센다.
관측 ② 시간차를 둔 여러 발의 불꽃이 터지나
관측 3항목은 점수가 아니라 예/아니오다.
관측 ③ 불꽃 빛이 무언가에 닿나
관측 3항목은 점수가 아니라 예/아니오다.