문제
기본적으로 쉬운 문제부터 보여드리도록 하고 있습니다. 처음 오셨다면 위에서부터 차례로 풀어보시면 됩니다. AI 모델이 여러분의 기기에서 직접 돌기 때문에, PC 환경을 권장합니다. 모바일에서는 한 문제를 채점하는 데 몇 분이 걸릴 수 있습니다.
전체 307개 · 7 / 16 쪽
P38주입 섞인 추출
숫자를 꺼내야 하는데 데이터가 중간에 딴 일을 시킵니다. 하던 일을 끝까지 하게 만들어보세요.
400점chat주입 방어추출
10월 11일
400점P43파이프라인 짜기 (chat)모델이 변환 명령을 짜고, 채점기가 그 명령을 입력에 적용합니다. 세 단계를 빠뜨리지 않게 만들어보세요.
400점chat코드 생성한 줄 입력
10월 11일
400점P44파이프라인 짜기 (raw)같은 일을 채팅 형식 없이 합니다. 모델이 명령을 짜다 말고 설명을 시작하는 것을 막아야 합니다.
400점raw코드 생성출력 형식
10월 11일
400점P47생각으로 말투 누르기고칠 수 없는 system 지시와 여러분이 심어 둔 생각이 맞붙습니다. 어느 쪽이 이기는지 확인해보세요.
400점think생각 주입지시 계층
10월 11일
400점P48생각 속 주입 방어공격을 보기 전에 방어 논리를 미리 세워 둡니다. 먼저 자리를 잡는 쪽이 유리한지 보는 문제입니다.
400점think생각 주입주입 방어
10월 11일
400점P49코드 짜고 심사받기 (chat)모델이 자바스크립트를 짜고, 같은 모델이 그 코드를 5점 만점으로 매깁니다. 채점하는 쪽도 모델이라는 점을 생각해보세요.
400점chat모델 채점코드 생성설명 억제
10월 11일
400점P51여덟 수 더하기 (분할 정복)에이전트 넷이 둘씩 더하고, 둘이 그 결과를 합치고, 하나가 마무리합니다. 프롬프트 하나가 세 자리에서 모두 통해야 합니다.
400점chat분할 정복계산일반화
10월 11일
400점P54예시 셋으로 감정 분류예시 셋으로 긍정과 부정을 가릅니다. 마지막에 둔 라벨이 기본값처럼 작동하니 순서를 신경 써보세요.
400점raw퓨샷 고정라벨 쏠림분류
10월 11일
400점P56큰 수 덧셈 (raw)여섯 자리끼리 더합니다. 모델은 한 번에 암산해서는 거의 못 맞히기 때문에, 자리를 나눠서 적게 만들어야 합니다.
400점raw큰 수계산
10월 11일 · 아직 푼 분이 없습니다 · 제출 1건
400점P57큰 수 뺄셈 (chat)여섯 자리끼리 뺍니다. 조수 모드라서 모델이 쓸 수 있는 칸이 넓은 것이 유리합니다.
400점chat큰 수계산
10월 11일
400점S10JSON으로 묶기 (chat) · SmolLM2 135M조수 모드의 모델은 JSON 을 코드블록으로 감싸고 싶어 합니다. 그 습관을 눌러보세요.
400점chat출력 형식구조화 출력
10월 11일
400점S15감정 분류 (raw) · SmolLM2 135M채팅 형식 없이 분류를 시키면 모델이 라벨 대신 리뷰를 이어서 씁니다. 그 버릇을 막고 라벨만 받아보세요.
400점raw분류라벨 쏠림
10월 11일
400점S23글자 수 세기 (chat) · SmolLM2 135M모델은 글자를 보지 못하고 토큰이라는 덩어리로만 봅니다. 그래서 글자 수를 세는 일을 아주 못합니다. 그 맹점을 뚫어보세요.
400점chat토크나이저메모장
10월 11일
400점S26거꾸로 뒤집기 (raw) · SmolLM2 135M채팅 형식 없이 낱말을 뒤집습니다. 모델이 뒤집다 말고 다른 낱말을 이어 쓰는 것을 막아야 합니다.
400점raw토크나이저출력 형식
10월 11일
400점S31표식 지우기 · SmolLM2 135M모든 답변 끝에 표식을 붙이라는 지시가 먼저 들어가 있습니다. 그 표식이 안 붙게 만들어보세요.
400점chat지시 계층지식 보강
10월 11일
400점S34길게 쓰라는 지시 누르기 · SmolLM2 135M길게 설명하라는 지시를 뚫고 낱말 하나만 받아냅니다. 지시가 서로 반대일 때 모델이 어느 쪽을 듣는지 보는 문제입니다.
400점chat지시 계층설명 억제
10월 11일
400점S41식 만들기 (raw) · SmolLM2 135M모델이 답을 내지 않습니다. 식을 내고 계산은 채점기가 합니다. 셈을 자주 틀리는 모델에게 셈을 안 시키는 방법입니다.
400점raw코드 생성계산
10월 11일
400점S42식 만들기 (chat) · SmolLM2 135M같은 일을 조수 모드로 합니다. 조수는 식 대신 답을 내려고 하기 때문에 그쪽을 막아야 합니다.
400점chat코드 생성계산
10월 11일
400점S52여덟 낱말 중 가장 긴 것 (분할 정복) · SmolLM2 135M같은 4-2-1 구조에 글자를 못 세는 맹점이 겹칩니다. 단계마다 무엇을 다음으로 넘길지 정해야 합니다.
400점chat분할 정복토크나이저일반화
10월 11일
400점S53예시 셋으로 단위 변환 · SmolLM2 135M프롬프트를 쓸 수 없습니다. 입출력 예시 세 쌍만 제출해서 모델이 규칙을 스스로 알아내게 만들어보세요.
400점raw퓨샷 고정퓨샷 설계일반화
10월 11일
400점한 쪽에 20개씩 보여드립니다. 어떻게 푸는지 모르시겠으면 가이드를 먼저 읽어보셔도 좋고, 그냥 1번 문제부터 눌러보셔도 됩니다.
문제가 안 열리거나 모델이 안 올라오면 Q&A를 먼저 보십시오. 자주 묻는 것들을 모아 두었습니다. 거기에도 없으면 문의해 주시면 제가 직접 답해 드립니다.