AI 시대 디자인의 핵심 역량은 비평이다

Adam Elman이 Nielsen Norman Group에서 AI 시대 디자이너가 갖춰야 할 근본 역량으로 ‘비평(critique)’을 지목했습니다. 같은 입력에 늘 같은 결과를 내던 전통 소프트웨어와 달리, AI는 확률적으로 움직여 매번 다른 출력을 내놓습니다. 그래서 디자이너의 일은 화면의 정확한 동작을 일일이 지정하는 것에서, ‘좋은 결과란 무엇인가’를 평가 기준으로 정의하는 쪽으로 옮겨갑니다.

"무엇이 ‘좋은가’, 그리고 무엇이 좋지 않은가를 정의하라."Adam Elman, Nielsen Norman Group

왜 중요한가

비결정성(nondeterminism)이 문제의 핵심입니다 — 출력이 매번 달라지는 시스템에서는 ‘이 버튼을 누르면 이렇게 동작하라’식의 정확한 사양이 성립하지 않습니다. 대신 디자이너는 사용자 리서치에 근거한 구체적이고 측정 가능한 기준을 세워야 합니다. 예컨대 ‘답변이 장황하게 느껴지는가’를 주관적으로 묻는 대신, 응답 유형을 먼저 분류한 뒤 그 유형별로 장황함을 평가하는 식입니다. 판단 기준이 흐릿하면 AI는 흐릿한 방향으로 표류합니다.

실무 적용

핵심은 ‘판단 → 평가 → 반복(judge-evaluate-iterate)’의 루프를 제품에 심는 것입니다. 명확한 판정 기준을 세우고, 모델 출력을 그 기준에 비추어 평가하고, 구현을 다듬는 과정을 돌립니다. 평가는 ‘LLM을 심판(judge)으로 쓰는’ 방식으로 규모를 키울 수 있지만, 반드시 사람이 라벨링한 테스트셋으로 그 심판의 정확도를 보정해야 신뢰할 수 있습니다. 디자이너의 사용자 이해와 취향이 이 기준 안에 그대로 인코딩되는 셈입니다.

교차 참고

• Nielsen Norman Group: One AI Output Is an Example, Not an Evaluation — 출력 하나로 성능을 판단하지 말고 여러 대표 입력과 반복 실행으로 평가하라는, 비평 기준의 통계적 토대를 짚습니다.
• Nielsen Norman Group: UX-Context Design — Using UX Knowledge to Inform AI-Generated Design — UX 지식을 AI 생성 과정 앞단에 밀어넣어 ‘좋음’의 기준을 심는 방법을 제시합니다.

Wemeet의 관점

Wemeet은 AI가 제작을 대신할수록 디자이너의 값이 ‘만드는 손’이 아니라 ‘무엇이 좋은지 가리는 눈’에서 나온다고 봅니다. 비평은 취향의 표현이 아니라 측정 가능한 기준을 세우는 공학입니다 — 좋음을 정의할 줄 아는 팀만이 확률적으로 흔들리는 AI를 사용자 쪽으로 붙잡아 둡니다.