전담 디자이너 효과, 첫 협업 4.42점에서 10번째 4.90점으로 올랐습니다

“전담 디자이너를 두면 결과가 좋아진다.” 디자인 외주 업계에서 이 말은 거의 상식입니다. 그런데 얼마나 좋아지는지, 무엇이 좋아지는지를 숫자로 보여준 자료는 못 봤습니다. 대체로 그냥 그렇다고들 하죠.

플로우웍스에는 지금까지 완료된 업무 11,083건과 그 업무에 달린 고객 평가 6,230건이 쌓여 있습니다. 그래서 직접 세어봤어요. 같은 팀이 같은 디자이너에게 몇 번째로 맡긴 업무인지를 하나하나 매기고, 그 차수가 올라갈 때 평가와 속도가 어떻게 움직이는지 봤습니다.

올라갑니다. 품질 평점은 첫 협업 4.420에서 10번째 이상 4.904까지. 다만 이 숫자를 반복하면 좋아진다는 인과로 읽으면 틀립니다.

같은 팀과 같은 디자이너를 한 쌍으로 묶어 셌습니다

같은 팀과 같은 디자이너의 조합을 하나의 페어로 보고 그 페어의 몇 번째 업무인지를 매겼습니다. 구간은 넷입니다. 첫 협업, 2~4번째, 5~9번째, 10번째 이상.

평가는 업무가 끝날 때 고객이 남기는 5점 만점 평가 중 품질·소통·마감 준수 세 항목을 봤어요. 속도는 작업이 시작된 뒤 24시간 안에 1차 시안이 제출됐는지 여부로 봤습니다.

차수가 올라가면 평점이 오르고, 1차 시안도 빨라집니다

품질 평점의 상승폭은 0.48점입니다. 같은 구간에서 소통은 0.34점, 마감 준수는 0.20점 올랐습니다.

세 항목이 같은 속도로 오르지는 않습니다. 마감 준수는 첫 협업에서도 이미 4.756으로 높습니다. 올라갈 여지 자체가 적죠. 반면 품질은 첫 협업에서 4.420으로 가장 낮게 시작해 가장 크게 오릅니다.

납기를 지키느냐 같은 기본 성실성은 반복해도 0.20점밖에 안 움직입니다. 반복해서 맡길수록 실제로 달라지는 건 결과물이 우리가 원했던 것에 얼마나 가까운가입니다.

품질 점수만 올랐다면 디자이너가 우리 취향을 알아서 다시 만드는 횟수가 줄었다는 정도로 읽으면 됩니다. 그런데 1차 시안이 나오는 속도도 같이 올라갑니다.

첫 협업에서는 열 건 중 네 건 정도만 24시간 안에 1차 시안이 나옵니다. 열 번 이상 함께한 조합에서는 여섯 건에 가까워집니다.

디자이너가 더 잘해진 게 아닙니다

여기서 해석이 갈립니다. 이 결과가 디자이너의 실력이 늘었다는 뜻은 아닙니다. 같은 디자이너가 우리 회사 업무에서만 갑자기 실력이 늘 이유는 없죠.

실제로 사라진 건 맥락을 전달하는 비용입니다. 첫 업무에서는 브랜드 톤, 피해야 할 요소, 결정권자의 취향, 사내 승인 절차, 로고 원본이 어디 있는지까지 전부 설명 대상입니다. 열 번째 업무에서는 대부분 이미 알고 있습니다.

줄어드는 건 무엇을 만들지 알아내는 시간이에요. 만드는 시간 자체가 짧아지는 건 아닙니다.

반복 협업 중인 고객들이 남긴 후기도 같은 이야기를 합니다.

N번째 맡기고 있는데 미감이 아주 훌륭하십니다. 책임감도 있으시고, 요청사항을 이해를 잘 해주세요.플로우웍스 실제 업무 후기 (품질 5점)

급하게 드린 1차시안요청에도 좋은 퀄리티로 작업해주셔서 너무 감사했습니다! (…) 척하면 척하고 알아들어주시는것같아요플로우웍스 실제 업무 후기 (품질 5점)

여러번 업무를 믿고 맡겼는데 디자이너분이 원래 요청한 날짜보다 항상 일찍 완료해주시고, 퀄리티도 좋아서 계속 요청하게 되네요!플로우웍스 실제 업무 후기 (품질 5점)

첫 협업은 실제로 어긋납니다

첫 협업의 품질 평점 4.420은 전체 평균 4.72보다 낮습니다. 이 숫자를 좋게 포장할 방법은 없습니다. 처음 만난 조합에서는 이해가 어긋납니다.

서로 이해한 내용이 달라서인지 기존 디자인보다 개선된 점이 보이지 않습니다.플로우웍스 실제 업무 후기 (품질 1점 · 마감 준수 3점)

마감은 지켰습니다. 그런데 품질은 1점이에요. 두 사람이 서로 다른 그림을 그리고 있었던 겁니다.

그래서 첫 업무는 전담을 만들기 위한 탐색으로 두는 게 실무적으로 안전합니다. 큰 프로젝트를 첫 조합에 걸지 않는 것만으로도 위험이 크게 줄어듭니다. 디자이너를 고를 때 무엇을 봐야 하는지는 디자이너 검증 기준을 정리한 글에 따로 적어뒀어요.

그 첫 조합을 정하는 플로우웍스의 자동 매칭은 여섯 개 신호를 가중 합산합니다. 만족도 35, 포트폴리오 적합도 20, 응답성 20, 현재 여유도 10, 선택률 10, 공정·탐색 10이에요. 평가는 약 6개월이 지나면 영향력이 절반으로 줄도록 시간 감쇠를 걸고, 평가 수가 적은 디자이너가 별점 한두 개로 과대평가되지 않게 통계적으로 보정합니다. 요청한 업무 종류의 포트폴리오가 없는 디자이너는 채점 전에 후보에서 빠집니다. (가중치는 데이터에 따라 조정됩니다.) 어떤 신호를 어떻게 쓰는지는 디자이너 배정 시스템을 설명한 글에 더 자세히 적어뒀습니다.

이 데이터가 증명하지 못하는 것

위 숫자는 상관관계입니다. 인과관계가 아닙니다. 같은 데이터를 만들어내는 설명이 두 개 있습니다.

• (A) 반복하면 좋아진다. 맥락이 쌓이면서 결과물이 실제로 개선된다.
• (B) 좋았던 조합이 반복된다. 첫 협업이 만족스러웠던 조합만 두 번째, 열 번째로 이어진다. 어긋난 조합은 1회에서 끝난다.

(B)가 이른바 생존 편향입니다. 그리고 이 데이터에는 그 흔적이 실제로 있습니다. 페어 1,514쌍은 딱 한 번으로 끝났습니다. 그중 잘 맞지 않았던 조합이 상당수일 것이고 그 낮은 평점은 전부 첫 협업 칸에 남습니다. 반대로 10번째 이상 칸에는 애초에 잘 맞았던 조합만 들어옵니다.

우리 데이터로는 (A)와 (B)를 분리할 수 없습니다. 두 효과가 섞여 있고 각각 얼마씩인지는 모릅니다. 그러니 ‘N번 채우면 평점이 얼마 오른다’는 식의 보장으로 읽으면 안 됩니다.

그럼에도 이 숫자를 붙잡을 이유는 하나 남습니다. (A)든 (B)든 처방이 같습니다. (A)가 맞다면 같은 사람에게 계속 맡겨야 합니다. (B)가 맞다면 잘 맞았던 조합을 놓치지 말아야 합니다. 어느 쪽이든 결론은 하나예요. 한 번 잘 맞은 조합을 찾았으면 그 조합을 다시 불러올 수 있는 구조를 만들어 둬야 합니다.

현실에서 전담은 이미 기본값입니다

전담이 좋다는 말이 실제 운영에서 얼마나 지켜지는지도 같이 봤습니다. 완료 업무를 매칭 방식별로 나눠보면 이렇습니다.

플로우웍스가 자동 매칭을 ‘아직 맡길 사람을 정하지 못했을 때 쓰는 선택지’로 설명하는 이유가 여기 있습니다.

그리고 반복은 소수의 조합에 극단적으로 몰려 있습니다.

20회 이상 이어진 72쌍이 5,871건을 만들었고, 5회 이상 반복한 327쌍까지 넓히면 73.5%(8,144건)예요. 플로우웍스에서 벌어지는 일의 대부분은 계속 이어지는 관계입니다. 완료 경험이 있는 팀 697곳 중 465곳(66.7%)이 두 번 이상 업무를 발주했습니다.

그 관계를 만드는 방법은 세 가지입니다. 전부 업무를 요청할 때 그대로 선택지로 나옵니다(플로우웍스에서는 디자이너를 파트너라고 부릅니다).

• 우리 팀 파트너: 마음에 든 디자이너를 우리 회사 전속 파트너로 등록해 두면 다음 업무부터 그 파트너 중에서 바로 지정해 요청합니다.
• 함께 작업했던 디자이너: 이전에 협업한 디자이너 목록이 그대로 남습니다. 좋았던 그 사람에게 다시 맡기는 데 별도 절차가 필요 없습니다.
• 파트너 그룹: 자주 맡기는 디자이너들을 그룹으로 묶어 두면 업무를 요청할 때 그 그룹 안에서만 배정됩니다. 분야별로 나눠 관리해도 됩니다.

한 명만 전담으로 두면 그 사람이 바쁜 주에 우리 업무가 그대로 밀립니다. 여러 명을 묶어 두는 편이 낫습니다. 브랜드 가이드와 협업 규칙은 그룹에 속한 모든 디자이너에게 한 번에 공유되니, 새로 들어온 사람에게 처음부터 다시 설명하지 않아도 됩니다. 전담 그룹을 어떻게 구성하고 운영하는지는 전담 그룹 운영 방법을 정리한 글에 단계별로 적어뒀습니다.

그런데 그 사람이 그만두면 어떻게 되나요?

전담화에는 구조적 약점이 하나 있습니다. 한 사람에 대한 의존도가 올라가면 그 사람이 빠졌을 때의 타격도 같이 커집니다. 개인 프리랜서와 직접 계약해 2년을 함께 일했다면, 그 사람이 그만두는 순간 쌓아온 맥락이 통째로 사라집니다.

플로우웍스의 전담은 이 지점에서 갈립니다. 계약 상대가 플랫폼이라서 개인이 빠져도 다음 절차가 이미 준비돼 있습니다.

완료 업무의 80.7%(8,940건)는 애초에 2순위·3순위 디자이너까지 사전에 배정된 상태로 시작합니다. 1순위가 못 하게 되면 대기하던 다음 디자이너로 넘어가죠. 진행해 보니 맞지 않으면 일정에 맞는 다른 디자이너로 추가 비용 없이 무제한 교체합니다. 같은 조건으로 다시 시작해요. 마감·응답 약속 위반은 디자이너 정산 대금에서 즉시 차감되어 고객사에 환급되고 별도 분쟁 절차는 없습니다.

그럼 실제로 사람이 바뀐 업무는 결과가 나빠졌을까요? 이것도 세어봤습니다.

재배정이 발생한 업무는 537건이고 그중 422건(78.6%)이 완료됐습니다. 완료된 업무의 평가는 전체 평균과 거의 차이가 없습니다. 사람이 바뀌었다는 사실만으로 결과가 무너지지는 않았다는 뜻이에요.

전담을 만드는 것과 그 전담 한 명에게 묶이는 것은 다른 일입니다. 전담화의 이득은 챙기면서 사람이 빠질 때의 부담은 플랫폼이 떠안는 구조가 개인 직접 계약과 갈리는 지점입니다.

여기까지 적고 나서 4.420에서 4.904로 올라간 저 선을 다시 봤습니다. 처음엔 반복이 만들어낸 개선의 기록으로 읽혔는데, 지금은 잘 맞은 조합만 살아남은 기록으로도 읽힙니다. 아마 둘 다일 거예요. 어느 쪽이 얼마인지는 이 데이터로 끝까지 모릅니다.

그래도 다음 업무에서 할 일은 안 바뀝니다. 이번에 결과가 좋았던 디자이너 이름을 남겨두고 다음에 그 사람을 다시 부르는 것. 6,230건을 다 세어보고 확실해진 건 그 한 줄뿐이었습니다.

자주 묻는 질문 (FAQ)