챗GPT에게 신상품을 골라 달라고 해도 될까?

AI는 아이디어를 잘 내지만, 마지막 선택은 고객이 해야 한다

AI에게 신상품이나 새 메뉴 아이디어를 많이 뽑아 달라는 일은 해볼 만하다. 실제 연구에서 GPT-4가 만든 상품 아이디어의 평균 구매 의향은 46.4~49.3%로 사람 아이디어의 40.4%보다 높았다. 다만 AI가 무엇을 팔지까지 결정한 연구는 아니므로, 후보를 만드는 일과 고르는 일을 나눠야 한다.

AI는 후보를 많이 만드는 데 쓰고, 최종 선택은 고객 반응과 사장의 판단으로 해야 한다.

정말 AI 아이디어가 사람보다 잘 팔릴 것 같았나?

연구진은 미국 대학생에게 50달러 이하로 팔 수 있는 실물 상품이라는 같은 조건을 줬다. 사람 쪽은 2021년 미국 대학 MBA 상품 디자인 수업에서 나온 아이디어 200개였고, AI 쪽은 2023년 5월 GPT-4가 만든 아이디어 200개였다.

아이디어는 미국 대학생 나이의 응답자들이 평가했다. 아이디어 하나마다 평균 20명이 구매 의향을 답했고, 연구진은 이를 평균으로 비교했다.

항목사람AI(예시 없이)AI(좋은 예시 6개)
아이디어 수200개(학생 50명이 낸 것 중 무작위)100개100개
만든 시점2021년2023년 5월2023년 5월
평균 길이63단어69단어71단어
평가 방식아이디어당 평균 20명, 5단계 구매 의향같음같음
응답자 1명이 본 수평균 40개(출처·순서 무작위)같음같음

결과는 AI 쪽이 높았다. 예시 없이 GPT-4가 만든 아이디어는 평균 구매 의향이 46.4%, 좋은 예시 6개를 보여 준 경우는 49.3%였다. 사람 아이디어는 40.4%였다.

아이디어 묶음평균 구매 의향사람 대비 차이비고
사람(MBA 학생)40.4%기준2021년 수업
AI, 예시 없이46.4%+0.059(유의)GPT-4
AI, 좋은 예시 6개49.3%+0.089(유의)AI 두 묶음 차이 0.030은 유의하지 않음
상위 10% 진입 가능성—AI가 7배400개 중 상위 10% = 40개

특히 상위 10%에 들어갈 가능성은 AI 아이디어가 사람 아이디어보다 7배 높았다. 신상품 개발에서는 후보 가운데 일부만 좋은 결과를 내도 되기 때문에 이 차이가 중요하다.

그럼 AI에게 좋은 아이디어를 고르게 하면 되나?

여기서 중요한 차이가 있다. 이 연구에서 아이디어의 품질을 고른 쪽은 AI가 아니라 실제 고객이었다. 아이디어 하나를 평균 20명이 보고 구매 의향을 답했다.

따라서 이 연구가 보여 준 것은 「AI가 아이디어를 내고 고객이 평가한 경우」다. 「AI가 아이디어를 내고 AI가 가장 좋은 것을 고른 경우」의 결과는 이 연구에 없다.

문장만 그럴듯하게 써서 점수가 높아진 것도 아니었다. 사람 아이디어를 AI 문체로 다시 써서 보여 줬을 때 원래 아이디어와 구매 의향에 의미 있는 차이가 없었다. 새로움도 AI가 사람보다 조금 낮았을 뿐이다.

확인한 것결과사장님에게 뜻하는 것
평균 품질(구매 의향)AI 46.4~49.3% > 사람 40.4%평균 수준 이상의 후보는 금방 모인다
상위 10% 진입AI가 7배맨 위 후보가 나올 확률도 높다
문장력 효과사람 아이디어를 AI 문체로 바꿔도 차이 없음글솜씨에 속은 결과는 아니다
새로움(아이디어 하나)AI가 조금 낮음기존 상품을 그대로 베낀 수준은 아니다
다양성(묶음 전체)AI가 크게 낮음, 앞선 연구 3편에서도 같음그대로 두면 비슷한 후보만 쌓인다

사장님 입장에서는 여기서 역할을 나누는 것이 좋다. AI에게 후보를 만들게 하고, 사장님이 원가와 설비와 인력으로 할 수 없는 후보를 먼저 빼고, 고객에게 반응을 확인하는 방식이다.

왜 AI 아이디어는 서로 비슷한가?

AI의 약점은 아이디어 하나의 품질보다 여러 아이디어를 한꺼번에 봤을 때 드러났다. AI가 만든 아이디어들은 서로 비슷한 경우가 많았다.

연구진이 앞선 창의성 연구 3편의 자료까지 다시 분석했을 때도 같은 결과가 나왔다. AI는 평균적으로 좋은 아이디어를 내지만, 사람이 생각한 영역 가운데 일부에는 닿지 못했다.

그래서 AI에게 같은 질문을 한 번 던지고 끝내는 방식은 아쉽다. 조건과 대상을 바꿔 여러 번 만들어 보거나, 서로 다른 AI의 결과를 모으는 방식이 도움이 된다.

방법연구 결과가게에서 해 볼 모습(예시)
최신 모델 쓰기다양성 올라가지만 사람 수준엔 못 미침최신 무료 모델로 바꾸는 것만으론 부족
여러 회사 AI 모으기다양성 회복챗GPT·제미나이·클로드에 같은 질문
단계별로 생각시키기효과 있음(2024 연구에서 1위)「불편→대상→해결」 순서로 쓰게 하기
사람·조건 무작위로 넣기효과 있음「60대 단골」「포장 전용」 등 조건 바꿔 가며
사람이 찾은 불편을 AI가 풀기특히 효과 큼고객 문의·후기 속 불만을 AI에 넘기기
개수 늘리기 100→1,000덮는 범위가 계속 넓어짐, 일부 영역은 끝까지 못 감한 번에 10개가 아니라 여러 번 나눠 수십~수백 개

특히 고객이 실제로 겪은 불편을 사람이 먼저 찾아서 AI에게 해결하게 하는 방법이 효과가 컸다. 고객 문의나 후기에서 불편을 찾고, 그 문제를 해결할 상품이나 메뉴를 AI에게 여러 방향으로 만들어 달라고 하는 방식이다.

사장님은 어디까지 직접 해야 하나?

첫 단계는 문제를 찾는 일이다. 고객이 무엇을 불편해하는지는 사장님이 실제 고객과 만나는 과정에서 찾고, 그 내용을 AI에게 전달하면 된다.

두 번째는 후보를 만드는 일이다. 이 부분은 AI에게 맡길 수 있다. 연구에서는 AI 아이디어를 100개에서 1,000개로 늘리자 아이디어가 덮는 범위가 계속 넓어졌다.

세 번째는 현실성으로 거르는 일이다. 원가가 맞지 않거나 설비와 인력이 부족해서 만들 수 없는 후보는 사장님이 빼면 된다.

네 번째는 고객에게 묻는 일이다. 연구에서는 아이디어 하나를 평균 20명이 평가했다. 가게에서도 고객에게 구매 의향을 직접 확인해 볼 수 있다.

마지막은 실제 판매다. 이번 연구는 실제 매출이 아니라 구매 의향까지만 확인했다. 따라서 최종 판단은 소량으로 실제 판매해 보는 과정이 필요하다.

단계맡는 쪽연구에서 쓴 숫자가게에서 옮길 때
1. 문제 찾기사장님사람이 찾은 불편을 AI가 풀게 하면 다양성이 크게 오름후기·문의·반품 사유에서 불편 3~5개 적기
2. 후보 내기AI 여러 개100→1,000개로 늘릴수록 범위 넓어짐조건을 바꿔 가며 여러 번
3. 1차 거르기사장님나쁜 아이디어는 버리면 손해 없음원가·설비·인력으로 안 되는 것 빼기
4. 고르기대상 고객아이디어당 평균 20명, 5단계 구매 의향단골 20명 정도에게 「사시겠어요?」 5단계로 묻기(예시)
5. 시험 판매사장님연구는 구매 의향까지만 쟀음소량으로 실제 판매해 보기

우리 가게도 AI를 써볼 만한 단계인가?

국내 소상공인의 디지털·AI 활용 자체는 이미 넓게 퍼져 있다. 중소기업중앙회가 소상공인 500곳을 조사한 결과 활용한다는 답은 80.0%였다.

다만 활용 수준에는 차이가 있었다. 활용 업체 가운데 52.8%가 입문 단계였고 30.5%가 기초 단계였다. 중급은 15.3%, 고급은 1.5%였다.

가장 기대하는 지원도 AI와 관련돼 있었다. 「AI 활용 교육 및 AI 활용 제품 개발·서비스 도입 지원」이라는 답이 46.4%였다.

항목수치조사
디지털·AI 활용80.0%중소기업중앙회, 소상공인 500곳
입문 단계52.8%활용 업체 기준
기초 단계30.5%활용 업체 기준
중급 / 고급15.3% / 1.5%활용 업체 기준
가장 기대하는 지원AI 교육·AI 활용 제품 개발 46.4%같은 조사

이 수치를 보면 AI로 상품 아이디어를 만드는 일은 아직 모든 가게에서 익숙한 방식이라고 보기는 어렵다. 그렇다고 AI에게 상품을 정해 달라고 맡길 필요도 없다.

이번 연구가 보여 준 핵심은 역할의 차이다. 아이디어를 내는 비용은 낮아졌고, 많은 후보를 만드는 일은 AI가 할 수 있다. 하지만 어떤 후보가 실제 고객에게 선택될지는 고객의 반응으로 확인해야 한다.

이 연구를 우리 가게에 그대로 적용해도 될까?

그대로 적용하면 안 된다. 연구 대상은 미국 대학생이고, 상품 조건도 50달러 이하 실물 상품이었다. 동네 식당의 메뉴나 미용실 시술처럼 맛과 손기술과 관계가 중요한 업종에서도 같은 결과가 나오는지는 확인되지 않았다.

또한 연구에서 측정한 것은 실제 매출이 아니라 「사겠다」는 구매 의향이었다. 사람 쪽은 2021년 MBA 학생이고 AI 쪽은 2023년 GPT-4였으며, 한국어 질문과 한국 고객을 대상으로 한 실험도 아니었다.

따라서 「한국 동네 가게에서도 AI 아이디어가 평균 이상으로 나온다」고 단정할 수는 없다. 확인된 사실은 미국 대학생용 상품 실험에서 AI가 만든 후보의 구매 의향이 더 높았고, 그 후보를 평가한 것은 고객이었다는 점이다.

사장님에게 필요한 결론도 여기서 나온다. AI에게 아이디어를 많이 내게 하는 것은 시작점으로 활용할 수 있다. 하지만 무엇을 실제로 팔지는 AI의 답 하나로 정하지 말고, 사장님의 현실적인 판단과 고객의 반응을 함께 보고 결정하는 편이 연구 결과에 맞다.

요점 ① GPT-4 아이디어의 평균 구매 의향은 46.4~49.3%로 사람의 40.4%보다 높았고, 상위 10% 진입 가능성은 7배였다. 요점 ② AI 아이디어의 새로움은 사람보다 조금 낮았고, 다양성은 낮았으며 앞선 연구 3편에서도 같은 결과가 나왔다. 요점 ③ 여러 AI를 모으고, 조건을 바꾸고, 100개에서 1,000개로 늘리면 아이디어의 범위를 넓히는 데 도움이 됐다. 요점 ④ 아이디어 평가는 평균 20명의 고객이 했고, 국내 소상공인의 AI 활용은 80.0%, 고급 단계는 1.5%였다.

같이 읽을 글

자료 출처

작성일

#전략·조직 #신상품 아이디어 #구매 의향 #아이디어 다양성 #브레인스토밍

← 칼럼 목록
무료로 신청하기→