AI 어시스턴트가 고객 피드백에서 볼 수 있는 것

경계가 정확히 지나는 곳

설문 리포트는 성격이 다른 두 가지로 이루어집니다. 숫자가 있습니다. 몇 명이 답했는지, 각자 무엇을 골랐는지, 그 선택이 척도 위에 어떻게 퍼져 있는지. 그리고 말이 있습니다. 마지막 주관식에 누군가 자기 문장으로 적어 넣은, 자신이 다녀온 방문에 대한 이야기입니다.

어시스턴트에게는 앞의 것만 주어지고 뒤의 것은 결코 주어지지 않습니다. 3번 문항에 답변 마흔한 건, 평균 3.2, 무게는 척도 아래쪽에 쏠려 있다고 말할 수 있습니다. 같은 문항에서 아홉 명이 글도 남겼다고 말할 수 있습니다. 그 아홉 명 중 누가 무엇을 썼는지는 말할 수 없고, 그것을 바꾸는 범위도 키도 권한도 없습니다. 글은 나가는 길에 제거되므로 그것을 돌려주는 요청 자체가 존재하지 않습니다.

• 돌아오는 것: 응답 수, 각자의 선택, 문항별 분포, 추이
• 돌아오는 것: 각 문항에 코멘트를 남긴 사람 수
• 결코 돌아오지 않는 것: 코멘트 본문 — 어떤 키에도, 커넥터에도, 어시스턴트에도

평균이 아니라 문항

어시스턴트가 피드백으로 하는 쓸모 있는 일은 바로 아무도 시간을 내지 못하는 그 일입니다. 맨 위의 숫자 하나가 아니라 문항을 하나씩 따로 읽는 것입니다.

4.1인 매장이 모든 면에서 4.1인 경우는 거의 없습니다. 맞이는 5점, 음식은 4점, 계산서가 나오기까지 걸린 시간은 2점이고 평균은 그 셋을 모두 가립니다. 지난 한 달의 분포를 문항별로 비교해 달라고 하면 끌어내리는 문항과 떠받치는 문항을 짚어 줍니다. 이번 주에 바로 손쓸 수 있는 답입니다. 누구나 손으로 할 수 있는 산수이고, 바로 그래서 아무도 하지 않습니다.

대시보드가 보여 주는 것과 같은 숫자를 읽으므로 나중에 맞춰 볼 것이 없습니다. 빠져 있던 것은 읽기였지, 두 번째 진실의 출처가 아니었습니다.

• 매장별 평균이 아니라 문항별 분포를 비교하기
• 움직인 문항과 움직인 기간을 짚기
• 대시보드와 같은 숫자 — 요약이지 두 번째 출처가 아님

문장이 남는 이유

망친 저녁에 대해 두 줄을 쓰는 사람은 그 저녁을 보낸 가게에 쓰는 것입니다. 공개하는 것이 아니고, 그 가게가 이번 분기에 연결한 시스템들에게 말하는 것도 아닙니다. 그 문장을 어시스턴트에게 넘기는 일은, 애초에 참여자가 아니었던 제삼자를 그 대화에 끼워 넣는 일입니다.

그리고 그 문장은 어딘가로 갑니다. 자격 증명으로 보낸 답은 그 자격 증명의 보유자가 물건을 두는 곳에 놓입니다. 그것은 당신의 인프라가 아니라 남의 인프라에 대한 질문입니다. 고객은 그 결정을 보지도, 반대하지도 못하고, 그런 일이 있었다는 것을 알 방법도 없습니다. 다른 사람이 쓴 글을 정직하게 보관하는 방법은 그 글이 갈 수 있는 곳의 수를 작게 유지하는 것이고, 연동은 그 수가 조용히 늘어나는 바로 그 문입니다.

그래서 이 이음매는 모델이 논리로 돌아갈 수 있는 도구 설명 속 주의 문구가 아닙니다. 글은 응답이 만들어지기 전에 떨어져 나갑니다. 어시스턴트가 얌전하기를 전제로 하는 제한은 제한이 아닙니다.

그 대가는 무엇인가, 솔직히

모두가 가장 먼저 시연하는 기능을 포기하게 됩니다. 코멘트 육백 건을 붙여 넣고 다섯 개의 주제를 받는 것 말입니다. 정말 쓸모 있는 일이고, 이렇게 연결된 어시스턴트에게서는 얻을 수 없습니다.

대신 당신 것으로 남는 결정을 얻습니다. 코멘트는 받은편지함에서 내보낼 수 있고, 당신이 고른 도구에 통과시키기로 했다면 직접 확인한 답변 묶음에 대해, 알고서, 한 번 그렇게 하는 것입니다. 앞으로 누가 쓰든 기본값으로 어딘가에 도착하는 상시 연결을 남겨 두는 대신에 말입니다. 앞의 것은 선택이고, 뒤의 것은 언제 생겼는지 아무도 기억하지 못하는 습관입니다.

거래를 정직하게 따져 보세요. 코멘트를 읽는 것이 일의 전부라면 읽거나, 의도적으로 내보내세요. 메뉴를 바꾼 뒤 아홉 개 매장에서 어느 문항이 미끄러지는지 아는 것이 일이라면, 애초에 올바른 입력은 숫자였고 코멘트는 그 질문에 답할 수 있는 것이 아니었습니다.

• 연결을 통한 코멘트 주제 추출이나 감정 분석은 없음
• 필요할 때 받은편지함에서 내보내기 — 한 번 내리는 결정으로
• 상시 연결은 숙고한 내보내기와 같지 않음

익명성은 무엇을 지키는가

연락처를 수집하지 않는 설문은 연동을 거쳐도 그대로입니다. 연동은 설문 자체보다 멀리 닿지 않기 때문입니다. 어시스턴트를 연결한다고 해서 익명으로 들어온 답변이 나중에 식별되지는 않습니다.

설문이 연락처를 수집하는 경우에도 작업 공간의 다른 곳과 같은 규칙이 적용됩니다. 어시스턴트는 범위가 허용하는 것만 보고, 연결은 목록에 보이며, 한 번 누르면 끝납니다. 쓸모 있는 규율은 평범한 것입니다. 첫 키는 읽기 전용으로 주고, 실제 질문이 어떤 모습인지 일주일 지켜본 뒤, 무엇을 하더라도 놀랍지 않을 때에만 넓히세요.

고객 데이터에 무언가를 연결하기 전에

어떤 피드백 제품에든 던져 볼 만한 질문이고, 그 답은 기능 목록보다 많은 것을 말해 줍니다.

사람들이 쓴 글이 연동을 통해 제품 밖으로 나가기는 하는가, 아니면 숫자만 나가는가? 그 경계는 응답이 만들어지는 자리에서 지켜지는가, 아니면 문서 속 한 줄인가? 지금 무엇이 연결되어 있는지 나열하고 어느 것이든 한 번에 끊을 수 있는가? 그리고 무엇을 하지 않느냐고 물었을 때 제품은 분명히 말하는가, 아니면 작업 도중 거절로 알게 되는가?

• 쓰인 글이 연동으로 나가는가, 숫자만 나가는가?
• 제한이 코드에 있는가, 문서 속 주석인가?
• 모든 연결이 보이고 즉시 끊을 수 있는가?