23장. 계기와 계기판의 인과

평균은 가장 문제 있는 사용자를 숨기는 가장 예의 바른 거짓말이다.

"이번 분기에는 매출을 20퍼센트 올립시다." 회의에서 이런 목표가 떨어지면 다들 고개를 끄덕이고 흩어지지만, 책상으로 돌아온 사람은 매출이라는 숫자를 어디서 어떻게 손대야 할지 알 수가 없어 곧 막힌다. 매출은 화면 어딘가에 박힌 손잡이가 아니어서, 그걸 잡고 20퍼센트만큼 돌릴 방법이 없다. 매출은 수많은 사람이 각자 지갑을 열지 말지 결정한 결과의 합이니, 내가 결정한 게 아니라 그들이 결정한 것이다.

22장에서 다음 날 재방문, 첫 핵심 재미 도달, 단계별 통과 같은 결과 숫자를 계기판에 올렸다. 그런데 거기서 한 가지가 비어 있었으니, 그 바늘을 무엇으로 움직이는가다. 계기판에 다음 날 재방문이라는 바늘을 올려 두었어도, 사용자가 다시 켜는 건 사용자가 하는 일이라 그 바늘을 손가락으로 직접 밀 수는 없다. 내가 할 수 있는 건 그가 다시 켜고 싶어질 만한 무언가를 첫 세션에 심는 것뿐이다. 이 장은 그 갈림을 다룬다. 계기판에 무엇을 올릴지는 22장에서 정했으니, 여기서는 손으로 만지는 입력과 그 입력이 흔드는 결과를 갈라 둘을 사슬로 잇고, 그 사슬을 무리별로 읽는 법까지 본다. 그 숫자가 작품의 값어치와 어떻게 화해하는지는 24장으로 미룬다.

매출은 타인의 결정, 나의 결정은 인풋

핵심을 한 문장으로 추리면 이렇다. 매출은 타인의 결정이고, 나의 결정은 인풋이다. 인풋이라는 말을 풀면, 내가 화면에서 직접 바꿀 수 있는 입력이다.

매출이 왜 타인의 결정인지부터 본다. 매출이라는 숫자가 오르려면 누군가 우리 게임을 켜고, 머물고, 좋아하게 되고, 끝내 돈을 쓸 마음을 먹어야 하는데, 그 마지막 결정, 곧 지갑을 여는 일은 그 사람의 몫이다. 나는 그의 손을 잡고 결제 버튼을 누르게 할 수 없고, 그건 강요이며 강요는 신뢰를 깬다. 그러니 매출은 내가 직접 만드는 숫자가 아니라, 내가 만든 경험에 사람들이 응답한 결과로 따라 나오는 숫자, 곧 출력이다.

그렇다면 나의 결정은 무엇인가. 내가 정말로 손에 쥔 것은 그 결과로 가는 길에 놓인 입력들이다. 로그인을 첫 화면이 아니라 한참 뒤로 미루는 일. 첫 보상을 더 빨리 돌려주는 일. 첫 실패를 겪은 사람이 곧장 다시 시도할 수 있게 길을 내는 일. 첫 화면의 속도를 높이고, 돌아올 핑계를 첫 세션에 심고, 사용자에게 고를 거리를 주고, 처음 본 사람의 경계심을 푸는 일. 이것들은 전부 내가 오늘 결정해서 내일 다르게 만들 수 있는 것, 곧 계기다. 계기판이 결과로 나타나는 출력이라면 계기는 내가 직접 손대는 입력이니, 계기판을 보고 계기를 조정한다. 거꾸로 계기판을 직접 밀려 하면 손이 헛돈다.

이 갈림을 놓치면 일이 우습게 꼬인다. "다음 날 재방문을 올려라"는 목표를 받은 사람이 재방문이라는 숫자 자체를 노려보고 있으면 아무 일도 안 일어난다. 재방문은 사용자가 내일 결정하는 일이라, 그가 할 수 있는 건 오늘의 입력을 바꾸는 것뿐이다. 어제 만든 캐릭터가 보고 싶어지게 첫 세션에서 그 캐릭터에 애착을 심거나, 어제 못 끝낸 일이 궁금해지게 끝맺지 않은 고리를 하나 남기거나. 그 입력을 바꾸면 다음 날 재방문이라는 바늘이 뒤따라 움직인다. 손은 늘 입력에 두고, 눈은 출력에 둔다.

MEJE 아이동월드로 옮기면 이 구분이 또렷해진다. "팬이 내일 또 아이동을 보러 오게 하라"는 출력이고, 팬이 내일 다시 앱을 여는 건 팬의 결정이다. 내가 할 수 있는 입력은, 오늘 그 아이동에게 이름을 붙여 자기 최애로 만들게 하고, 아이동이 "내일 또 보자"며 손을 흔들게 하고, 팬이 다 끝내지 못한 작은 꾸미기 하나를 남겨 두는 것이다. 내일의 재방문은 못 만지지만, 오늘의 작별 인사는 만진다.

평균이라는 거짓말

계기와 계기판을 갈랐어도, 계기판을 잘못 읽으면 엉뚱한 계기를 만지게 된다. 가장 흔한 잘못이 평균 하나로 판단하는 것이다.

평균은 편하다. "평균 체류 3분"이라는 한 줄이 보고서에 찍히면, 다들 첫 경험이 그럭저럭 굴러간다고 안심한다. 그 3분 뒤에는 30초 만에 떠난 다수와 한참을 머문 소수가 뭉개진 채 숨어 있는데, 평균 숫자는 그 둘을 같은 한 줄로 덮어 버린다. 정작 고쳐야 할 30초짜리 사람들이 가장 예의 바른 평균 뒤로 사라진다. "다음 날 재방문이 10퍼센트"라는 한 숫자로 첫 경험의 건강을 다 말한 것 같지만, 이 한 숫자 안에는 전혀 다른 사람들이 뭉뚱그려 들어 있다. 22장에서 A와 B 두 화면을 갈랐던 그 가상 게임의 숫자로 보자. 광고를 보고 들어온 사람의 재방문이 5퍼센트, 친구 추천이나 검색으로 제 발로 찾아온 사람의 재방문이 25퍼센트인데 광고로 들어온 사람이 넷 중 셋이라면, 둘을 합쳐 평균을 내면 10퍼센트쯤 나온다. 머릿수가 많은 쪽이 평균을 끌고 가니, 광고 물량이 큰 게임일수록 평균 재방문은 사실상 광고 유입의 성적표다. 이 10퍼센트만 보고 있으면 우리 첫 경험이 그럭저럭 평범하다고 여기게 되지만, 갈라서 보면 이야기가 다르다. 제 발로 찾아온 사람에게는 첫 경험이 꽤 잘 통했고 광고로 끌려온 사람에게는 거의 통하지 않았으니, 고칠 곳은 광고로 들어온 사람의 첫 화면이지 게임 전체가 아니다.

들어온 문이 다르면 기대도 다르다. 광고를 보고 들어온 사람은 광고가 약속한 것을 첫 화면에서 확인하려 들고, 약속과 화면이 어긋나면 곧장 떠난다. 제 발로 검색해 찾아온 사람은 이미 무언가를 알고 왔으니 첫 화면에 더 너그러워서, 같은 첫 화면이 두 사람에게 다르게 작동한다. 그래서 평균 재방문 하나로 "첫 화면을 고쳐야 하나 말아야 하나"를 정하면, 잘 통하던 절반까지 함께 흔들 위험이 있다.

평균을 가르는 방법이 세그먼트, 풀어 말하면 사용자를 비슷한 무리로 나눠 따로 보는 일이다. 들어온 문으로 나누고, 출신으로 나누고, 처음 켠 시간대로 나눈다. 9장에서 본 출신 매체별 기대를 떠올리면, 웹툰을 보다 들어온 사람과 숏폼을 넘기다 들어온 사람은 첫 화면에서 거슬리는 게 다르고 그래서 재방문도 다르게 나오는데, 한 덩어리로 뭉친 평균은 이 차이를 가린다. 무리를 갈라 보면 어느 무리에서 가장 많이 새는지가 드러나고, 그 무리의 첫 화면에 손댈 입력이 보인다. 평균에 손대려 하지 말고, 새는 무리를 찾아 그 무리의 계기를 만진다.

들어온 문으로 가른 차이는 앱 업계에서 꽤 일관되게 관찰돼 온 편이다. 자기가 검색해서 제 발로 찾아온 사람의 재방문이, 광고에 끌려 들어온 사람보다 대체로 더 높게 나타난다고 알려져 있다. 첫날 다시 켜는 비율도 두 무리 사이에 차이가 난다는 이야기가 적지 않다. 제 발로 온 사람은 이미 무언가를 원해서 왔으니 첫 화면에 너그럽고, 광고로 끌려온 사람은 광고가 약속한 것과 어긋나는 순간 곧장 떠나기 때문이다. 그러니 평균 재방문 한 숫자에는 잘 통한 무리와 안 통한 무리가 섞여 있다. 듀오링고 같은 제품은 아예 사용자를 매일 신규·복귀·이탈 같은 상태로 갈라 두고, 무리 사이를 오가는 비율을 따로 들여다보는 방식으로 알려져 있다. 한 덩어리 평균으로는 안 보이던 새는 곳이 그렇게 갈라야 드러난다.

다만 가르는 데도 요금이 있다. 무리를 가를수록 칸마다 표본이 줄어, 작은 게임일수록 갈라 놓은 숫자는 빨리 소음이 된다. 하루 신규가 백 명인 게임에서 광고와 자연을 가르고 다시 시간대로 가르면 칸마다 몇 명 남지 않아, 그 칸의 출렁임은 차이가 아니라 우연이다. 그러니 가르되 끝없이 가르지는 않는다. 칸마다 읽을 만한 머릿수가 남는 데까지만 가르고, 그보다 잘게 갈라야 할 것 같으면 표본이 찰 때까지 기다리거나 무리를 도로 합친다. 표본이 얼마나 차야 숫자가 숫자가 되는지는 25장의 측정에서 다시 본다.

사슬을 따라 새는 곳을 짚는다

계기와 계기판 사이에는 사슬이 있다. 내가 입력을 바꾸면 그 입력이 사용자의 경험을 바꾸고, 바뀐 경험이 출력 숫자를 흔든다. 입력에서 경험으로, 경험에서 출력으로. 이 사슬을 단계로 끊어 보면 사람이 어디서 새는지가 보인다.

21장에서 첫 경험을 시간으로 끊어 어디서 새는지 봤다면, 여기서는 행동으로 끊는다. 첫 화면을 연 사람이 첫 조작까지, 첫 조작에서 첫 반응까지, 첫 반응에서 첫 실패까지, 첫 실패에서 다시 시도까지, 거기서 첫 완료까지. 우리의 가상 게임처럼 캐릭터를 모으고 대화하는 게임이라 첫 세션에 실패라 부를 사건이 설계에 없는 경우라면, 손이 멈추는 첫 머뭇거림이 그 자리를 대신한다. 단계마다 몇 명이 넘어가고 몇 명이 새는지를 보아, 이 깔때기에서 유난히 가파르게 꺼지는 한 칸이 있으면 그 칸에 걸린 입력이 범인이다.

사슬의 양 끝만 보면, 입력을 바꿨는데 출력이 안 움직일 때 어느 고리가 끊겼는지 알 수 없다. 그래서 가운데 칸, 곧 경험이 정말 바뀌었다는 행동 증거를 따로 읽는다. 작별 인사를 새로 넣었다면 그 인사를 끝까지 본 사람의 비율을, 캐릭터에 애착을 심으려 했다면 이름을 바꿔 본 사람의 비율이나 떠나기 전 마지막 화면이 어디였는지를 본다. 입력을 바꿨는데 이 가운데 신호부터 안 움직였다면 입력이 경험에 닿지 못한 것이고, 가운데는 움직였는데 출력이 그대로라면 경험과 출력 사이의 짐작이 틀린 것이다. 입력과 출력 사이에 이런 가운데 계기를 한 묶음 두면, 사슬의 어느 고리가 끊겼는지까지 짚을 수 있다.

특히 첫 실패 직후와 첫 보상 직후, 두 대목을 눈여겨본다. 첫 실패 직후에 사람이 우르르 빠진다면 그 실패가 통제감을 빼앗았다는 신호이고, 17장에서 본 그대로다. 손댈 입력은 실패를 처벌이 아니라 박자로 바꾸는 것, 곧 막힌 그 지점에서 바로 다시 시작하게 하거나 되돌릴 길을 내주는 것이다. 반대로 첫 보상 직후에 사람이 한 번 더 움직인다면 그 보상이 다음 행동을 불렀다는 신호이니, 그 보상이 무엇이었는지 살펴 그 결을 다른 단계에도 빌려 쓴다. 첫 실패 직후 이탈과 첫 보상 직후 재행동, 이 두 대목이 우리 첫 경험이 사람을 내쫓는지 끌어안는지를 비춘다.

여기서 게임 업계의 관습 둘을 검문소에 세운다. 하나는 결과 숫자를 손잡이로 착각하는 관습, 다른 하나는 평균 하나로 판단하는 관습이다.

먼저 결과 숫자를 손잡이로 당기려는 관습이다. 이 관습은 매출이나 전환율 같은 결과 숫자가 우리가 직접 돌릴 수 있는 손잡이라고 전제해서, 목표가 떨어지면 그 숫자 자체를 노려보고 그 숫자를 빨리 올릴 장치를 첫 화면에 욱여넣는다. 첫날부터 결제를 들이밀고, 전환율을 올리려 첫 화면에 할인 팝업을 띄운다. 일반인은 이 손잡이질을 환영으로 받지 않는다. 그는 첫 화면에서 깊이를 묻기 전에 안전을 묻는데 결제와 할인이 먼저 닥치면 안전이 깨지니, 이 관습이 물리는 요금은 신뢰의 붕괴다. 결과 숫자를 직접 당기려는 손이 정작 그 숫자로 가는 길을 끊는다. 본질만 남기고 바꾼다. 결과를 높이고 싶다는 마음은 살리되 결과를 직접 당기려는 관성을 던다. 손은 입력에 두고, 결과는 그 입력의 그림자로 따라오게 두며, 결제는 사람이 이 세계를 충분히 좋아하게 된 한참 뒤의 일로 미룬다.

다음은 평균 하나로 판단하는 관습이다. 이 관습은 한 게임에 하나의 첫 경험이 있고 하나의 평균 숫자로 그 건강을 다 말할 수 있다고 전제하지만, 우리 사용자는 9장에서 봤듯 저마다 다른 문으로 다른 기대를 들고 오는 한 무리가 아니다. 평균 하나로 판단하는 관습이 물리는 요금은 오진이다. 잘 통하던 무리와 안 통하던 무리를 한 숫자로 뭉개, 멀쩡한 곳을 고치고 새는 곳을 놓친다. 본질만 남기고 바꾼다. 한눈에 보고 싶다는 마음은 살리되 평균 하나로 다 안다는 관성을 던다. 무리를 갈라 어느 무리에서 새는지를 짚고, 그 무리의 입력을 따로 만진다.

평균이 보고서마다 살아남는 이유가 편해서만은 아니다. 평균은 아무도 다치게 하지 않는다. 무리를 가르는 순간 "광고 유입의 첫 화면이 죽어 있다"는 문장이 생기고, 그 문장에는 책임질 사람의 이름이 따라붙는다. 그래서 조직은 평균을 사랑한다. 평균이 가장 예의 바른 거짓말인 건 숫자의 성질이기 전에, 누구도 다치지 않게 하려는 조직의 예의이기 때문이다.

튜토리얼을 다 했는데 재미는 없을 수 있다

사슬을 짤 때 한 가지를 더 조심한다. 출력 숫자가 올랐다고 첫 경험이 좋아진 게 아닐 수 있다. 21장에서 튜토리얼 완료율 80퍼센트가 다음 날 재방문 5퍼센트와 어긋나던 장면을 떠올린다. 튜토리얼 완료율은 길을 좁혀 한 곳으로만 몰고, 다른 버튼을 다 막고, 시키는 것만 하게 해도 오를 수 있지만, 그렇게 끝까지 끌려온 사람이 재미를 본 건 아니다. 완료율은 "내 설명을 다 들었나"를 잴 뿐, "내 게임을 좋아하게 됐나"를 재지 못한다.

이게 인과를 짤 때 가장 흔히 빠지는 함정이다. 숫자 하나를 올리는 데 골몰하다가, 그 숫자가 정작 우리가 바라던 결과와 어긋난 숫자였다는 걸 뒤늦게 안다. 그러니 한 숫자가 올랐을 때 늘 옆에 다른 숫자를 나란히 놓고 본다. 튜토리얼 완료율이 올랐으면 그 옆에 첫 재미 도달률과 다음 날 재방문을 두고 셋이 같은 방향으로 움직이는지 어긋나는지를 보는데, 완료율만 올랐는데 재방문은 그대로라면 그 완료율은 사람을 좁은 길로 몰아 얻은 헛숫자다.

▶ 내 화면에 대입하는 세 가지

지금 보는 평균이 가장 나쁜 사용자를 가리고 있지 않나.

내 손이 만지는 입력과 사용자가 결정하는 출력을 갈라 놓았나.

이 숫자를 분포로 봤나, 평균 하나로 봤나.

평균 한 줄로 첫 화면의 성패를 판정하고 있다면, 무리를 갈라 가장 새는 무리부터 다시 본다.

그래서, 손은 입력에 두고 눈은 출력에 둔다

계기와 계기판을 가르고 나면 첫 경험을 고치는 손이 제자리를 찾는다. 출력 숫자는 눈으로 보는 것이지 손으로 미는 것이 아니어서, 다음 날 재방문이 낮으면 재방문을 노려보는 대신 그 재방문으로 가는 입력을 찾는다. 돌아올 핑계가 첫 세션에 있었는지, 첫 보상이 제때 왔는지, 첫 실패가 사람을 내쫓지 않았는지. 그 입력을 하나 바꾸고, 출력 바늘이 뒤따라 움직이는지를 본다.

그리고 그 출력은 평균 하나로 보지 않는다. 무리를 갈라 어느 무리에서 새는지를 짚고, 그 무리의 입력을 따로 만진다. 손은 늘 내가 결정하는 입력에 두고 눈은 타인이 결정하는 출력에 두면, 낮은 숫자 앞에서 무력해지지 않는다. 낮은 숫자는 내가 못 만지는 벽이 아니라 어느 입력을 손볼지 알려주는 신호이니, 그 신호를 작품에 대한 평가로 받아 자존심을 다칠 일도 아니다. 다만 그러고도, 숫자가 낮을 때 그것을 신호로 받을지 판정으로 받을지의 문제가 남는다. 그게 다음 장의 일이다.

참고 콘텐츠

이 장의 개념이 드러나는 다른 매체·분야의 사례.

자동차 / 기계 계기판

자동차 속도계와 가속 페달 : 속도계 바늘은 결과이고 손발로 미는 건 페달과 핸들이다. 바늘을 손으로 돌릴 수는 없다.

현실 업무 절차

버클리 대학원 입학 통계의 심슨 역설 : 전체 평균만 보면 남성 합격률이 높아 차별처럼 보였지만, 학과별로 갈라 보니 다수 학과에서 오히려 여성 합격률이 더 높았다. 평균 하나가 무리를 가르면 결론이 뒤집히니, 손대기 전에 무리를 갈라 봐야 한다.
목표가 된 측정이 망가지는 사례 : 영국 병원 대기 시간 상한이 목표가 되자 의뢰를 늦춰 시계를 안 켜거나 쉬운 환자를 먼저 처리해 숫자만 맞추는 일이 자주 거론된다. 결과 숫자를 손잡이로 당기면 그 숫자로 가는 길이 끊긴다.

비디오게임 운영

튜토리얼 완료율과 첫날 재방문의 어긋남 : 강제 직선 튜토리얼을 끝까지 시키면 완료율은 올라도 첫날 재방문은 그대로일 수 있다고 업계에서 일관되게 거론된다. 한 숫자가 올라도 옆의 재방문 숫자와 나란히 봐야 헛숫자를 가린다.

일반 앱

듀오링고의 성장 모델 : 매일 사용자를 신규·현행·재활성·부활 같은 상태로 갈라 두고 상태 사이를 오가는 전환율을 따로 본다. 그 가운데 현행 사용자 잔존율(CURR)이 일일 활성에 가장 크게 작용한다는 걸 찾아내 그 입력에 손을 모은다. 평균 한 줄 대신 무리별 전환을 본 사례다.

나머지 참고 콘텐츠는 이 글 끝의 '23장 부록'에 모아 두었다(단행본에서는 부록 D로 묶인다).

설계 노트 ▶ 직접 해보기

22장에서 고른 계기판 숫자 중 하나를 가져온다. 이를테면 다음 날 재방문이다. 종이 한가운데에 그 숫자를 적고, 동그라미를 친다. 이건 출력, 곧 타인의 결정이다.

이제 그 동그라미 둘레에, 그 숫자를 흔들 만한 입력을 다섯 개 적는다. 내가 오늘 화면에서 직접 바꿀 수 있는 것만 적는다. 첫 보상이 오는 시점, 로그인을 요구하는 시점, 돌아올 핑계가 심긴 자리, 첫 실패 뒤에 다시 시작하는 방식, 작별 인사의 모양 같은 것들이다. 입력 다섯에서 가운데 출력으로 화살표를 긋는다. 이게 계기와 계기판의 인과맵이다. 다만 이 화살표들은 아직 가설이라, 정말 인과인지는 25장에서 잰다.

다 그렸으면 한 가지를 더 한다. 가운데 출력 숫자를 무리별로 갈라 다시 적어 본다. 광고로 들어온 사람과 제 발로 찾아온 사람, 두 줄로. 두 줄의 숫자가 크게 다르면, 입력을 만질 곳은 더 낮은 줄의 무리다. 평균 하나에 손대려던 자리를, 새는 무리의 입력으로 옮긴다. (계기 다섯에서 움직일 계기판 지표까지를 잇는 정밀한 인과맵 빈 양식은 부록 C.)

한 줄 요약: 매출은 타인의 결정이고, 나의 결정은 인풋이다. 계기판에 올린 출력 숫자는 손으로 직접 밀 수 없으니, 그 숫자로 가는 입력, 곧 계기를 만진다. 손은 입력에 두고 눈은 출력에 둔다. 평균 하나로 판단하면 잘 통하던 무리와 안 통하던 무리를 뭉개 오진하니, 무리를 갈라 새는 곳을 짚는다. 첫 실패 직후 이탈과 첫 보상 직후 재행동이 사람을 내쫓는지 끌어안는지를 비춘다. 결과 숫자를 손잡이로 당기려는 관습과 평균 하나로 판단하는 관습은 신뢰를 깨고 오진을 부른다. 튜토리얼을 다 끝냈는데도 재미는 없을 수 있으니, 한 숫자가 오르면 옆 숫자와 나란히 놓고 본다. 다음 장: 입력과 출력을 갈랐고, 새는 곳을 짚는 법도 생겼다. 그런데 그 숫자가 낮게 나왔을 때 마음이 문제다. 첫 핵심 재미 도달률이 낮다는 보고를 받으면, 그게 내 작품이 부정당한 것처럼 느껴진다. 숫자가 낮으면 작품이 모자란 것인가. 사업의 목표와 만드는 사람의 자존심은 어떻게 화해하는가. 24장은 그 문제를 다룬다.

23장 부록: 참고 콘텐츠 모음

계기(손으로 만지는 입력)와 계기판(결과로 나오는 출력)을 가르고, 입력에서 경험을 거쳐 출력으로 이어지는 사슬을 따라 새는 곳을 짚으며, 평균 하나 대신 무리를 갈라 읽는 일이 다른 분야에서는 어떻게 나타나는지를 모았다. 자동차와 항공의 계기판, 헬스와 제조 현장, 영화와 통계의 고전 사례까지 섞었고, 항목마다 끝에 '살펴볼 점'을 달아 두었다. 손은 입력에 두고 눈은 출력에 둔다는 본문의 한 문장과, 결과 숫자를 손잡이로 당기면 그 숫자로 가는 길이 끊긴다는 경고에 사례를 하나씩 대 보며 읽으면 좋다.

자동차 / 기계 계기판

엔진 경고등과 림프 모드 : 경고등은 증상을 비추는 출력일 뿐, 손댈 곳은 그 등을 켜지게 만든 센서나 연료계통이다. 살펴볼 점: 출력을 가리는 게 아니라 출력이 가리키는 입력을 찾는 차례이니, 낮은 숫자 앞에서 숫자가 아니라 원인을 찾는 버릇을 본다.
OBD 진단 코드 : 정비사는 코드로 어디가 고장인지를 읽고, 실제로 만지는 건 그 원인 부품이다. 살펴볼 점: 가리키는 출력과 손대는 입력이 갈린다는 본문 구분이 정비소에서는 직업 상식으로 굳어 있음을 본다.
온도조절기와 실내 온도 : 만지는 건 설정 손잡이지 온도 자체가 아니고, 온도는 그 설정에 따라 따라온다. 살펴볼 점: 일상에서는 누구나 입력과 출력을 가르고 있다는 증거이니, 같은 구분을 지표 앞에서만 잊는 이유를 묻게 한다.

항공 계기판

조종사의 계기 교차 점검(instrument cross-check) : 여러 계기를 훑어 비행 상태를 읽되, 손은 조종간과 스로틀에 둔다. 계기는 보는 것이고 조종면은 미는 것이다. 살펴볼 점: 눈 둘 곳과 손 둘 곳을 훈련으로 갈라 둔 직업이니, '손은 입력에 눈은 출력에'가 기량으로 굳은 모습을 본다.
주 계기와 보조 계기 : 한 단계에서 가장 중요한 계기 하나를 주로 보되, 옆 계기로 그 값이 맞는지 교차 확인한다. 살펴볼 점: 한 숫자만 믿지 않고 옆 숫자와 나란히 본다는 본문 규칙의 원형이다.
"파워 + 자세 = 성능" 원리 : 직접 만지는 입력(스로틀과 조종간)으로 결과(속도·고도)를 만든다는 입력·출력 사고의 교본이다. 살펴볼 점: 결과를 바꾸고 싶을 때 결과가 아니라 두 입력을 조정하도록 가르치는 공식이니, 우리의 '파워와 자세'에 해당하는 입력 두엇을 골라 보게 한다.

헬스 / 자기측정 앱

활동량 링·걸음 수 대시보드 : 화면의 링은 결과 표시일 뿐, 채우려면 실제로 걸어야 한다. 링을 손가락으로 채울 수는 없다. 살펴볼 점: 출력을 직접 밀 수 없다는 사실이 화면에 그대로 드러난 예이니, 우리 계기판의 어떤 숫자를 누군가 손가락으로 밀려 하고 있지 않은지 본다.
체중계 숫자와 식단·운동 : 보는 건 몸무게라는 출력이고, 만지는 건 먹고 움직이는 입력이다. 숫자를 노려본다고 숫자가 바뀌지 않는다. 살펴볼 점: 출력 앞에서의 무력감이 입력을 찾는 순간 행동 목록으로 바뀌는 과정을 본다.

현실 업무 절차

영업 파이프라인 단계별 전환율 : 매출이라는 총합 대신 단계별로 어디서 거래가 새는지를 보고, 그 단계의 활동을 바꾼다. 살펴볼 점: 사슬을 단계로 끊어 가장 가파른 칸을 찾는 본문 독법의 영업판이다.
유입 채널별 성과 분리(광고 대 자연 유입) : 같은 평균 안에 서로 다른 무리가 섞여 있어, 갈라 봐야 고칠 곳이 드러난다. 살펴볼 점: 본문의 5퍼센트와 25퍼센트가 평균 10퍼센트로 뭉개지던 그 장면이니, 우리 평균 뒤에 어떤 두 무리가 숨어 있는지 갈라 보게 한다.
아마존의 통제 가능한 입력 지표 : 아마존 출신 임원들이 쓴 책 '순서 파괴'(Working Backwards)에 따르면, 아마존은 주가나 매출 같은 출력 지표 대신 상품 가짓수·가격·배송 속도처럼 손으로 직접 움직일 수 있는 입력 지표를 골라 주간 업무 리뷰에서 그것부터 점검한다고 소개된다. 살펴볼 점: '손은 입력에, 눈은 출력에'를 회사의 회의 체계로 굳힌 사례이니, 우리 주간 회의의 안건이 출력인지 입력인지 세어 보게 한다.
웰스파고의 교차판매 목표 : 고객 1인당 계좌 수라는 출력 숫자를 영업 목표로 내리누르자, 할당을 맞추려는 직원들이 고객 몰래 가짜 계좌 수백만 개를 만든 사실이 2016년 드러나 거액의 벌금과 대량 해고로 이어졌다. 살펴볼 점: 출력 숫자를 손잡이처럼 당기게 만들면 숫자는 오르되 실체가 무너진다는 가장 비싼 반례이니, 우리 목표 숫자가 부추길 수 있는 변칙을 미리 묻게 한다.

지표·데이터

신장결석 치료의 심슨 역설 : 1986년 영국 의학지에 실린 비교에서 전체 성공률은 새로 나온 시술 쪽이 높아 보였지만, 결석 크기로 갈라 보면 작은 결석에서도 큰 결석에서도 개복 수술의 성공률이 더 높았다. 어려운 큰 결석 환자가 개복 쪽에 몰려 평균이 뒤집힌 것이다. 살펴볼 점: 무리를 가르면 결론이 거꾸로 뒤집히는 교과서 사례이니, 본문의 버클리 입학 통계와 나란히 두고 평균 한 줄을 의심하는 버릇을 들인다.
발드의 폭격기 보강 : 2차 대전 때 통계학자 아브라함 발드가, 귀환한 폭격기의 탄흔이 많은 곳이 아니라 탄흔이 없는 엔진 쪽을 보강하라고 조언했다고 전해진다. 탄흔 분포는 살아 돌아온 기체만의 기록이라, 엔진을 맞은 기체는 애초에 데이터에 없다는 것이다. 살펴볼 점: 계기판은 남아 있는 사용자만 비춘다는 한계를 정확히 짚으니, 떠난 사람들이 남긴 빈칸을 깔때기 어디에서 읽을지 묻게 한다.
코브라 포상금의 일화 : 식민지 시대 인도에서 코브라를 줄이려 사체에 포상금을 걸자 사람들이 코브라를 길러 바쳤고, 제도를 거두자 기르던 뱀까지 풀려나 도리어 늘었다는 이야기가 회자된다. 사실 여부가 또렷이 확인된 기록은 아니지만, 결과 숫자에 보상을 직접 걸면 그 숫자로 가는 길이 뒤틀린다는 교훈의 별명(코브라 효과)으로 굳었다. 살펴볼 점: 출력을 손잡이로 당기는 일의 우화판이니, 우리 KPI에 걸린 보상이 어떤 사육을 부를지 상상하게 한다.

비디오게임 운영

캔디 크러시 사가의 한 칸 난이도 조정 : 단계별 통과·이탈 데이터로 사람이 우르르 빠지는 칸을 짚고, 그 칸의 난이도라는 입력을 A/B로 바꿔 본다. 살펴볼 점: 가장 가파르게 꺼지는 한 칸을 찾아 그 입력을 만진다는 본문 독법 그대로이니, 우리 깔때기에서 그 한 칸이 어디인지 본다.
캔디 크러시 사가 한 칸의 전환과 이탈 맞바꿈 : 난이도를 높여 결제 전환이라는 출력을 직접 끌어올리면 단기 숫자는 오르지만 그 칸에서 사람이 빠져 장기 잔존이 깎인다고 알려져 있다. 살펴볼 점: 출력을 직접 끌어올리는 손이 장기 잔존이라는 다른 출력을 깎는다는 데서, 한 숫자를 만질 때 옆 숫자를 같이 보는 이유를 본다.

일반 앱

제품 분석 도구의 퍼널·코호트 화면 : 전환이라는 결과를 단계와 무리로 쪼개, 평균 하나로는 안 보이던 새는 곳을 비춘다. 살펴볼 점: 도구가 이미 무리별 읽기를 기본으로 제공한다는 데서, 평균 보고가 도구의 한계가 아니라 습관의 문제임을 본다.
신용점수와 신용 사용률 : 점수 자체는 손으로 밀 수 없는 출력이고, 만지는 건 카드 사용률을 낮추고 제때 갚는 입력이다. 점수표가 각 요인 비중을 쪼개 어디를 손볼지 알려주는 것까지가 계기와 계기판의 인과를 그대로 닮았다. 살펴볼 점: 출력 옆에 입력의 명세까지 붙여 주는 계기판의 모범이니, 우리 대시보드가 숫자만 보여 주는지 손볼 곳까지 가리키는지 본다.

제조 / 현장 운영

도요타 생산방식의 안돈 줄 : 작업자가 결함을 발견해 줄을 당기면 어느 공정에 문제가 있는지 신호등이 켜지지만, 그 등은 위치를 가리킬 뿐이고 실제로 고치는 건 그 원인 공정이다. 살펴볼 점: 신호는 위치를 가리키고 손은 원인으로 간다는 분업이니, 낮은 숫자를 판정이 아니라 신호로 받는 본문의 태도를 현장 언어로 본다.

영화 / 논픽션

영화 아폴로 13 : 폭발 뒤 산소가 빠져나가 게이지 바늘이 떨어지는 걸 승무원이 지켜보면서도 그 바늘을 직접 멈출 수 없고, 관제팀은 바늘이 아니라 원인인 연료전지와 누출 계통에 손을 댄다. 살펴볼 점: 떨어지는 출력을 보되 손은 그 원인 입력에 둔다는 본문 문장의 가장 극적인 그림이다.
머니볼의 출루율 전환 : 점수판의 승수는 직접 밀 수 없는 출력이라, 직접 만질 입력으로 타율 대신 출루율을 골라 그 입력으로 득점이라는 결과를 끌어낸다. 살펴볼 점: 입력을 새로 고르는 일이 전략 그 자체가 된다는 데서, 우리가 고른 입력이 정말 손에 잡히는 것인지 본다.

문학 / 철학

활쏘기의 명중과 자세 : 과녁을 직접 맞히려 들기보다 서는 법·당기는 법·호흡 같은 자세라는 입력에 집중하면 명중은 그 결과로 따라온다고 궁술의 가르침들이 전한다. 살펴볼 점: 결과를 직접 당기려는 손을 거두고 입력에 두라는 이 장의 태도와 닿으니, 숫자 목표 앞에서 자세부터 점검하는 차례를 빌린다.