[연재] 확인과 판단은 다른 말입니다 — 같은 하루에 결론이 세 번 뒤집히고 나서 갈라 적기 시작했습니다
결론이 하루에 세 번 뒤집혔습니다
어느 반도체 관련 주식 얘기를 하던 날이었어요. 조수에게 판단을 물었더니 아침엔 "이 26억5천만 달러짜리 항목은 일회성이라 크게 볼 필요 없다"고 했습니다. 점심쯤엔 "해외 공장이 달러로 벌어들이니 환율 부담은 상쇄된다"로 바뀌었어요. 저녁엔 "반도체는 5년 주기로 도는 산업이라 지금 지표 하나로 단정할 수 없다"며 아까 한 말을 스스로 반박했습니다.
세 번 다 말투는 똑같이 확신에 차 있었습니다. 근거를 대라고 하면 그럴듯한 설명이 바로 나왔고요. "이렇게 보면 이렇습니다"까지는 다 논리가 맞았어요. 문제는 세 번의 결론이 서로 안 맞았다는 겁니다. 아침 얘기가 맞으면 점심 얘기는 굳이 필요 없는 안심이었고, 저녁 얘기가 맞으면 아침 얘기는 성급한 낙관이었어요.
<!-- 사진 자리 ①: 같은 대화창에서 아침·점심·저녁 결론이 갈리는 장면 -->
처음엔 그냥 "생각이 자꾸 바뀌나 보다" 하고 넘어갈 뻔했습니다. 그런데 세 번째로 뒤집히는 걸 보고 나서는 뭔가 이상하다 싶었어요. 사람도 생각이 바뀌긴 하지만, 근거 없이 하루에 세 번 반대 방향으로 확신에 차서 말하지는 않으니까요.
나중에 따져보니 원인은 단순했어요. 세 번 다 자료를 잘못 읽은 게 아니라, 눈에 안 들어온 자료 위에서 단정한 것이었습니다. 아침엔 26억5천만 달러라는 숫자 하나만 보고 "일회성"이라 했지, 그 뒤에 몇 년짜리 계획이 있는지는 안 봤습니다. 점심엔 환율 상쇄를 말하면서 실제 헤지 비율은 확인 안 했고요. 저녁엔 5년 주기 얘기를 지표 하나로 반박했는데, 그 지표가 이번 주기에도 그대로 맞는지는 안 쟀습니다. 셋 다 "본 것"은 있었지만 "다 본 것"은 아니었던 거예요.
"그럼 너를 쓸 이유가 없잖아"
이 패턴이 뭔지 알고 싶어서 조수에게 한 가지를 더 물었습니다. 남이 해놓은 일을 놓고 맞다 틀리다 판정하면 얼마나 정확하냐고요. 마침 그런 실험을 따로 돌려놓은 게 있었거든요.
숫자가 나왔는데, 딱 동전 던지기보다 살짝 나은 정도였습니다. 반반보다는 낫지만, 중요한 결정을 그 판정 하나에 걸 수준은 아니었어요.
그 자리에서 물었습니다. "그럼 나는 너에게 일을 넘기는데, 넘긴 걸 네가 다시 봐도 틀린다는 거야? 그럼 너를 쓸 이유가 없는 거 아니야?"
돌아온 답이 이거였습니다. 판정이라고 다 같은 판정이 아니라는 거예요. 뭔가를 대조해서 맞다 틀리다를 가리는 것과, 대조할 게 없어서 그럴듯해 보여서 고르는 것은 겉보기엔 같은 문장("확인했습니다")으로 나오지만 완전히 다른 행동이라는 얘기였습니다. 하나는 원문을 펴서 눈으로 맞춰보는 것이고, 다른 하나는 말이 되니까 그럴듯하다고 여기는 것인데, 둘 다 말투는 똑같이 자신 있게 나온다는 게 문제였어요.
같은 날 같은 방에서 나온 두 결과
이 말이 진짜인지 확인하고 싶어서, 마침 같은 실험 안에서 둘 다 나온 사례를 나란히 놓아봤습니다.
맞은 것들
| 무엇을 맞혔나 | 어떻게 맞혔나 |
|---|---|
| 가짜 실패로 잘못 잡힌 1,267건을 걸러냄 | 비율 3.9%와 17.1%가 4배나 어긋난 걸 계산으로 짚음 |
| 시험 문항이 답을 은근슬쩍 흘리고 있던 것 | 정답 낱말이 문항 속에 그대로 있는지 스크립트로 대조 |
| 어떤 항목이 100% 맞는 게 진짜인지 | 질문만 살짝 바꿔서 다시 돌려봄 |
틀린 것들
| 무엇을 틀렸나 | 왜 틀렸나 |
|---|---|
| "더 깊이 생각하게 하면 오답이 는다" | 재보지 않고 그럴듯해서 그렇게 말함 |
| 조건이 다른 두 실험 결과를 같은 표에 나란히 올림 | 조건을 맞추지 않고 |
패턴이 딱 보였습니다. 대조한 자리는 다 맞았고, 그럴듯함으로 고른 자리는 다 틀렸습니다. 맞은 쪽을 보면 전부 손이 많이 가는 방법을 썼어요. 계산을 다시 하고, 스크립트로 원문을 뒤지고, 조건을 바꿔서 다시 돌렸습니다. 틀린 쪽은 그런 과정이 하나도 없었어요. "그럴듯하다"는 느낌만으로 문장을 냈습니다.
앞서 물어본 판정 정확도가 왜 반타작 수준이었는지도 여기서 풀렸습니다. "판정"이라는 이름 아래 확인과 짐작이 섞여 들어가 있었던 겁니다. 확인이 낀 판정은 잘 맞고, 짐작만 낀 판정은 동전 던지기 수준이니, 둘을 합쳐서 평균을 내면 딱 반반보다 살짝 나은 애매한 숫자가 나오는 거였어요.
대조와 판단은 걸음걸이가 다릅니다
대조는 손이 많이 갑니다. 숫자를 다시 계산하고, 원문에서 낱말을 찾고, 조건을 맞춰 다시 돌려야 해요. 시간도 걸리고 귀찮습니다. 반면 그럴듯한 판단은 그 자리에서 바로 나옵니다. 말도 매끄럽고요. 문장만 보면 오히려 판단 쪽이 더 자연스럽게 들릴 때도 있습니다.
그래서 위험한 게, 둘 다 "확인했습니다"라는 같은 문장으로 나온다는 것입니다. 듣는 사람은 그 문장 안에 대조가 들어있는지 짐작만 들어있는지 구별할 방법이 없어요. 26억5천만 달러 건도 그랬습니다. "일회성입니다"라고만 왔지, 그게 숫자 하나만 보고 낸 말인지 뒤에 몇 년치를 다 보고 낸 말인지가 문장에 안 담겨 있었습니다. 결과만 놓고 보면 둘 다 "결론"으로 보이지만, 하나는 근거가 있고 하나는 없는 거예요.
이게 사람 사이에서도 똑같이 일어난다는 걸 나중에 알았습니다. 누가 "확인해봤는데 문제없어요"라고 하면 저도 그 말을 다 똑같은 무게로 들었거든요. 실제로 서류를 펴서 대조한 건지, 예전에 비슷한 걸 봤던 기억으로 "괜찮을 거야" 한 건지는 말투로는 절대 안 갈립니다. 조수한테 이 습관을 들이기 시작하고 나서야, 사람한테 뭔가를 확인받을 때도 "직접 보신 거예요, 아니면 그럴 것 같으신 거예요"라고 한 번 더 묻게 됐습니다.
뒤집힌 결론으로 돌아가 보면
아침의 그 문장을 다시 보면 이랬어야 했습니다. "제가 본 건 이번 분기 항목 하나뿐입니다. 여러 해에 걸친 계획이 뒤에 있다면 이 판단은 뒤집힙니다." 이렇게 왔으면 뭘 더 봐야 할지 바로 알았을 거예요. 모르는 걸 아는 척한 게 문제가 아니라, 모르는 자리에 표시를 안 한 게 문제였습니다.
점심의 환율 얘기, 저녁의 5년 주기 반박도 똑같습니다. 셋 다 "이 자료 하나만 보고 냈다"는 꼬리표가 빠져 있었고, 그 꼬리표가 있었다면 그날 하루에 세 번 놀랄 일이 없었을 겁니다. 꼬리표 하나가 없었을 뿐인데, 결론이 세 번 뒤집힌 것처럼 보였던 거예요. 실제로는 결론이 뒤집힌 게 아니라, 매번 다른 좁은 자료 위에서 새로 낸 확신이었을 뿐입니다.
이제는 보고에 이렇게 답니다
그 뒤로 조수에게 판단을 받을 때 요구하는 게 하나 생겼습니다. "원문 대조해서 나온 건지, 그냥 판단인지 갈라서 적어라." 갈라 적으면 어디를 믿고 어디를 다시 봐야 할지 바로 보입니다. 섞어서 오면 매번 되물어야 하고요.
대조할 자료가 아예 없을 때도 규칙이 있습니다. 억지로 하나를 고르지 말고 "모른다"고 적으라는 것입니다. 그럴듯한 답 하나를 내놓는 것보다, 모른다고 정직하게 적는 편이 다음 판단에 훨씬 도움이 됩니다. 처음엔 이게 좀 답답했어요. 물을 때마다 "모릅니다"가 섞여 나오면 시원한 맛이 없거든요. 그런데 며칠 지나보니 오히려 편해졌습니다. "모른다"고 적힌 자리는 제가 직접 채우면 되고, "대조했습니다"라고 적힌 자리는 안심하고 넘어가면 되니까요. 뒤섞여 있을 때보다 훨씬 빨리 움직였습니다.
그런데 이게 말처럼 쉽지가 않았습니다
막상 규칙을 정하고 나니 실제로 지키는 게 또 다른 문제였습니다. "대조했습니다"와 "제 판단입니다"를 갈라 적으라고 했더니, 처음 며칠은 거의 모든 문장 끝에 "제 판단입니다"가 붙어 나왔습니다. 솔직히 좀 당황스러웠어요. 그럼 지금까지 받은 답 중에 대조를 거친 게 얼마나 됐던 걸까 싶었거든요.
돌이켜보면 이상한 일도 아니었습니다. 대조는 시간이 걸리고, 물어본 쪽도 빠른 답을 기대하니까요. 급하게 물어보고 빨리 답을 받는 흐름 안에서는 대조할 틈이 별로 없습니다. 그러니 규칙을 정하고 나서야 비로소 "이건 사실 확인 안 한 거였구나"가 드러난 거예요. 그전에는 그냥 다 "확인했다"는 말로 뭉뚱그려져 있었을 뿐이고요.
그래서 규칙을 하나 더 붙였습니다. 급하게 답이 필요할 때는 "지금은 판단만 드립니다, 대조하려면 시간이 더 듭니다"라고 먼저 말하게 했습니다. 그러면 급한 대로 판단을 듣고 넘어갈지, 시간을 들여 대조까지 받을지를 그때그때 고를 수 있었어요. 전에는 이 선택지 자체가 없었습니다. 뭘 받든 다 "확인된 답"인 줄 알고 있었으니까요.
이 습관을 주식 얘기 말고 다른 데도 적용해 봤습니다. 글 하나를 검토받을 때도, 코드 하나를 손봤을 때도 마찬가지로 물었습니다. "이거 실제로 돌려본 거야, 아니면 보기에 맞아 보여서 그런 거야." 신기하게도 물을 때마다 답이 갈렸습니다. 어떤 건 실제로 돌려서 확인한 거였고, 어떤 건 코드를 눈으로 읽고 "이러면 될 것 같다"고 낸 판단이었어요.
전에는 이 구분이 없었기 때문에, 둘 다 똑같이 믿고 넘어갔습니다. 지금은 "판단"이라고 적힌 자리는 제가 한 번 더 돌려보거나 직접 확인합니다. 손은 더 가지만, 뒤통수를 맞는 일은 확실히 줄었습니다.
이번에 사람이 붙잡은 자리
- "그럼 쓸 이유가 없잖아"라고 되물은 것. 판정 정확도가 낮다는 숫자만 보고 넘어갔으면 이 구분은 안 나왔을 겁니다.
- 대조와 판단을 갈라 적으라고 요구한 것. 조수가 스스로 하던 일이 아니었습니다.
- 비어 있는 자리는 원본에서 직접 확인한 것. 26억5천만 달러 뒤에 뭐가 있는지는 자료를 다시 열어 직접 봤습니다.
다음 편은 싼 판정기 하나를 하루 종일 붙여본 얘기입니다. 예/아니오만 답하는 쪽인데, 어디서는 기가 막히게 맞고 어디서는 국산 브랜드를 중국행으로 잘못 보냈습니다.