예측 시장의 간략한 역사: 베팅에서 예측 기계까지

원래 게시자: Benny Attar

LamaC 컴파일

"추천 메시지: 예측 시장의 역사, 작동 방식 및 사용 방법에 대한 소개 글입니다. style="text-align: left;">"추천사: 예측 시장의 발전 역사와 작동 방식, 기존 여론조사와 비교한 장점을 소개하고 2024년 미국 대선의 예를 통해 실제 예측에 성공적으로 활용된 사례를 보여줍니다. "

11월 4일.

2024년 11월 4일입니다. 미국 대선이 하루 앞으로 다가왔습니다. 여론조사, 과거 예측 모델, 전문가들은 이번 대선이 매우 박빙의 승부가 될 것이라고 입을 모으고 있습니다. 저명한 정치 예측가 네이트 실버는 오늘 아침 8만 번의 시뮬레이션을 통해 카말라 해리스가 도널드 트럼프를 단 12표, 0.0015% 차이로 근소하게 이겼다고 발표했습니다. 하지만 다음 날 실제 결과는 해리스 후보의 압승이었습니다. 하지만 전문가들은 이런 일이 일어날 가능성은 전혀 없다고 예측했습니다! 누가 이런 결과를 예상할 수 있었을까요?

사실은 같은 날 두 주요 예측 시장인 폴리마켓과 칼시에서 모두 도널드 트럼프의 당선 확률을 약 60%로 예측했다는 것입니다. 최종 결과는 트럼프가 7개의 스윙 스테이트와 대중 투표에서 모두 승리하면서 그 확률과 일치했습니다.

그전까지 예측 시장은 도박, 더럽고 규제되지 않은 헤지 상품으로 여겨져 왔습니다. 그러나 대통령 선거를 정확하게 예측하는 데 성공하면서 예측 머신의 진정한 가치가 세상에 알려졌습니다. 어떻게 이 지경에 이르렀을까요? 그리고 예측 머신이 실제로 작동하는 이유는 무엇일까요?

예측 시장은 실제 이벤트를 위한 시장입니다. 트레이더는 "도널드 트럼프" 또는 "카말라 해리스"와 같은 이진 결과에 베팅할 수 있습니다. 각 옵션의 가격(계약이라고 함)은 해당 시점의 당첨 확률에 비례합니다. 예를 들어, 도널드 트럼프의 0.62달러 계약은 62%의 당첨 확률에 해당합니다. 최종적으로 승리한 계약은 1달러에 전액 지불되며, 다른 모든 계약의 비용 합계가 수익이 됩니다. 다른 시장과 마찬가지로 계약 가격은 주식 시장과 마찬가지로 수요와 공급 요인에 의해 결정됩니다. 트레이더는 계약에서 정보적 이점을 발견하면 이를 매수하고 가격은 상승합니다.

2024년 11월 1일 폴리마켓 대통령 선거 당선자

기존 여론조사 및 전문가 예측과 달리 예측 시장은 기존의 여론조사나 전문가 예측과 달리 분산된 개인 정보를 실시간으로 취합하고, 지속적으로 업데이트하며, 참여자에게 경제적 이익을 제공한다는 점에서 차이가 있습니다. 이러한 관점을 이해하려면 예측 시장의 역사를 이해할 필요가 있습니다.

약력

시장과 도박은 수세기 동안 인기를 누려왔습니다. 교황 선거에 대한 베팅은 최근 다시 떠오른 관행으로, 16세기 초에 시작된 가장 오래된 문서화된 선거 시장 중 하나입니다. 정보에 입각한 추기경의 내부 정보 유출은 베팅 배당률에 빠르게 영향을 미치고 스며들어 트레이더가 재정적 이익을 헤지할 수 있게 합니다. 1591년 교황 그레고리 14세가 이러한 도박을 강력히 금지하는 법령을 발표했지만, 20세기 초에 도박은 다시 부활했습니다. 그 이후로 주요 북메이커들은 선거 결과에 베팅하는 서비스를 제공하기 시작했습니다. 오늘날 이 관행은 깊이 자리 잡았으며 실제 이벤트에 베팅하는 것이 일반화되었습니다.

인터넷 등장 이전의 예측 및 베팅 시장은 정확도와 도달 범위 측면에서 어느 정도 발전했지만, 온라인 거래와 베팅의 부상은 이러한 시장에 이러한 시장의 성장에 필요한 원동력을 제공했습니다. 디지털 예측 시장의 출현은 1980년대 후반 아이오와 대학교에서 개척한 것으로부터 시작되었습니다. 학계에서 초기 성공을 거둔 후 상업화를 위한 여러 시도가 있었고, 2000년대 초에는 대규모 금융 후원자와 기관이 소유한 두 개의 자회사인 인트레이드와 캔터 거래소가 경제 및 문화 이벤트에 대한 투기 및 헤지 도구로 예측 시장을 시작했으며, 지금도 활동 중인 또 다른 거래소인 예측잇도 이 시기에 시장에 진입했습니다. 이 기간 동안 시장에 진입했습니다. 그러나 규제 문제로 인해 결국 대부분의 플랫폼은 문을 닫거나 상당한 수의 사용자를 잃었습니다. 2020년 대선을 앞두고 정치적 관심과 암호화폐 분야의 발전으로 인해 예측 시장이 주류로 떠오르면서 인기가 높아졌고, 2022년 칼시는 CFTC의 승인을 받은 최초의 소매 예측 시장 플랫폼이 되어 규제 측면에서 중요한 발걸음을 내디뎠습니다.

예측 시장은 현재 도박의 연장선인 소매용 '도박과 유사한' 상품으로 간주되는 경우가 많지만, 원래의 용도는 전혀 달랐습니다. 하지만 원래의 의도는 전혀 달랐습니다. 21세기 초, 많은 기업이 예측 마켓을 사용하여 내부 이정표를 예측했습니다. Google은 "전 세계의 정보를 통합하여 모든 사람이 정보에 액세스하고 혜택을 누릴 수 있도록 한다"는 사명을 달성하기 위해 Prophit이라는 내부 예측 마켓을 시작했습니다. 경영진은 관심 있는 목표와 주요 성과에 대한 시장을 만들어 팀에 전달한 다음, 직원들의 집단적 지혜가 수렴되는 과정을 지켜봅니다.

예를 들어 한 고위 관리자가 새로 출시되는 Gmail 제품에 대한 향후 컴퓨팅 수요를 예측해야 한다고 가정해 보겠습니다. "2분기 말까지 Gmail의 사용자 수는 몇 명일까요?"라는 간단한 질문을 할 수 있습니다. 그런 다음 엔지니어링 팀, 고객 성공 팀, 제품 관리자 및 결과에 대한 인사이트를 얻을 수 있는 모든 사람에게 이 질문을 보냅니다. 제품과 관련된 사람들은 점심시간이나 코드가 컴파일되기를 기다리는 동안 투표를 할 수 있습니다. 이러한 방식으로 경영진은 가장 잘 아는 사람들로부터 직접 데이터 소스를 수집하고 관료적인 채널에 가려져 있는 숨겨진 정보를 발견할 수 있습니다. 며칠 후 관리자는 누가 무엇에 왜 투표했는지 확인할 수 있었고, 회사의 전반적인 전망에 대한 예측을 정확하게 수치화할 수 있었습니다. Google 예측 마켓플레이스의 창립자인 보 카우길은 나중에 Google 인력의 10%(약 1,500명)가 마켓플레이스 투표에 참여했으며 이 결과가 '경영진이 이용할 수 있는 다른 예측보다 우수'했다고 설명했습니다. 경영진이 이용할 수 있는 다른 예측보다. 사실 구글의 원래 목표는 예측 마켓을 공개 제품으로 출시하는 것이었지만, 2008년 이후 금융 혁신에 대한 우려로 인해 그 비전은 보류되었습니다.

Google 내부 예측 시장의 시장 정확도(Dan Schwarz))

베팅

예측 시장은 기업 환경 외에도 여러 다른 분야에서 상당한 성공을 거두었습니다. 여러 분야에서도 상당한 성공을 거두었습니다. 특히 DARPA와 CIA는 미국의 정보 역량을 강화하기 위해 예측 시장을 활용하기로 결정했습니다. 운영자, 정책 전문가, 요원들은 전략적 정보를 준비하고 정량화하기 위해 내부 시장에서 미래 사건의 발생 가능성에 베팅을 합니다. 이 접근법은 의회가 "테러를 위한 도박장"이라는 이유로 이를 중단하기 전까지 높은 성공 가능성과 강력한 정보 수집 능력을 보여줬습니다.CIA 작전 책임자 푸옹 페이 예는 사후 보고서에서 의회의 결정이 "시기상조"였으며 "미국이 내부 시장을 갖는 것은 좋은 생각이 아니었다"고 강조했습니다. 푸옹 페이 예 CIA 작전 책임자는 사후 보고서에서 의회의 결정이 "시기상조"였으며 "예측 시장에 대한 증거가 우세하다는 것은 예측 시장이 탈중앙화된 정보의 신뢰할 수 있는 집합체라는 것을 시사한다"고 강조했습니다. 이후 예측 시장의 르네상스와 함께 여러 정부 기관이 싱크탱크 RAND와 협력하여 예측 시장을 내부적으로 활용하기 시작했습니다.

구글에서와 마찬가지로, CIA 내부의 시장은 일어날 일에 대해 베팅하는 사람들을 거래하는 독특한 능력으로 인해 가능성을 보였습니다. 정보를 집계할 수 있다는 점에서 잠재력을 보여주었습니다. 응답자가 한 번만 고정된 의견을 표명하는 여론조사와 달리 예측 시장은 새로 입수한 정보나 트레이더가 발견한 정보를 바탕으로 베이지안 방식으로 확률을 업데이트할 수 있습니다. 효율적 시장 가설을 지지하는 사람들은 시장에 더 많은 정보와 트레이더가 있을수록 결과가 실제 확률에 더 가까워진다고 주장합니다. Google과 CIA에서는 각 응답자가 고유한 정보 출처를 가지고 있으며, 이를 종합하면 실제 전문가들의 예측에 대한 더 깊은 통찰력을 얻을 수 있습니다. 군중의 지혜가 최고의 판단을 이끌어낸다는 격언이 있듯이 말입니다.

Google과 CIA의 성공과 이러한 시장의 이점을 강조한 수많은 학술 출판물 이후, 점점 더 많은 기업이 예측 시장에 대한 실험을 시작하고 있습니다. 예를 들어, Microsoft는 예측 시장을 사용하여 제품 개발 일정을 설정하는데, 엔지니어링 일정의 숨겨진 병목 현상을 찾아내는 데 "매우 정확하며 때로는 놀라울 정도로 정확하다"고 설명합니다. Ford는 예측 시장을 사용하여 주간 자동차 판매를 예측하고 있으며, 전문가 예측보다 훨씬 더 나은 "평균 제곱 오차 25% 감소"를 달성했습니다. Eli Lilly and Company는 예측 시장을 사용하여 신종 전염병을 예측하고 어떤 약이 FDA의 승인을 받을지 추적합니다. 전염병의 경우, 데이터에 따르면 이 시장은 "주 전체의 계절성 독감 활동을 2~4주 전에 정확하게 예측"할 수 있는 것으로 나타났습니다. 이 모든 사례에서 개선된 마켓플레이스의 혜택을 받은 경영진은 예측 마켓플레이스가 조직 전체의 수많은 구성원의 데이터를 신속하고 정확하며 저렴하게 통합할 수 있는 기능을 꼽았습니다.

Predictive Machines

이런 성공 이후, 2020년대 초에 이러한 예측 도구를 대중에게 제공하기 위해 폴리마켓과 칼시가 모두 설립되었습니다. 이벤트 파생상품의 일종인 실제 이벤트를 위한 새로운 유형의 금융상품인 이 시장은 지정학, 스포츠 경기 결과, 거시경제 지표 등 소매 트레이더와 관련된 주제에 대해 빠르게 주목을 받았습니다. 하지만 2024년 대통령 선거 전날이 되면서 본격적으로 영향력을 발휘하기 시작했습니다. 바이든의 갑작스러운 사퇴와 트럼프의 암살 시도 이후 뉴스 사이클이 급변하면서 투자자들은 정적이고 드물게 발표되는 여론조사를 통해 위안을 얻었습니다. 예측 시장은 선거의 향방에 대한 즉각적이고 확률적이며 대체로 정확한 시장 전망을 제공하는 자연스러운 통로였습니다. 신뢰할 수 있는 보고서 사이에 일주일 정도의 시차가 있는 여론조사와는 달리, 예측 시장은 온라인에 상시적으로 존재하기 때문에 누구나 최신 상황을 즉시 확인할 수 있습니다.

또한 연방 선거처럼 치열한 경쟁이 벌어지는 분야에서 여론조사는 편향에 취약하고 샘플링 오류에 취약한 것으로 밝혀졌습니다. 역사적으로 공화당 후보들은 응답자들이 거짓말을 하는 경우가 많기 때문에 여론조사 결과보다 실제 지지율이 더 높은 경향이 있었습니다. 반면에 트레이더들이 선거에 '실제 돈을 걸고' 베팅한다는 사실은 실제 가중치가 적용된 결과를 더 정확하게 예측하는 데 도움이 됩니다. 어느 후보에 대한 부정적인 동영상이 인기를 끌면 시장은 이를 즉시 반영할 수 있습니다.

마이크로소프트 리서치의 데이비드 로스차일드는 예측 시장과 여론조사를 명확히 구분하며 "나는 모든 면에서 예측 시장을 모방한 예측 시장을 만들 수 있다. 모든 면에서 예측 시장을 모방한 여론조사를 만들 수 있다"며 "하지만 예측 시장에는 새벽 2시에 다시 돌아와서 답변을 업데이트해야 하는 인센티브가 있다"고 말합니다. 사실상 금융에서 '알파'라고 불리는 정보 우위를 가진 트레이더는 최신 기대치를 반영하기 위해 자신의 거래를 조정할 수밖에 없고, 이는 시장의 정확하고 동적으로 업데이트되는 예측을 생성하는 능력을 향상시킵니다. 정확하고 동적으로 업데이트되는 예측을 생성하는 능력.

데이터에 따르면 선거 시장이 역할을 한 것으로 나타났습니다. 이코노미스트는 폴리마켓에 대해 "카말라 해리스가 경선에 뛰어들면서 촉발된 열광과 이로 인해 많은 스윙 스테이트에서 여론조사에서 앞서고 있음에도 불구하고 트럼프의 당선 가능성은 50%보다 크게 낮아진 적이 없다"고 썼습니다. 폴리마켓은 AP 통신이 개표 결과를 발표하기 몇 시간 전에 7개 경합주 모두에서 트럼프가 최종 승리할 확률이 95% 이상임을 보여주는 X-Dynamic을 발표했습니다. 선거 당일 밤 헤이우드 에스테이트에서 한 대통령 고문은 "대통령 자신까지 포함해 모든 사람이 폴리마켓을 이용해 선거를 판단했다"고 설명했습니다. 칼시의 설립자 타렉 만수르는 선거 당일 칼시의 순방문자 수가 5억 명에 달했다고 밝혔습니다. --이는 전 세계 인구의 7%에 해당하는 수치입니다. 예측 시장이 이번 선거에 영향을 미쳤다는 것은 의심할 여지가 없습니다.

출처. 이코노미스트. https://tinyurl.com/2xjnoubk

그렇다면 왜 이러한 시장이 작동할까요? Google, CIA 및 이러한 도구를 사용한 수많은 다른 기업들의 사례에서 알 수 있듯이, 예측 시장은 대량의 정보를 한데 모으고 그 정보를 동등한 방식으로 통합하는 데 탁월합니다. 분석가, 제품 디자이너, 경영진, 엔지니어의 아이디어가 모두 하나의 시장으로 직접 모이면 정확한 가중 평균이 이들을 통합합니다. 이는 다음 요점으로 이어집니다. 누군가가 다른 사람보다 더 강력한 정보원을 가지고 있을 때, 시장은 더 많은 베팅을 하도록 장려합니다. 여론 조사에서는 모든 투표와 의견에 동일한 가중치를 부여합니다. 그리고 예측 시장에서는 가중 베팅이 트레이더가 가진 정보 우위에 비례해 시장을 움직입니다. 따라서 시장은 고유한 정보를 가진 사람들에게 유리하게 기울어지게 됩니다. 또한 사회심리학자이자 예측 모델링 연구자인 러스 클레이는 금전적 인센티브가 정보 공유에 대한 강력한 보상이라고 설명합니다.

"전문가가 '가 경제, 정치 또는 달 유인 탐사에 대해 언급하는 것은 별개의 문제이지만, 평판에 미치는 영향을 제외하면 전문가가 예측을 잘못했을 때 일반적으로 큰 영향을 미치지 않으며, 예측이 실현되지 않은 이유에 대해 사후에 그럴듯한 설명을 할 수 있는 것이 보통입니다. 하지만 예측이 틀렸을 때 결과적으로 많은 사람이 손해를 볼 가능성이 있다면, 이는 모든 사람의 예측에서 편향성의 근원을 제거하는 데 도움이 되며, 이렇게 만들어진 많은 개별 예측을 평균화하면 실제로 꽤 유용한 예측 도구를 갖게 됩니다."라고 설명합니다.

이 경우에는 찰리 멍거의 명언을 인용하겠습니다. 결과를 보여드리겠습니다."

파리에 기반을 둔 트레이더 테오

선거 몇 주 전인 2024년 10월 말, 파리의 상인 테오라는 사람이 여론조사보다 예측 시장이 유리하다는 것을 증명해 보였습니다. 당시 모든 여론조사에서 카말라 해리스가 확실한 우위를 점하고 있었지만 테오는 폴리마켓에 3천만 달러를 걸고 트럼프를 지지했습니다. 그는 나중에 자신의 베팅을 "여론조사 데이터의 정확성에 대한 역 베팅"이라고 설명했습니다. 그는 기자에게 자신의 내기에서 이긴 이유를 설명하면서 다른 어떤 여론조사 기관도 예측 시장처럼 실시간으로 반응할 수 없으며, 여론조사 결과는 몇 주 간격으로 발표되는 경우가 많고 그 결과를 거래 알고리즘에 직접 입력할 수 없다고 지적했습니다. 반면 예측 시장은 모든 소문, 모든 데이터 발표, 모든 정보를 지속적으로 업데이트되는 가격으로 변환하여 정확한 정보를 반영하고 보상할 수 있습니다. 그렇기 때문에 테오는 충분히 자신 있게 베팅을 할 수 있었고, 테오의 경험과 결국 5천만 달러의 상금은 시장이 단순히 여론조사를 대체하는 것이 아니라 불확실성을 실행 가능한 정보로 전환해야 하는 모든 사람에게 근본적인 도구라는 것을 증명합니다. 시장은 불확실성을 실행 가능한 인텔리전스로 전환해야 하는 모든 사람에게 근본적으로 우수한 도구입니다. 불확실성을 지연된 스냅샷이 아닌 실시간 입력으로 정량화할 수 있는 이러한 능력은 시장을 정적인 여론조사 데이터보다 우월하게 만들며, 자연스럽게 우리가 왜 시장을 기본 예측 도구로 거의 생각하지 않는지 다시 생각하게 합니다.

폴리마켓 선거 광고. 출처: The Information.https://tinyurl.com/28t4b3h7

예측 시장의 역사를 되돌아보면 한 가지 주제가 관통하는데, 시장은 항상 정적인 설문조사보다 개인 정보와 실시간 인센티브를 더 효과적으로 활용할 수 있었다는 점입니다. 교황 선거에 대한 추측으로 시작된 예측 시장은 분산된 인사이트를 취합하고 지속적으로 확률을 업데이트하며 각 예측을 실제 금전적 이익과 연결할 수 있는 예측 엔진으로 발전해 왔습니다. 예측 시장의 우수성은 전문가 모델, 기업 예측, 모든 주요 선거 여론조사를 능가하는 등 잘 입증되었지만, 여전히 전통적인 여론조사의 그늘에 가려져 있으며 도박에 대한 사람들의 오해로 인해 제한을 받고 있습니다. 불확실성 속에서 더 많은 정보를 바탕으로 판단하는 것이 우리의 목표라면, 4년마다 같은 여론조사 주기에 의존하고 사후에 그 실패에 대해 불평하는 것은 시장에 양보해야 합니다. 이제는 기본 옵션을 바꾸고 시장을 받아들여야 할 때입니다. 그렇게 함으로써 우리는 군중의 지혜라는 가장 명확한 미래 전망을 갖게 될 것입니다.