심슨

2 Contents

[강연] 디지털인문학과 데이터과학 (3) _ by장원철 | 2018 봄 카오스 강연 '모든 것의 수數다' 4강 | 4강 ③

통계학은 단순히 숫자를 나열하는 학문이 아니라, 보이지 않는 존재를 예측하는 강력한 도구입니다. 영국의 곤충학자 알렉산더 코벳은 말레이시아에서 나비를 수집하며 아직 발견되지 않은 종의 수를 궁금해했습니다. 이를 해결하기 위해 통계학자 R.A. 피셔는 '미발견 종 문제' 모델을 고안했습니다. 흥미롭게도 이 모델은 문학 연구에도 적용됩니다. 1985년 발견된 시가 셰익스피어의 작품인지 판별할 때, 통계학은 작가가 평소 쓰지 않았던 새로운 단어가 얼마나 등장할지 예측함으로써 진위 여부를 판단하는 보완적 근거를 제시했습니다. 데이터를 해석할 때 전체 합계만 보는 것은 위험할 수 있는데, 이를 '심슨의 역설'이라고 부릅니다. 예를 들어 두 농구 선수의 2점슛과 3점슛 성공률을 각각 비교했을 때는 한 선수가 앞서더라도, 이를 합치면 결과가 뒤바뀌는 현상이 발생합니다. 이는 각 항목의 시도 횟수라는 가중치가 다르기 때문입니다. 과거 버클리 대학교의 입학 허가율을 두고 벌어진 성차별 논란도 이와 유사했습니다. 전공별로는 여학생의 합격률이 높았음에도, 전체 합계에서는 낮게 나타난 이유는 여학생들이 경쟁률이 훨씬 높은 학과에 주로 지원했기 때문이었습니다. 심슨의 역설은 일상적인 건강 데이터 분석에서도 중요한 시사점을 줍니다. 미세먼지 농도와 사망률의 관계를 단순 비교하면 농도가 높을 때 오히려 사망률이 낮아지는 기현상이 관찰되기도 합니다. 하지만 여기에 '계절'이라는 제3의 요인을 추가하여 분석하면 결론은 완전히 달라집니다. 봄이나 겨울처럼 미세먼지가 심한 계절 내에서는 농도가 높을수록 사망률이 명확하게 증가하는 경향을 보입니다. 이처럼 데이터 뒤에 숨겨진 변수를 고려하지 않으면, 미세먼지가 건강에 이롭다는 식의 잘못된 결론에 도달할 수 있으므로 주의가 필요합니다. 성적이 갑자기 오르거나 떨어지는 현상은 '평균으로의 회귀'라는 개념으로 설명할 수 있습니다. 키가 매우 큰 부모의 자녀가 부모보다는 조금 작고, 반대로 작은 부모의 자녀는 부모보다 조금 더 큰 경향이 있는 것과 같은 원리입니다. 이는 시험 성적에서도 나타나는데, 실력 이상의 운이 작용해 중간고사를 아주 잘 본 학생은 기말고사에서 자신의 원래 실력인 평균치로 돌아올 가능성이 큽니다. 반대로 운이 없어 성적이 낮았던 학생은 다음 시험에서 성적이 오를 확률이 높습니다. 이는 실력이 변한 것이 아니라 통계적인 확률 분포에 따른 자연스러운 현상입니다. 현대 통계학은 시공간 데이터 분석을 통해 더욱 정밀해지고 있습니다. 특정 위치와 시간에서 관측된 데이터를 바탕으로, 관측 장비가 없는 지역의 미세먼지 농도를 예측하는 '크리깅' 기법이 대표적입니다. 또한 통계학은 천문학에서 우주의 지도를 그리거나 인문학에서 텍스트를 분석하는 등 거의 모든 학문 분야의 '앞마당'에서 활약하고 있습니다. 데이터 과학은 통계학, 컴퓨터 과학, 그리고 해당 분야의 전문 지식이 만나는 접점에서 탄생합니다. 복잡한 현대 사회에서 데이터를 올바르게 읽어내는 능력은 세상을 이해하는 필수적인 열쇠가 되었습니다.

[강연] 디지털인문학과 데이터과학 (3) _ by장원철 | 2018 봄 카오스 강연 '모든 것의 수數다' 4강

장원철

카오스재단카오스강연
  • 수학

[강연] 지니에게 물어봐 _장원철 교수| 2016 서울대 자연과학대학 공개강연 '무질서에서 질서로' (5) | 3강

우주는 끊임없이 무질서한 상태로 나아가려는 본질적인 경향을 가지고 있습니다. 이를 과학적으로는 열역학 제2법칙, 즉 엔트로피 증가의 법칙이라고 정의합니다. 뜨거운 커피가 식어 주변 온도와 같아지거나, 물속에 떨어진 잉크가 고르게 퍼져나가는 현상은 우리 주변에서 흔히 볼 수 있는 자연스러운 변화의 과정입니다. 이러한 변화는 결코 스스로 되돌아가지 않는 비가역적인 특성을 지닙니다. 한 번 흩어진 에너지는 외부의 개입 없이는 다시 모이지 않으며, 엔트로피는 단순한 혼란의 정도를 넘어 우주의 시간적 방향성을 결정짓는 중요한 척도가 됩니다. 루트비히 볼츠만은 눈에 보이지 않는 미시적 입자들의 배열 상태를 통해 엔트로피를 통계적으로 새롭게 정의했습니다. 그는 거시적인 상태가 가질 수 있는 미시적 상태의 가짓수가 많을수록 엔트로피가 높다는 사실을 수학적인 공식으로 증명해 냈습니다. 이는 무질서함이 단순히 인간의 주관적인 느낌이 아니라, 확률적으로 가장 일어날 법한 상태임을 과학적으로 입증한 것입니다. 볼츠만의 통계역학은 고전 물리학의 한계를 뛰어넘어 현대 물리학이 물질의 근본 원리를 이해하는 데 결정적인 토대를 마련해 주었으며, 원자의 존재를 확신하게 만든 계기가 되었습니다. 제임스 클러크 맥스웰은 엔트로피 법칙의 절대성에 도전하는 흥미로운 사고실험을 제안했습니다. 아주 작은 존재인 '맥스웰의 도깨비'가 기체 분자들의 속도를 하나하나 관찰하여 빠른 것과 느린 것을 분리할 수 있다면, 외부에서 에너지를 가하지 않고도 계의 엔트로피를 낮출 수 있다는 가설이었습니다. 이 도깨비의 존재는 오랫동안 물리학자들에게 거대한 지적 숙제를 안겨주었습니다. 만약 이 가설이 현실에서 가능하다면 열역학 제2법칙은 우주의 절대적인 진리가 아닌, 단지 확률적인 현상에 불과하게 되어 물리학의 근간이 흔들릴 수 있기 때문입니다. 맥스웰의 도깨비가 가진 모순은 20세기에 들어서 정보 이론과 열역학의 결합을 통해 명쾌하게 해결되었습니다. 도깨비가 분자를 선별하기 위해서는 반드시 정보를 수집하고 기억해야 하며, 이 정보를 지우는 과정에서 필연적으로 열이 발생한다는 사실이 밝혀진 것입니다. 즉, 정보를 처리하고 저장하는 과정 자체가 물리적인 비용을 수반하며, 전체 시스템의 엔트로피는 결과적으로 증가하게 됩니다. 이는 정보가 단순한 추상적 개념이 아니라 물리적인 실체와 긴밀하게 연결되어 있음을 시사하는 놀라운 발견이었으며, 현대 컴퓨터 공학의 기초 원리와도 맞닿아 있습니다. 생명체는 무질서로 향하는 우주의 거대한 흐름 속에서도 고도의 질서를 유지하고 만들어내는 경이로운 존재입니다. 우리는 외부로부터 끊임없이 에너지를 섭취하고 정교한 대사 과정을 거치며 스스로의 구조를 유지하고 복제합니다. 물리학자 슈뢰딩거는 생명이 '음의 엔트로피'를 섭취함으로써 생존한다고 표현하기도 했습니다. 비록 생명체 내부에서는 질서가 유지되는 것처럼 보이지만, 그 대가로 주변 환경의 엔트로피를 훨씬 더 크게 증가시킵니다. 결국 생명은 우주의 법칙을 거스르는 예외가 아니라, 그 법칙 안에서 에너지를 효율적으로 사용하여 꽃피운 정교한 결과물입니다. 엔트로피의 지속적인 증가는 왜 우리가 과거로 돌아갈 수 없는지, 즉 시간의 비가역성을 설명해 주는 유일한 물리적 근거가 됩니다. 우주의 초기 상태는 매우 낮은 엔트로피를 가지고 있었으며, 시간이 흐름에 따라 점차 높은 엔트로피 상태로 진화해 왔습니다. 이러한 변화의 흐름은 '시간의 화살'을 만들어내며, 우리가 과거와 미래를 명확히 구분 짓는 기준이 됩니다. 만약 엔트로피가 증가하지 않고 평형 상태에 머물러 있다면 세상은 어떠한 변화도 일어나지 않는 정적인 상태에 갇혔을 것입니다. 우리가 경험하는 모든 변화와 흐름은 무질서로 향하는 여정 그 자체입니다. 무질서 속에서 질서가 형성되는 원리를 이해하려는 노력은 현대 과학의 가장 본질적인 도전 중 하나입니다. 겉보기에 혼돈스러워 보이는 자연 현상 이면에는 정교한 물리 법칙이 숨어 있으며, 과학자들은 이를 통해 우주의 기원과 생명의 신비를 탐구해 왔습니다. 엔트로피 법칙은 우주의 종말을 예견하는 차가운 법칙처럼 느껴질 수 있지만, 동시에 복잡한 생명과 찬란한 문명이 탄생할 수 있었던 역동적인 배경이기도 합니다. 질서와 무질서가 끊임없이 상호작용하며 균형을 찾아가는 과정은 우주를 더욱 풍요롭고 아름답게 만드는 근원적인 원동력이라 할 수 있습니다.

[강연] 지니에게 물어봐 _장원철 교수| 2016 서울대 자연과학대학 공개강연 '무질서에서 질서로' (5)

장원철

카오스재단서울대자연과학공개강연
  • 수학