The missing half of AI futurism debates
Quick Summary
인공지능 미래론은 능력 폭발의 가능성뿐 아니라 특정 첨단기술을 실제로 개발하는 데 필요한 시간·자원·물리적 병목까지 구체적으로 분석해야 한다.
🖼️ 인포그래픽
🖼️ 4컷 인포그래픽
💡 한 줄 요약
인공지능 미래론은 능력 폭발의 가능성뿐 아니라 특정 첨단기술을 실제로 개발하는 데 필요한 시간·자원·물리적 병목까지 구체적으로 분석해야 한다.
📌 핵심 요약
- 인공지능 연구가 자동화되면 인공지능의 능력이 빠르게 향상될 수 있다는 주장과, 그 능력이 수년 안에 나노기술·다이슨 군집·준광속 우주선으로 이어진다는 주장은 서로 구분해 검토해야 한다.
- 저자들은 지금까지의 논의가 미래 인공지능의 능력에는 집중했지만, 개별 기술의 개발 난도와 필요한 자원에는 충분한 관심을 기울이지 않았다고 지적한다.
- 제안된 연구 절차는 목표 기술을 구체적으로 정의하고, 인공지능 노동자의 능력·수·작동 속도·계산 자원·물리적 수단을 명시한 뒤, 개발 기간과 자원 요구량을 추정하는 것이다.
- 국내총생산 성장률이나 생물 개체군의 증식 속도는 특정 고위험 기술의 등장 시점을 직접 알려주기 어려우며, 명시적인 인공지능 가정을 결합한 탐색적 공학이 더 적합한 접근으로 제시된다.
- 미래와 초지능을 정확히 예측할 수 없더라도 인간 최고 전문가 수준의 인공지능 집단 같은 단순한 기준선을 분석하면 가능한 결과의 범위와 논쟁의 핵심 조건을 구체화할 수 있다.
🧩 주요 포인트
- 인공지능 연구 자동화의 개연성과 개별 첨단기술의 실현 속도는 별개의 문제다 → 기술별 개발 난도와 현실 세계의 병목을 독립적으로 분석해야 한다.
- 거시적 성장률은 우주 진출·뇌 업로드·생물무기·분자 나노기술의 실현 여부를 직접 설명하지 못한다 → 구체적인 공학 경로와 자원 요구량 중심의 평가가 필요하다.
- 초지능의 정확한 모습을 예측하기 어렵더라도 제한된 능력의 인공지능 집단을 기준선으로 삼을 수 있다 → 성공 가능성과 실패 조건을 나누어 논쟁의 핵심 쟁점을 식별할 수 있다.
🧠 상세 정리
1. 두 단계로 이루어진 급진적 미래 전망
글은 인공지능 연구가 자동화된 뒤 불과 몇 년 만에 나노기술, 다이슨 군집, 준광속 우주선 같은 공상과학적 기술이 등장할 수 있다는 전망에서 출발한다. 이 전망의 첫 번째 단계는 인공지능이 인공지능 연구를 수행하면서 매우 빠르게 개선되어 오늘날의 인간 전문가를 크게 능가한다는 주장이다. 저자들은 자신들이 수행하거나 검토한 경험적 연구에 비추어 볼 때 이러한 급속한 향상이 상당히 가능하며, 현재 알려진 병목만으로 이를 명백히 부정하기는 어렵다고 본다. 그러나 뛰어난 인공지능이 대량으로 존재한다는 사실만으로 복잡한 물리 기술이 수년 안에 완성된다고 결론 내리는 두 번째 단계에는 별도의 근거가 필요하다고 강조한다.
2. 논쟁에서 빠진 기술 개발 난도
두 번째 단계는 극도로 유능한 인공지능 노동자가 충분히 많다면 첨단기술 개발의 주된 제약이 사라진다는 전제를 담고 있다. 저자들은 인공지능이 사실상 모든 일을 제한 없이 수행할 수 있는 존재가 아니라면, 미래 기술의 등장 시점은 해당 기술 자체의 개발 난도에 크게 좌우된다고 지적한다. 같은 지능과 노동력이 주어져도 도끼보다 핵무기를 개발하는 일이 훨씬 어렵듯이, 다이슨 구체·분자 나노기술·초강력 생물무기의 실현에도 서로 다른 공학적 장벽과 자원이 필요하다. 지금까지는 미래 인공지능이 얼마나 유능해질지를 세밀하게 논의한 데 비해, 특정 기술이 실제로 얼마나 어려운지를 체계적으로 계산하는 작업은 드물었다는 것이 글이 말하는 ‘빠진 절반’이다.
3. 구체적 기술과 인공지능 가정을 결합하는 절차
저자들이 제안하는 연구는 먼저 분석할 기술을 모호한 이름이 아니라 검증 가능한 기능으로 구체화하는 데서 시작한다. 예를 들어 자기복제 성간 탐사선은 새로운 항성계에 착륙하고, 현지 물질로 자신의 복제본을 만든 뒤, 그 복제본을 광속의 상당한 비율로 다시 발사할 수 있는 기계로 정의된다. 다음으로 원격 노동자를 즉시 대체할 수 있는 수준인지, 실행에 에이치100 그래픽처리장치가 필요한지, 인공지능 노동자의 수와 작동 속도는 얼마인지, 어떤 물리적 장치에 접근할 수 있는지 등을 명시해야 한다. 마지막으로 그 조건에서 기술 개발에 걸리는 기간과 필요한 계산·에너지·물질·설비 등의 자원을 추정하고, 가정을 바꿀 때 결과가 어떻게 달라지는지 비교한다. 저자들은 모든 연구자가 이 문제에 매달려야 한다고 주장하는 것이 아니라, 지능 폭발이 가까운 미래에 일어날 가능성이 논의되는 상황에 비해 현재 이를 연구하는 사람이 지나치게 적다고 말한다.
4. 거시경제 지표와 생물학적 비유의 한계
기존 연구 중 하나는 범용 인공지능이 국내총생산 성장률을 얼마나 높일지를 계산하여 기술 발전의 속도를 간접적으로 추론하는 방식이다. 예컨대 성장 속도가 열 배 빨라진다면 한 세기의 기술 진보가 한 दशक으로 압축되는 것처럼 해석할 수 있지만, 이런 거시 지표는 특정 기술의 등장 시점을 알려주는 데 부적합할 수 있다. 세계 국내총생산이 백 배 증가하더라도 인류가 항성계로 진출했는지, 뇌 업로드가 가능한지, 인공지능이 생물무기나 분자 나노기술을 확보했는지는 그 수치만으로 판단하기 어렵다. 초파리 개체군처럼 물리적 대상도 며칠 만에 두 배로 늘어날 수 있다는 생물학적 사례는 빠른 증식의 가능성을 보여주지만, 그것이 인공지능 기반 산업과 동일하게 적용된다는 근거는 약하다. 저자들은 이처럼 넓은 지표와 유추에 머물기보다 인간 복지와 위험에 직접 영향을 주는 기술별 경로를 따로 분석해야 한다고 본다.
5. 탐색적 공학에 인공지능 조건을 추가하기
저자들의 제안과 가장 가까운 기존 분야는 미래 기술에 도달할 수 있는 상세하고 현실적인 공학 경로를 구성하는 탐색적 공학 또는 과학적 로드매핑이다. 이 접근은 나노기술, 신경 기록, 위치 선택적 화학, 뇌 모사 같은 기술을 대상으로 가능한 설계와 물리적 제약을 단계별로 검토해 왔다. 암스트롱과 샌드버그는 1980년대의 자기복제 탐사선 설계와 행성 해체 절차를 활용해, 수십 년 안에 인류가 도달 가능한 우주 전체를 식민화하는 사업을 시작할 수 있다는 물리적 경로를 분석했다. 저자들의 차별점은 이런 공학 분석에 인공지능의 능력·수·속도·로봇 노동 조건을 명시적으로 결합하고, 조건 변화에 따른 결과의 민감도를 살피자는 데 있다. 공개된 유사 사례로는 데이먼 바인더가 풍부한 로봇 노동력을 가진 경제를 가정해 최소형 태양광 발전 체계를 설계하고, 그 생산 규모가 수주 단위로 두 배가 될 수 있다고 분석한 연구가 제시된다.
6. 불확실성 속에서도 가능했던 선행 공학 예측
미래가 지나치게 불확실해 탐색적 공학이 유용한 결론을 내릴 수 없다는 반론에 대해, 저자들은 실제 기술보다 앞서 실현 가능성을 보여준 역사적 사례를 제시한다. 콘스탄틴 치올콥스키는 최초의 로켓이 우주에 도달하기 41년 전인 1903년에 로켓 운동 방정식을 도출하고, 액체 수소와 산소 같은 액체 연료가 지구 중력을 벗어나는 데 적합한 반면 화약 같은 고체 연료는 부족하다고 계산했다. 아서 C. 클라크도 적도 상공의 고정된 위치에 세 개의 위성을 배치해 라디오·텔레비전·전화 신호를 거의 전 세계에 전달하는 구상을 실제 활용보다 약 19년 앞서 제안했다. 저자들은 이 사례들이 성공한 예측만 골라 제시된 것이며, 실패한 미래 예측 전체를 고려하면 성과가 덜 인상적으로 보일 수 있다는 점을 인정한다. 다만 제안된 연구의 목적은 기술이 등장할 정확한 연도를 맞히는 것이 아니라, 충분한 자원이 있을 때 성립 가능한 공학 경로가 존재하는지를 밝히는 것이므로 정밀한 시점 예측보다 수행하기 쉬운 과제라고 설명한다.
7. 초지능을 직접 모델링하지 않는 기준선 분석
초지능의 능력이 분야별로 불균일하거나 인간이 이해할 수 없는 전략을 사용할 수 있기 때문에 그 영향을 모델링하기 어렵다는 반론에도 저자들은 일부 타당성이 있다고 인정한다. 그러나 초지능의 정확한 모습을 알 수 없다는 사실이 모든 정량적 분석을 불가능하게 만드는 것은 아니며, 더 제한적이고 명확한 능력 수준을 기준선으로 설정할 수 있다고 주장한다. 예를 들어 거의 모든 인지 과제에서 인간 최고 전문가 이상인 인공지능이 10억 개 존재한다고 가정한 뒤, 이 집단이 수년 안에 분자 나노기술을 구축할 수 있는지를 분석할 수 있다. 이 집단이 가능하다는 결과가 나오면 그보다 훨씬 지능적인 집단도 가능하다는 하한선이 되고, 가능하지 않다는 결과가 나오면 어떤 추가 능력이나 자원이 결론을 바꾸는 핵심 조건인지 드러난다. 이는 초지능의 모든 행동을 예측하려는 시도가 아니라, 명시적인 가정 아래 가능한 결과의 범위와 논쟁의 분기점을 찾는 접근이다.
8. 고위험 기술별 분석을 위한 연구 의제
저자들은 인간 수준의 능력을 가진 인공지능만 가정해도 세계 국내총생산이 연간 30퍼센트 넘게 성장할 수 있다는 기존 분석이 폭발적 경제 성장 논의에 이미 유용하게 쓰였다고 지적한다. 이런 영향력 있는 연구가 소수의 연구자에 의해 수행되었다는 사실은, 범용 인공지능 이후의 구체적인 고위험 기술에도 같은 방식의 분석을 확대할 여지가 있음을 보여준다. 핵심은 막연한 초지능이나 공상과학적 결과를 한꺼번에 논하는 대신, 목표 기술을 명확히 정의하고 인공지능 노동자의 능력·수·속도와 물리적 접근 수단을 바꾸어 가며 개발 기간과 자원 요구량을 비교하는 것이다. 이러한 분석은 다이슨 구체나 분자 나노기술의 실현 시점을 단정하려는 작업이 아니라, 어떤 병목이 실제로 중요하며 어떤 인공지능 능력이 결론을 바꾸는지를 구체적으로 드러내는 작업이다. 글의 최종 제안은 범용 인공지능 이후 인간 복지와 세계적 위험에 큰 영향을 줄 기술을 대상으로 이런 탐색적 공학 연구에 더 많은 사람이 참여해야 한다는 것이다.
🧾 핵심 주장 / 시사점
- 인공지능 능력의 향상 속도와 물리 기술의 개발 속도를 분리하면, 지능이 아니라 실험·제조·에너지·물질·설비가 결정적 병목인지 구체적으로 검토할 수 있다.
- 하나의 미래상을 단정하기보다 인공지능의 수·속도·능력·물리적 접근성을 달리한 시나리오를 비교하는 것이 결론을 좌우하는 핵심 가정을 드러낸다.
- 기술별 탐색적 공학은 정확한 미래 예측보다 가능한 경로와 불가능 조건을 밝히는 데 초점을 두므로, 추상적인 초지능 논쟁을 검토 가능한 공학 문제로 전환한다.
✅ 액션 아이템
- 인공지능 연구 자동화로 인한 능력 향상 가능성과 나노기술·다이슨 군집·준광속 우주선 실현 주장을 분리해 각각 점검한다.
- 목표 기술을 구체화한 뒤 인공지능 노동자 능력·수·속도·계산 자원·물리적 수단을 명시하고 개발 기간과 자원 요구량을 추정한다.
- GDP 성장률이나 생물 증식 속도 대신 인간 최고 전문가 수준 인공지능 집단 기준선으로 공학 경로와 병목을 비교 분석한다.
❓ 열린 질문
- 기술별로 독립 분석해야 할 핵심 개발 난도와 물리적 병목은 무엇인가?
- 제한된 능력의 인공지능 집단 기준선에서 성공 가능성과 실패 조건을 가르는 기준은 무엇인가?
- 고위험 기술의 등장 시점을 추정할 때 어떤 명시적 인공지능 가정이 가장 적합한가?