아래의 어제 글에 이어서.

https://gall.dcinside.com/board/view/?id=baduk&no=973940

<알파고 2국> 분석을 통해 알파고 레벨 추정하기 - 바둑 갤러리

아래 표를 산출하는 분석 코드는 내 예전 글 참고.위의 분석으로 드러난 알파고 뉴럴넷이 그닥인 증거.1. 카타고는 덤 7.5 때 흑 승률 37%로 시작하는데, 알파고가 공개한 그래프는 48% 내외에서 시작함.덤 7.5

gall.dcinside.com

알파고 레벨 추정을 할 수 있게 해준 몇 가지 단서 중의 하나가 알파고 5국이야.

알파고 5국 때, 엄청난 수 읽기 문제가 발생했었거든.

우측에 적혀있는 딥마인드 공식 해설 텍스트에 따르면, 이 당시에

1. 생중계하던 (나중에 찾은 게 아니라 생중계 당시에 찾았다는 말)

2. 프로 기사들이 (1명만 찾은 건 아닐 거라는 말)

3. 이미 해당 수읽기를 끝내서 흑의 재앙을 예견했음 (수읽기를 완벽히 끝냈다는 말)

근데, 알파고는 딴 곳을 뒀고, 하사비스가 그 시점에 대한 내용을 SNS에 올렸었지.

그 상황을 18b으로 분석해보면,

18b 3.3K 때, 아직 못 찾았음.

찾으면 집 차이가 확 늘어남.

현재 +5.9 밖에 안 되므로 아직 못 찾은 것.

18b 4.3K 때, 찾아내기 시작했음.

집 차이가 +11로 확 늘어났음.

18b 6.4K 때, 중요 수순을 거의 찾아냈음.

집 차이가 이전보다 더 늘어나서 +16임.

ㅈㄴ 쉽게 찾잖아?

그럼 이걸 15b로 돌려보면, 15b도 잘 찾을 것 같지?

15b = kata1-b15c192-s1672170752-d466197061.txt.gz

18b는 6.4K 만에 이 지점에서 거의 절대 수순을 다 찾았는데,

15b는 528K 돌려도 못 발견.

1수 알려줌 + 305K = 못 찾음

2수 알려줌 + 235K = 못 찾음

3수 알려줌 + 108K = 못 찾음

4수 알려줌 + 105K = 못 찾음

5수 알려줌 + 143K = 못 찾음

6수 알려줌 + 200K = 못 찾음

이 빡통 새끼 7수 알려주니까 11K 만에 찾음.

7수 알려줘서 찾으니까 1수~7수까지 대강 200K씩 더해서 1400K 돌리면 찾을 것 같지?

subtree를 포함하는 tree 구조라서 필요한 검색량은 기하급수적으로 늘어난다.

그럼 15b이 ㅈㄴ 빡통 레벨이라서 그럴 것 같지?

내가 카타고 뉴럴넷 정보 엑셀로 가져가서 그래프 그려보니까

저 위치야. 그렇게 빡통 레벨이 아니라는 거야.

그러면 이 시점에서 이런 추론을 해볼 수 있어.

사실1 : 카타고 18b는 5국 사활을 ㅈㄴ 쉽게 찾아냈다.

사실2 : 카타고 15b는 18b에 비해 elo 그래프로 보니까 그렇게 쳐질 것 같지 않은데도 5국 사활을 끔찍하게 못 찾는다.

사실3 : 알파고는 엄청난 수준의 슈퍼컴을 쓰고도 5국 사활을 못 찾았다.

추론1 : 그렇다면, (슈퍼컴을 쓰고도 못 찾았으므로) 알파고 수준은 카타고 15b보다 낮을 가능성이 있다.

추론2 : 그래서(15b보다 낮아서) 알파고 4국 78수 시점에 빡통 됐을 거다.

추론3 : 그렇다면, 알파고 4국 78수도 18b는 쉽게 찾지만 15b는 못 찾을 가능성 높다.

그래서 4국 78수 시점 테스트.

18b은 약간 경합하다가 2.6K만에 찾음.

15b는 228K 때까지 못 찾음.

15b는 79수 80수 까지 둬주니까 5.8K만에 찾아냄.

10b는 79수 둬주고 635K 돌려도 못 찾음.

10b는 79수 80수 둬주고 423K 돌려도 못 찾음.

5국 수 읽기 , 4국 수 읽기 테스트를 통해서 어떤 추론을 할 수 있냐면,

"엄청난 슈퍼컴으로 돌린 알파고라도 카타고 15b 레벨에서 크게 멀지 않을 것이다."

이 추론이 맞을 수 있다고 알려주는 또 다른 강력한 방법이 바로

<뉴럴넷별 승률 그래프를 알파고 승률 그래프와 비교하는 방법>.

알파고 2국을 여러 뉴럴넷으로 돌린 흑 승률 그래프야.

18b 승률 그래프는 지난 글에서 알려줬고.

18b_13614에서 _ 뒤의 숫자 13614는 카타고에서 밝힌 자체 elo야.

위의 승률 그래프를 알파고 2국 승률 그래프와 겹쳐보는 거야.

ㅋㅋㅋㅋㅋㅋㅋㅋㅋ

10b 11515elo만 되도 알파고 2국 그래프에서 좀 벗어나고,

더 낮은 수준의 뉴럴넷에서 더 비슷해.

저 중에서 가장 닮은 걸 찾아보니까

10b 10747elo 10K visits.

그런데, 50수 즈음에 알파고 실수가 발견되지 않아서 이걸로 20K로 돌려봄.

10b 10747elo 20K visits.

즉, 알파고는 카타고 15b도 아니고, 10b 중에서도 중위 버전 수준일 가능성이 높다는 말.

0. 알파고가 10b 수준이었기 때문에

1. 그래서 그 직전 알파고 버전이 판후이에게도 속기에서 2패를 했을 것.

2. 그래서 엄청난 슈퍼컴을 가동해야 했을 것.

3. 그래서 커제(3690)가 아닌 100점 차이 나는 이세돌(3589)을 선택했을 것.

4. 그래서 9개월~14개월이 흐른 후에야 (슈퍼컴을 안 돌려도 되는) TPU 4개 수준에서 돌려도 되는 레벨에 이르게 됐을 것.

그럼에도 불구하고 인공을 이기는 게 어려운 건 사실일 테지만,

"근거는 조또 읍이 니미조까튼 돌파고 무적론을 우기는 뇌갈빡들은 타도하자!"

라는 거야.