상상에 상상을 더해

앨런머스크는 여러모로 논란의 중심에 있는 사람이지만

 

가끔 팟 케스트에 나와서 하는 말들을 들어보면

그 사고의 차원이 정말 남다르다. 그래서 꼭 찾아듣게 된다.

 

최근, 뉴럴링크 디바이스를 실제 사람에게 이식하는등 여러가지 성과들이 있어서

축하할 겸 나온 자리에서 사람간의 통신에 대해서 하는 얘기를 들어봐라 (아래).

 

사람의 커뮤니케이션 속도는 1bps도 안되는 수준인데 (이건 좀 동의를 못하겠지만 차치하고)

그 와중에서도 언어로 하는 대화를 파헤쳐 보면 말을 전달하기 위해서 마음의 상태를 모델링 해서

듣는 사람이 알아들을만한 단어와 표현으로 나름대로는 최대한으로 모든 의미를 담아서 얘기를 하지만

듣는 사람이 그 화자의 의도를 또 자기 나름대로 최선의 방법으로 해석해서 받아들이려고 노력한다 해도

완전히 화자의 의도를 그대로 알아차리는 건 쉽지 않은 일이라는 거다.

사람간 통신은 굉장히 비효율적인 lossy compression이라는 거다.

(생각해봐라. 그간 겪었던 의도치 않은 오해와 반목들을)

 

이게 AI와 사람간의 통신으로 나아가면 AI는 앞으로 수천 수만 bps로 통신하고 프로세싱할 수 있을텐데

사람은 1 bps수준이라면 뭔가 다른 방식으로 communication bandwidth를 늘려야 할거라는 거다.

그게 뉴럴링크의 비전이란다.

 

실현가능성에 대해서는 많은 얘기가 있지만 어쨌든 이런 상상력. 너무 좋다.

이런 상상력과 큰 스케일을 가진 사람들이 당장의 물질적인 이익이 되는 것이 아닌

이런 될지 안 될지 아무도 알수 없는 미래에 베팅을, 그것도 구체적인

trial & error를 대신 겪어주고 있는건 땡큐아니냐.

 

Elon Musk : If you think what is the average bits per second of a human, it is less than one bit per second over the course of a day. Because there are 86,400 seconds in a day, and you don’t communicate 86,400 tokens in a day. Therefore, your bits per second is less than one, averaged over 24 hours. It’s quite slow.

And now, even if you’re communicating very quickly, and you’re talking to somebody who understands what you’re saying, because in order to communicate, you have to at least to some degree, model the mind state of the person to whom you’re speaking. Then take the concept you’re trying to convey, compress that into a small number of syllables, speak them, and hope that the other person decompresses them into a conceptual structure that is as close to what you have in your mind as possible.

Lex Fridman :  Yeah. There’s a lot of signal loss there in that process.

Elon Musk : Yeah. Very lossy, compression, and decompression. And a lot of what your neurons are doing is distilling the concepts down to a small number of symbols, or say syllables that I’m speaking, or keystrokes, whatever the case may be. So, that’s a lot of what your brain computation is doing. Now, there is an argument that that’s actually a healthy thing to do, or a helpful thing to do because as you try to compress complex concepts, you’re perhaps forced to distill what is most essential in those concepts, as opposed to just all the fluff. So, in the process of compression, you distill things down to what matters the most, because you can only say a few things.