서둘러 선반에서 제거된 상사는 경멸합니다. Facebook은 왜 ChatGPT 전투를 피합니까?-일체 포함-php.cn

서둘러 선반에서 제거된 상사는 경멸합니다. Facebook은 왜 ChatGPT 전투를 피합니까?

王林

풀어 주다： 2023-04-11 17:55:03

앞으로

1318명이 탐색했습니다.

저자 | Xu Jiecheng

지난해 12월 ChatGPT가 출시된 이후 LLM(Large Language Model)과 챗봇에 대한 주제가 인터넷 전체를 거의 장악했습니다. 주요 기술 대기업들은 곧 이것이 가져올 수 있는 무한한 비즈니스 기회를 깨달았습니다.

Microsoft는 ChatGPT를 자체 검색 엔진 Bing에 통합하기 위해 100억 달러를 추가로 투자하는 조치를 가장 먼저 취했습니다. Google은 약간 더 조심스러운 시간을 보낸 후 자체 개발한 채팅 로봇 Bard를 출시했습니다. 국내 기술 대기업인 Baidu도 올해 3월에 자사의 챗봇 Wenxinyiyan을 통해 이러한 난투에 돌입할 것이라고 최근 발표했습니다.

그러나 과거에도 늘 공격적이었던 기술 대기업은 이번 'ChatGPT 전투'를 기꺼이 포기할 것 같습니다. 이 회사는 Zuckerberg가 이끄는 Meta입니다. 놀랍게도 Meta는 아직 챗봇의 대세에 뛰어들지 않은 유일한 거대 기술 기업일 수도 있습니다.

1. 높게 오픈하고 낮게 가고, 계속 잃습니다

메타의 비정상적인 성능 이유를 자세히 살펴보면 과거에 많은 시도가 실패했기 때문일 가능성이 높습니다. 2022년 6월과 같이 메타는 자체 개발한 대규모 언어 모델인 OPT-66B를 오픈소스로 공개했고, 같은 해 8월에는 ChatGPT보다 3개월 앞서 OPT-66B를 기반으로 한 채팅 로봇 블렌더봇3(BlenderBot3)을 출시했다고 할 수 있다. LLM 챗봇 회사에 참여한 첫 번째 그룹 중 하나입니다.

BlenderBot3는 당시 미국에서만 출시되었지만 오늘날 ChatGPT만큼 당시에는 큰 센세이션을 일으켰습니다. 출시된 지 불과 몇 시간 만에 Twitter와 Reddit에는 이미 BlenderBot3와 흥미로운 대화를 나누는 사람들의 스크린샷이 가득합니다.

그러나 곧 이 "성공적인" 챗봇은 재앙으로 변했습니다. 많은 사용자들은 BlenderBot3가 악의적인 발언과 허위 정보를 게시한다는 사실을 발견했으며 심지어 Zuckerberg의 사업 전략이 "비윤리적"이라며 의문을 제기하기도 했습니다. 이로 인해 많은 사용자가 BlenderBot3에 대한 신뢰를 점차 잃어갔습니다. 결국 Meta는 구축하는 데 많은 돈을 소비한 "큰 아기"가 점차 감소하는 것을 무기력하게 지켜보았습니다.

물론 한 번의 실패가 LLM에 대한 Meta의 열정을 식히지는 못했습니다. 재편성한 후 Meta는 2022년 11월 Papers with Code와 협력하여 대규모 언어 모델을 기반으로 하는 또 다른 로봇 Galactica를 출시했습니다. 이전에 실패한 BlenderBot3에 비해 Galactica는 대필 논문이라는 보다 구체적인 응용 분야를 가지고 있습니다.

공식 소개에 따르면 Galactica는 대필 논문 초록, 소개, 공식 또는 참고 문헌 등 4,800만 개의 논문, 교과서 및 기타 자료를 통해 교육을 받았습니다. 뿐만 아니라 Galactica는 텍스트 생성 외에도 화학식 및 단백질 서열과 관련된 다중 모드 작업도 수행할 수 있습니다.

하지만 이번에도 Meta는 LLM 생성 정확도 문제를 해결하지 못했습니다. Galactica의 책력은 매우 강한 것 같지만, 작성하는 논문에는 오류가 많고 심지어 위조된 내용도 있습니다. 충격이 더 퍼지는 것을 막기 위해 메타는 출시 3일 만에 갤럭티카를 서둘러 진열대에서 꺼내야 했다.

2. 조타수의 믿음이 흔들린다

연이은 실패로 인해 LLM에서 Turing Award 수상자이자 Meta의 수석 AI 과학자인 Meta AI 조타수 Yann LeCun의 믿음이 흔들리는 것 같습니다. ChatGPT 및 Google Bard 오류에 대한 최근 뉴스는 LeCun에게 어느 정도 지원을 제공한 것 같습니다.

자신의 체면을 보호하기 위한 것인지, 아니면 두 번의 실패로 인해 LLM 로봇의 치명적인 결점을 깨닫게 된 것인지, 오늘날 LeCun은 원래 LLM 옹호자에서 LLM 비평가로 변신했습니다.

관련 주제가 계속해서 인기를 끌면서 르쿤 역시 다양한 채널을 통해 대형 언어 모델과 채팅 로봇의 단점을 적극적으로 드러내기 시작했습니다. Collective Forecast가 주관한 최근 온라인 토론에서 LeCun은 대중의 눈에는 혁신적이지만 기본 기술 측면에서는 오늘날의 챗봇이 그다지 혁신적이지 않다고 말했습니다.

또한 LeCun은 Twitter에서 ChatGPT에 대해 여러 번 경멸을 표시했습니다. ChatGPT는 확장할 수 없으며 결코 강력한 인공 지능을 향한 올바른 길이 될 수 없습니다. 자동 회귀 LLM을 확장하면 챗봇을 인간 수준의 지능으로 끌어올릴 수 없습니다. 나는 ChatGPT가 문법 수정, 문장 완성, 기사 요약보다 더 옳은 일을 한다고 생각하지 않습니다.

LeCun은 OpenAI와 같은 소규모 회사는 잃을 것이 없으며 미성숙한 기술과 제품을 사용하여 스스로 과대광고를 만들 수 있다고 믿습니다. 그러나 대기업이 이 진흙탕 속으로 뛰어드는 것을 선택하는 것은 분명히 매우 현명하지 못한 일입니다. 특히 Google이 1000억 달러의 손실을 입힌 실패한 시도를 모두가 본 후에는 더욱 그렇습니다.

3. 메타의 레이아웃과 선택

사실 메타의 인공지능 분야 투자는 오랜 기간 동안 주요 기술 기업의 선두에 있었습니다. 광고사업에 진출한 이들은 지금까지도 자체 개발한 인공지능 모델과 알고리즘을 수익을 창출할 수 있는 제품으로 전환하기 위해 열심히 노력하고 있습니다.

르쿤은 메타가 블렌더봇(BlenderBot)과 갤럭티카(Galactica)의 실수로 허위 정보를 유포했다는 이유로 오랫동안 비난을 받아왔다고 지적했습니다. 오늘날 Meta는 맹목적으로 챗봇을 사용하여 현재의 "인공 지능 열풍"에 몰래 빠져 동일한 실수를 반복하는 대신 자신이 게시하는 도구와 콘텐츠를 보다 엄격하게 제어하기를 희망합니다.

이전의 실패로 인한 아픔 때문인지, 리더 개념의 변화 때문인지, 메타는 과연 전 세계가 지켜보는 이 전투를 피하고 있는 셈이다. 르쿤은 생성적 인공지능에 대한 인터뷰에서 “메타버스에 대한 주커버그의 장기적인 꿈은 아직 진행 중”이라며 “그도 생성적 인공지능이 메타버스 실현에서 최고가 될 수 있다는 점에 동의한다”고 말했다. 대규모 언어 모델과 챗봇의 경우 이제 그들은 산에 앉아 호랑이가 싸우는 것을 멀리서 지켜보고 Google, Microsoft 또는 OpenAI가 저지르는 실수를 적극적으로 찾아보고 충분한 경험을 배우는 것 같습니다. 그들을.