Leaving Meta and PyTorch
[GOOGLE 번역]
Meta와 PyTorch를 떠나며
PyTorch에서 물러나고 11월 17일에 Meta를 떠납니다.
요약: PyTorch를 영원히 하고 싶지는 않았습니다. 오랜 휴가를 마치고 돌아온 직후, 프로젝트가 저를 중심으로 자연스럽게 자리 잡으면서 전환하기에 완벽한 시기라고 생각했습니다.
Meta에서 11년을 보냈습니다. 거의 제 전문 분야 생활의 전부였습니다. 평생 많은 친구를 사귀었습니다. PyTorch를 거의 8년간 이끌며 아무것도 없던 상태에서 AI 도입률을 90% 이상으로 끌어올렸습니다. 이 자리를 떠나는 것은 제가 해본 일 중 가장 힘든 일 중 하나였습니다. 하지만 진심으로 떠납니다.
PyTorch는 현재 엑사스케일 학습을 처리합니다. 지능을 재정의하는 기반 모델을 구동합니다. 거의 모든 주요 AI 회사에서 PyTorch를 사용하고 있으며, MIT부터 인도 시골 지역까지 다양한 곳에서 PyTorch를 가르치고 있습니다. 제가 꿈꾸던 도구들을 쉽게 사용할 수 있게 만들 수 있을까요? 이제 가능합니다. 제가 낮추고 싶었던 진입 장벽은? 거의 사라졌습니다.
분명히 말씀드리자면, 아직 해야 할 일이 너무나 많습니다. AI가 숨 막히는 속도로 발전하는 한, PyTorch는 계속해서 따라잡을 것입니다. 아직 오지 않은 것에 집착하다 보면 우리가 이미 얼마나 많은 것을 이루었는지 잊게 됩니다.
저와 함께 이 프로젝트를 만들어 주신 모든 분들께 감사드립니다. 연구는 즐거워야 하고, 도구는 우아해야 하며, 오픈 소스는 모든 것을 바꿔야 한다고 믿었던 모든 분들께 감사드립니다. 이 여정은 제 것이 아니라 우리의 것이었습니다.
다음은 무엇일까요? 작은 것, 새로운 것, 아직 완전히 이해하지 못하는 것, 불편한 것. Meta 내부의 다른 것으로 넘어갈 수도 있었습니다. 하지만 저는 세상에 무엇이 있는지 알아야 했습니다. 다시 작은 것을 시도해야 했습니다. Meta 외부의 것을 시도하지 않았다는 반사실적인 후회를 감내할 수 없었습니다.
떠나는 것은 정말 힘듭니다. 저는 아마도 AI 업계에서 가장 영향력 있는 자리 중 하나일 것입니다. 전체 AI 산업을 움직이는 소프트웨어 계층을 이끌고 있습니다. 모든 주요 AI 기업과 하드웨어 공급업체는 단축 다이얼에 연결되어 있습니다. 이러한 권한은 포기하기 정말 어렵습니다. 하지만 결국 호기심이 제 머릿속을 지배했습니다.
AI를 맛있고 접근하기 쉽게 만들어 나가는 건 계속해야 합니다. 지켜볼 겁니다. 아마 이슈를 정리할 겁니다. 분명 계속 참여할 겁니다.
PyTorch는 괜찮을까요?
저는 PyTorch를 영원히 하고 싶지 않습니다. Guido나 Linus처럼 수십 년 동안 한 가지에 얽매이고 싶지 않습니다. 작년 11월, 딸아이가 태어난 시기에 저는 Aparna와의 이별을 계획하기 시작했습니다. 제 목표는 PyTorch를 안정적이고 좋은 상태로 남겨두는 것이었습니다.
올해 8월, 육아 휴직 후반기에 접어들면서 저는 확신했습니다. Edward, Suo, Alban, Greg, John, Joe, Jana는 준비가 되어 있었습니다. 팀은 어려운 인력, 제품, 기술 및 조직 문제에 직면했고, (과거와는 달리) 이러한 문제들을 저에게 해결해 달라고 부탁할 필요가 없다고 생각했습니다. PyTorch 컨퍼런스를 위해 그들이 만든 제품 스토리는 일관성이 있었습니다. 정말 일관성이 있었습니다. 제가 빨간색으로 표시했던 문제들이 건강해지고 있었습니다. 프로젝트에 더 이상 제가 필요하지 않았습니다. 2020-2022년(제가 로봇공학을 위해 물러났다가 Lin, Dima, Dwarak이 떠난 후 다시 돌아왔을 때)과는 달리, 이번에는 PyTorch가 진정으로 회복력이 강하다는 강한 확신을 가지고 있습니다. PyTorch의 가장 핵심적인 문화 담당자들인 Greg, Alban, Ed, Jason, Joe가 이제 의사 결정권자 자리에 올랐고, 가치관에 강한 Suo, John, Jana도 합류했습니다. 그리고 이 사람들이 떠나더라도 기꺼이 함께할 가치관을 가진 사람들이 많습니다. 제가 이 사람들에 대해 확신하는 데에는 여러 가지 사소한 이유가 있습니다. John은 Julia와 오픈소스를 오랫동안 개발해 왔고(실제로 2015년에 Torch.jl을 해킹하기도 했습니다), Suo는 지난 2년 동안 제가 함께 일했던 가장 강력한 시스템 구축자이자 전략적 파트너였으며, Jana는 회복력이 강한 핵심 시스템을 오랫동안 개발해 왔습니다. 지난 몇 달 동안 그녀와 기술 및 조직에 대한 오랜 논의를 통해 자신감을 얻었습니다. 2025년 제품 라인업과 실행 계획은 남아 있는 모든 의심을 불식시키는 충분한 증거가 될 것입니다.
저는 이 PyTorcher들이 매우 잘 해낼 것이라고 확신합니다. 제가 더 이상 위에서부터 제 취향을 강요하지 않기 때문에 PyTorch의 색깔은 바뀔 수 있지만, 그 가치는 그대로 유지될 것이고 제품은 훌륭할 것이라고 확신합니다.
Meta에서 보낸 시간
FAIR의 초창기는 정말 마법 같았습니다. 저는 최첨단 AI를 공개적으로 구축하는 정말 뛰어난 사람들로 구성된 작은 가족의 일원이었습니다. Emily Denton, Rob Fergus, Leon Bottou, Martin Arjovsky, 그리고 (지금은 전설적인) Alec Radford와 함께 GAN을 개발하는 것부터 Gabriel Synnaeve와 함께 Starcraft 봇을 개발하는 것, Howard Mansell과 함께 최초의 FAIR 클러스터를 구축하는 것, Adam Lerer와 Piotr Dollar와 함께 객체 감지를 개발하는 것, 그리고 PyTorch를 개발하는 것까지. 말로 표현할 수 없을 만큼 재미있었습니다. 2015년과 2016년은 제 인생에서 가장 생산적이고 직업적으로 즐거웠던 시기였습니다. 아마 평생 이 시기를 낭만적으로 기억할 것 같습니다.
FAIR에 합류했을 때, 저는 엄청난 사기꾼 증후군에 시달렸고, 첫 3개월은 정말 정말 힘들었습니다. 앤드류 툴로흐는 가장 사려 깊고 친절하며 따뜻한 멘토였습니다. 그가 없었다면 저는 이 자리에 설 수 없었을 것입니다.
2개의 좋아요