Lihat langsung lanskap robotika + AI

Ini adalah peluncuran startup robotika terbaik yang pernah saya lihat 🔥 Inovasi full-stack mulai dari desain perangkat keras hingga bertaruh besar pada UMI hingga kebijakan yang mulus dan mengesankan. Setelah 1,5 tahun sembunyi-sembunyi, langsung diluncurkan sebagai tim model fondasi robot 5 teratas. Congrats!👏

Setelah 8 tahun yang tak terlupakan, saya telah memutuskan untuk meninggalkan Google DeepMind. Saya merasa sangat bersyukur memiliki kesempatan untuk membantu mengubah impian pembelajaran robot tujuan umum dari ide pinggiran sesat menjadi peta jalan teknologi yang dinormalisasi. Merupakan kehormatan seumur hidup untuk mengerjakan masalah paling menantang dan penting di zaman kita dengan rekan-rekan yang paling cerdas, paling baik, dan paling berbakat yang bisa saya harapkan. Terima kasih kepada Julian dan Vincent karena telah mengambil kesempatan pada saya pada tahun 2017, ketika tim ragtag di Google Brain mulai mengeksplorasi potensi pembelajaran end-to-end di peternakan lengan di dunia nyata. Tim selalu bermimpi besar: "proyek awal" saya dengan Corey dan Pierre adalah mengerjakan kebijakan imitasi yang dikondisikan tujuan yang mampu beralih dari kondisi awal apa pun (penyematan laten) ke keadaan tujuan apa pun. Proyek 3 bulan itu berubah menjadi usaha 2 tahun! Tetapi meskipun ambisi penelitian tinggi, kolega dan mentor selalu membumi dan penuh kasih secara default. Alex H, Karol, Julian, dan Sergey mendukung visi saya tentang RL kontrol bersamaan dalam skala besar sambil memungkinkan saya ruang untuk tumbuh menjadi peneliti kreatif dengan cara saya sendiri. Kemajuan teknis tim dan selera penelitian saya sendiri mulai meningkat secara substansial pada tahun 2020, ketika Kanishka dan Karol menginspirasi seluruh tim untuk bertaruh besar pada satu moonshot gila: kebijakan robot umum yang dapat menyelesaikan ribuan tugas manipulasi rumah tangga. Upaya kelompok yang belum pernah terjadi sebelumnya seperti itu baru bagi seluruh tim tetapi sangat memuaskan—untuk mempelajari cara menavigasi penskalaan sistem dunia nyata 0-ke-1 secara harmonis (armada robot, teleoperator, tumpukan pembelajaran berskala) di samping eksplorasi ilmiah yang ketat (perbandingan objektif dari sifat penskalaan pembelajaran imitasi dan penguatan). Saya belajar banyak dari semua rekan seperjuangan saya selama ini, dan bahkan sampai hari ini, banyak intuisi penelitian dan teknik saya diambil dari pelajaran yang saya pelajari dari Eric, Yao, Alex I, Keerthana, dan Yevgen. Periode berikutnya, mulai tahun 2022, benar-benar ajaib dan unik dalam luasnya dan kedalaman eksplorasi imajinatif yang saya berkontribusi dan memimpin. Mengeksplorasi potensi model dasar untuk robotika mengubah pandangan penelitian saya secara permanen, dan proyek-proyek seperti SayCan, RT-1, dan RT-2 terasa seperti momen viral ajaib pertama ketika dunia mulai berpikir lebih serius tentang seperti apa janji AI yang diwujudkan secara umum dan berperforma. Ketika VLA generalis pertama mulai melakukan tugas-tugas yang belum kami kumpulkan datanya dengan andal, itu adalah momen bola lampu yang sangat besar bagi tim dan lapangan kami. Selama waktu ini, saya sangat terinspirasi oleh apa yang dapat dilakukan oleh agensi yang tinggi, kreativitas manik, dan kecepatan iterasi yang menyala untuk penelitian, belajar dari rekan kerja yang sangat baik dan produktif seperti Fei, Brian, Andy, Pete, Quan, Harris, dan Danny. Saya menerapkan pendekatan penelitian yang sangat kreatif ini ke bidang-bidang yang saya pedulikan, seperti menciptakan representasi tindakan yang lebih baik, memahami generalisasi robot, dan memanfaatkan VLM untuk kualitas dan peningkatan data. Saya berterima kasih kepada rekan satu tim yang bergabung dengan saya dalam eksplorasi petualangan ini, seperti Chelsea, Dorsa, Jonathan, Wenhao, Tianli, Montse, Sean, Austin, Kelly, dan Paul. Saya juga sangat menghargai semua kolaborasi akademik selama ini—mulai dari pembelajaran lintas perwujudan multi-institusi hingga VLA sumber terbuka hingga evaluasi offline yang dapat diskalakan hingga penyelenggaraan lokakarya. Terima kasih, siswa, magang, dan teman; khususnya, Soroush, Jiayuan, Laura, Xuanlin, Kyle, Karl, Oier, Dhruv, Annie, Jensen, Priya, Suneel, Ike, Homanga, Hao, dan Xuesu. Di bab terakhir karir saya di GDM, mulai tahun 2024, saya terpikat dengan sains dan dampak model perbatasan dan cara memanfaatkannya dengan benar dalam robotika. Itu selalu mengganggu saya pada dasarnya bahwa pembelajaran robot sering terlihat seperti pembelajaran mesin "klasik" yang hanya menyesuaikan distribusi sederhana dengan model kecil, daripada sistem skala yang dipoles dan ilmu pengetahuan tentang bagaimana model perbatasan dikembangkan dengan pra-pelatihan, pelatihan menengah, dan pasca-pelatihan. Saya ingin belajar tentang dunia itu dan mencari tahu bagaimana membuat AGI memahami dunia fisik. Saya bangga dengan kemajuan yang telah kami buat, dan dari mana kami memulai dengan Gemini 1.0 hingga hari ini, inovasi penelitian yang telah kami buka telah menempatkan Gemini dan Gemini Robotics dengan jelas di garis depan pemahaman dunia mendasar dan kontrol VLA umum. Terima kasih banyak kepada rekan satu tim saya di Embodied Reasoning yang membuat setiap hari menjadi cerah, menarik, dan menyenangkan: Fei, Jacky, Laura, Wentao, Annie, Lewis, Ksenia, Mohit, Sean, dan Danny. Terima kasih kepada teman-teman di Gemini Multimodal yang mengajari saya cara membuat model perbatasan: Xi, Karel, Ishita, dan Xudong. Terima kasih kepada pembisik VLA yang telah menunjukkan kepada saya seberapa jauh inovasi dan ketekunan dapat membawa Anda: Coline, Giulia, Claudio, Alex L, Sumeet, Ashwin, Sudeep, Debi, dan Ayzaan. Terima kasih kepada mentor selama bertahun-tahun yang telah memberikan contoh cemerlang bahwa kecepatan dan dampak, dan kasih sayang, bukanlah zero-sum: Carolina, Jie, Kanishka, Nicolas, Jonathan, Pierre, Vincent, Karol, Sergey, Chelsea, dan Julian. Terima kasih, terima kasih, terima kasih. Ini adalah petualangan yang luar biasa, dan saya sangat beruntung telah menjadi bagian dari tim gila yang memulai terobosan teknologi yang mengubah dunia menjadi dunia di mana AGI yang diwujudkan secara umum dan bermanfaat ada di mana-mana di masyarakat. Saya akan selalu menjadi penggemar GDM #1! Adapun perjalanan saya sendiri, saya akan memulai petualangan baru, baik yang akrab maupun sangat berbeda, dan berharap untuk segera memiliki lebih banyak untuk dibagikan.