Slav Petrov
Vice President, Research at Google DeepMind; co-leads Post-Training for Gemini
Themes
Slav Petrov është një studiues bullgar dhe Zëvendës President i Kërkimit në Google DeepMind, ku bashkëdrejton Post-Training për Gemini, përpjekjen e Google për modelet e mëdha gjuhësore. Ai mban një PhD nga Universiteti i Kalifornisë, Berkeley, dhe ka dhënë mësim për Përpunimin Statistikor të Gjuhës Natyrore në Universitetin e Nju Jorkut.
Kërkimet e tij fokusohen në përpunimin e gjuhës natyrore dhe modelet e mëdha gjuhësore, dhe puna e tij ka kontribuar në aftësitë gjuhësore për produktet e Google, duke përfshirë Search, Assistant, Translate dhe Cloud. Ai ka marrë disa Çmime për Punimin më të Mirë në konferenca të mëdha të NLP-së (ACL 2011, NAACL 2012, ACL 2016), si dhe një Çmim 10-vjeçar për Test-of-Time në ACL 2023, dhe iu dha Çmimi John Atanasoff në vitin 2014 nga Presidenti i Bullgarisë.
Arsimimi dhe përvoja profesionale
Udhëtimi arsimor i Petrov-it shtrihet në tre vende dhe pasqyron natyrën ndërkombëtare të karrierës së tij. Ai përfundoi një Diplom në Shkenca Kompjuterike dhe Administrim Biznesi në Freie Universität Berlin, përpara se të ndiqte studimet doktorale në Shkenca Kompjuterike në University of California, Berkeley. Më pas ai studioi në Duke University, si pjesë e rrugës së tij të hershme akademike. Nga viti 2010 deri në 2016, ai shërbeu si Profesor i Asociuar (Adjunct Professor) në New York University, ku dha mësim për Statistical Natural Language Processing — një rol që zhvillohej paralelisht me punën e tij në industri te Google, ku u bashkua në gusht 2009.
Roli te Google DeepMind
Në Google DeepMind, Petrov mban pozicionin e Zëvendëspresidentit për Kërkime dhe bashkëdrejton Post-Training për Gemini, modeli kryesor i madh gjuhësor i kompanisë. Post-training është një fazë kritike në zhvillimin e modeleve të mëdha gjuhësore, që përfshin teknika të cilat rafinojnë sjelljen e modelit, aftësitë për ndjekjen e udhëzimeve dhe përafrimin pas para-trajnimit fillestar. Ekipi i tij është i shpërndarë globalisht, duke pasqyruar shkallën dhe kompleksitetin e punës së përfshirë. Përpara formimit të Google DeepMind, Petrov drejtoi përpjekjet kërkimore në NLP që ushqyen drejtpërdrejt produktet e Google si Search, Ads, Translate, Assistant dhe Chrome.
Regjistri i tij i publikimeve shtrihet mbi një dekadë dhe mbulon një gamë të gjerë temash brenda përpunimit të gjuhës natyrore, duke përfshirë përkthimin me makinë, analizimin (parsing) dhe atribuimin në gjenerimin e gjuhës natyrore. Ai është kontribues në punime të rëndësishme të lidhura me përpjekjet e Google për modele të mëdha, përfshirë punën mbi PaLM, PaLM 2, Gemini, Gemini 1.5 dhe Gemma 2, si dhe datasetin e standardit Natural Questions — një burim gjerësisht i përdorur për kërkime mbi përgjigjen ndaj pyetjeve.
Kontribute kërkimore dhe vlerësime
Prodhimi kërkimor i Petrov-it përfshin kontribute në analizimin sintaksor, përkthimin me makinë dhe zhvillimin e kornizave të vlerësimit për gjenerimin e gjuhës. Një fushë e shquar e punës së fundit përfshin matjen e atribuimit në modelet e gjenerimit të gjuhës natyrore — duke shqyrtuar nëse daljet e modelit mund të gjurmohen te burime të verifikueshme, një shqetësim që ka marrë rëndësi në rritje krahas vendosjes së sistemeve të mëdha gjeneruese. Kjo punë, e publikuar në Computational Linguistics në 2023, pasqyron një interes më të gjerë për ta bërë daljen e modeleve gjuhësore më të besueshme dhe më të kuptueshme.
Përtej çmimeve të tij për punime në ACL dhe NAACL, Petrov mori një Test-of-Time Award 10-vjeçar në ACL 2023, që vlerëson kërkimin nga një dekadë më parë, i cili doli të ishte i qëndrueshëm për nga ndikimi i tij në fushë. Fushat e tij të kërkimit, siç renditen në drejtorinë e kërkimit të Google, përfshijnë Natural Language Processing, Machine Translation, Machine Intelligence dhe General Science.
Prejardhja dhe arritje të tjera
Petrov ka jetuar në Bullgari, Gjermani dhe Shtetet e Bashkuara në masë afërsisht të barabartë, dhe aktualisht është i bazuar në Berlin. Arritjet e tij të hershme konkurruese përfshijnë një Kampionat Botëror në RoboCup 2004 — një garë ndërkombëtare e robotikës — që i paraprin karrierës së tij në kërkimin e NLP. Ai përfundoi Diplom-in në Freie Universität Berlin, dhe koha e tij në Gjermani duket se e ka mbyllur karrierën e tij, me Berlinin që shërben si baza e tij aktuale edhe ndërkohë që ai drejton kërkime për një nga organizatat më të spikatura të AI në botë. Ai ka shprehur një besnikëri personale ndaj ekipit kombëtar bullgar të futbollit, veçanërisht në ndeshjet kundër Gjermanisë.