Living Models z Gemmą 4 znalazło mutację w DNA melona. Z 2494 kandydatów wskazało właściwą jako pierwszą

Paryskie laboratorium Living Models połączyło otwarty model językowy Gemma 4 od Google z własnym modelem BOTANIC-1, który czyta DNA roślin. Opis eksperymentu Google DeepMind opublikował w swoim katalogu Gemmaverse, gdzie pokazuje projekty zbudowane na modelach Gemma. To historia dla hodowców roślin i laboratoriów biologicznych, ale też dla każdego, kto chce zobaczyć, jak mały model AI radzi sobie z prawdziwą pracą naukową.

Igła w stogu 3061 mutacji

Hodowca widzi, że jedna odmiana melona kwitnie inaczej niż druga, i chce wiedzieć, która zmiana w DNA za to odpowiada. Klasyczna metoda zawęża poszukiwania do fragmentu chromosomu. Zostają jednak tysiące mutacji, które dziedziczą się razem jak pasażerowie jednego wagonu. Programy statystyczne nie odróżnią sprawcy od pasażera, więc naukowcy miesiącami albo latami sprawdzają kandydatów w szklarni i na polu.

Living Models sprawdziło swój zestaw na znanym przypadku. Zespół dr. Adnane'a Boualema z instytutu INRAE odkrył wcześniej, że zamiana jednej litery DNA w genie CmEIN3 melona zmienia kwiaty z żeńskich na obupłciowe. Od tego zależy zapylanie i plon. W całym genomie melona badacze mieli 47 492 zmiany. Standardowe mapowanie zawęziło pulę do 3061 kandydatów na chromosomie 2.

Dwa podejścia, dwa wyniki

W pierwszej próbie Gemma 4 dostała zwykłe narzędzia bioinformatyczne. Sama pisała polecenia i filtrowała dane, a część własnych błędów poprawiała bez pomocy. W najlepszych próbach doszła do dwóch mutacji z identyczną oceną: jedna była właściwa, druga dotyczyła innego genu. Naukowiec musiałby dalej rzucać monetą.

W drugiej próbie Gemma dostała jedno narzędzie: BOTANIC-1. Ten model uczył się na genomach 320 gatunków roślin i ocenia, czy zmiana trafia w miejsce, które ewolucja przez miliony lat zostawiała nietknięte. Gemma odsiała 567 wstawek, ubytków i przestawień DNA, a pozostałe 2494 pojedyncze mutacje przekazała do oceny. Mutacja w CmEIN3 wyszła na pierwszym miejscu, bez remisu.

Wynik	Gemma ze zwykłymi narzędziami	To samo ze wskazówkami eksperta	Gemma z BOTANIC-1
Właściwa mutacja na 1. miejscu (Recall@1)	0,00	0,15	0,90

Najciekawsza liczba jest poza tą tabelą. Ze zwykłymi narzędziami Gemma w 3 i w 4 próbach na 20 podała mutacje, których w danych nie było. Z BOTANIC-1 nie wymyśliła żadnej.

Szerszy test i to, czego nie wiadomo

Living Models porównało BOTANIC-1 z klasycznymi narzędziami na ponad 500 opisanych w literaturze mutacjach roślin, które potwierdzono doświadczalnie. Liczby pochodzą od autorów modelu.

Ile razy właściwa mutacja trafiła do...	BOTANIC-1	Najlepsza metoda bez modelu DNA	Klasyczne potoki analizy
najlepszych 0,1 proc. kandydatów	15,9 proc.	4,6 proc.	brak danych
najlepszych 1 proc. kandydatów	48,8 proc.	brak danych	33,9 proc.

Do całości wystarczyła mała wersja, Gemma 4 E4B. Większe modele według Living Models nie poprawiały trafności, a dokładały kosztów obsługi. Zestaw działa lokalnie na jednej karcie NVIDIA L4, więc genomy firmy nie trafiają do cudzej chmury. Podobnie jak przy enzymie znalezionym przez Claude'a i białkach wirusów przewidzianych przez AlphaFold model nie zastępuje laboratorium: wskazuje, co sprawdzić najpierw.

Zapowiedź, że lata pracy skrócą się do godzin, to deklaracja firmy; test na melonie dotyczył mutacji, którą ludzie już znali. BOTANIC-1 jest do pobrania w serwisie Hugging Face, na licencji Living Models.