Vetu
"Encouragingly, we also haven’t seen any bugs that couldn’t have been found by an elite human researcher."
by som neprekladal ako
"Dosud jsme nenašli žádnou kategorii ani úroveň složitosti zranitelnosti, kterou by dokázali odhalit lidé, ale tento model nikoli."
ale presne naopak - t.j., že bugy ktoré našiel model, by našli aj ľudia.
Ale vypadá to, že už jsme na hranici. Že není moc daleko doba, kdy jazykové modely dokážou odhalit chyby, které budou příliš komplexní na to, aby je objevil člověk. Ne že by to byla nějaká úplně nová kategorie chyb, ale budou to chyby příliš komplikované na pochopení jedním člověkem.
Každopádně už teď je podstatné to, že AI agenti dokážou projít řádově víc kódu, než by dokázalo těch pár největších lidských expertů. A zároveň to pořád není náhrada práce těch expertů – jen mají k dispozici daleko výkonnější nástroj, ale posouzení kontextu je stále na těch expertech.
To ze jirsak nechape ani zakladni principy ... ze se divim ze?
Statisticky model dela to, ze veme chybu popsanou !clovekem! a hleda stejnou konstrukci. Pritom narozdil od cloveka ma velmi vyskoly false positive, protoze nedokaze zhodnotit okolnosti.
Tudiz zadnou jinou chybu ani teoreticky ani prakticky odhalit nemuze.