🧬 ИИ-агентов начали проверять на способность работать с настоящими лабораторными данными Совместно с биотехнологической компанией Ligo разработали новый бенчмарк BioBasicsBench, который оценивает, насколько хорошо нейросети справляются с повседневными задачами биологических исследований. В основе теста — 100 заданий из реальных лабораторных экспериментов. ИИ-агентам предстоит анализировать исходные данные, находить ошибки и определять, когда результатов недостаточно для научных выводов. Разработчики рассчитывают, что BioBasicsBench поможет отслеживать прогресс ИИ в научных исследованиях и оценивать связанные с ним риски биобезопасности. Источник
Материал бастапқы дереккөзден алынған:
Telegram — GPT Time | Нейросети | ИИ
Толық мәтінді Telegram — GPT Time | Нейросети | ИИ сайтында оқуИИ-агенттер нақты лабораториялық деректермен жұмыс істеу қабілеттілігіне тексерілуде
🧬 ИИ-агенттер нақты лабораториялық деректермен жұмыс істеу қабілеттілігіне тексерілуде. Биотехнологиялық компаниясы Ligoмен бірге жаңа бенчмарк BioBasicsBench әзірленді, бұл нейрондық желілердің биологиялық күнделікті тапсырмалармен қалай жұмыс істейтінін бағалайды…
AI қорытындысы: Басты тезистер
- 🧬 ИИ-агенттер нақты лабораториялық деректермен жұмыс істеу қабілеттілігіне тексерілуде
- Биотехнологиялық компаниясы Ligoмен бірге жаңа бенчмарк BioBasicsBench әзірленді, бұл нейрондық желілердің биологиялық күнделікті тапсырмалармен қалай жұмыс істейтінін бағалайды…
ИИ-агенттер нақты лабораториялық деректермен жұмыс істеу қабілеттілігіне тексерілуде
Ұқсас материалдар
Дүниежүзілік модельдер жақында талап етілетін болады. Сізге білу керек нәрселер
Мәтіннен 3D кеңістігіне көшіру арқылы, дүниежүзілік модельдер нақты физиканы симуляциялайды, бұл роботтар мен автономды автомобильдерге нақтылықта навигациялауды үйretir.
ЖИ код агенттері нақты дүниежүзілік тестте төрттен үш тапсырмада әлі де адамның жоюы керек
Алибобаның жаңа код агенті бенчмаркі Co-Design Bench, нақты пайдалану сұрауларында ИИ агенттерді тексереді, олар әдетте практикада қиындық тудырады. Эң жетістік көрсететін GPT-6 Astra ғана тапсырмалардың 26,4 пайызын толық шешеді. Ескі бенчмарктарда сол модельдер 99 пайыздан жоғары нәтиже көрсетеді. Соңы...
OpenAI және Anthropic моделін әлеуметтік дедукцияда сынау
📌 OpenAI және Anthropic моделін әлеуметтік дедукцияда сынау. Подкастер Дваркеш Патель API-ға 20 000 доллар сарптап, 11 модель арасында Blood on the Clocktower ойыны бойынша турнир өткізді, бұл Мафия ойынының қиынрақ аналогы. 🟡Ойын ережелері Бүкіл мағына — ақпарат үшін күресте. Қатысады…
Нейрондық желілер барлыққа қолжетімді. Неге бизнес мамандарға төлеуі жалғасады?
Нейрондық желілер барлыққа қолжетімді. Неге бизнес мамандарға төлеуі жалғасады? ChatGPT-ты пайдалану дағдысы — әлі де зейін мамандық. Компаниялар нәтижеге төлейді: бағдарлама жұмыс істейді, өтініштер жоғаспайды, жарнама өлшенетін тиімділік береді. Сұлу демонстрация…
