We use Chachi PT for [music] all sorts of things, but as researchers, we wanted to know how useful are these models in our everyday lives. [music] We make evals to measure what AI can do. But most of them revolve around workrelated things like coding or math, but there's so much more to life. >> We wanted to make an eval to measure how good AI is at handling your everyday tasks. You know, things to take, [music] remembering, planning, comparing, and following up. So, we created Life Bal, an eval that measures how helpful [music] AI is in everyday life. For example, if you want to help a diabetic parent build a grocery list and plan a week of meals, you don't want a written answer about how to do that. You want actual help getting it done. >> And AI [music] would need to take in a ton of different personal information, health records, dietary preferences, and the budget you have to work with, and then take an action on a grocery delivery website. Lifel helps us measure where the AI model succeeded at the task [music] and where it didn't, and then from there, we can keep improving the models. We care about Chach GPT being [music] useful and that's why we built Life Lifel so we can measure how helpful our models are and make them better for everyday life.
Заголовок на английскомLifeVal: Measuring AI progress on the tasks that matter in everyday life.
We use Chachi PT for [music] all sorts of things, but as researchers, we wanted to know how useful are these models in our everyday lives. [music] We make evals to measure what AI can do. But most of them revolve around workrelated things like coding or math, but there's so much…
Кратко от AI: Главные тезисы
- We use Chachi PT for [music] all sorts of things, but as researchers, we wanted to know how useful are these models in our everyday lives
- [music] We make evals to measure what AI can do
- But most of them revolve around workrelated things like coding or math, but there's so much…
Похожие материалы
Crusoe продаёт проблемный проект дата-центра в Вайоминге Google
Сделка подчёркивает сложности создания крупных ИИ-дата-центров.
OpenAI оценена в $1,25 триллиона, пока конкурент Anthropic приближается к IPO
По данным Bloomberg, OpenAI теперь оценена в $1,25 триллиона в новом раунде финансирования, привлекшем еще $11 миллиардов. Это сделало бы её одной из самых дорогих компаний мира, недолго после привлечения $122 миллиарда от инвесторов в марте при оценке в $852 миллиарда.
Что означает ИИ для будущего здоровья человека? | Подкаст исследований Google
Большая часть того, что происходит с вашим здоровьем, происходит за пределами кабинета врача, верно? Это происходит с вами изо дня в день. Я знаю, что мне трудно вспомнить: «Был ли у меня этот симптом четыре недели назад или три недели назад?» -И это так правда. Верно? Большая часть того, как вы испытываете…
Антропическая модель 4 просто шокировала индустрию искусственного интеллекта
Независимая исследовательская группа только что получила редкий доступ внутри Anthropic. И то, что оно обнаружило, искренне беспокоит многих исследователей ИИ. По данным MER, Anthropic сейчас совершенствует свои модели искусственного интеллекта примерно в два раза быстрее, чем год назад. И большая часть этого ускорения…



