We use Chachi PT for [music] all sorts of things, but as researchers, we wanted to know how useful are these models in our everyday lives. [music] We make evals to measure what AI can do. But most of them revolve around workrelated things like coding or math, but there's so much more to life. >> We wanted to make an eval to measure how good AI is at handling your everyday tasks. You know, things to take, [music] remembering, planning, comparing, and following up. So, we created Life Bal, an eval that measures how helpful [music] AI is in everyday life. For example, if you want to help a diabetic parent build a grocery list and plan a week of meals, you don't want a written answer about how to do that. You want actual help getting it done. >> And AI [music] would need to take in a ton of different personal information, health records, dietary preferences, and the budget you have to work with, and then take an action on a grocery delivery website. Lifel helps us measure where the AI model succeeded at the task [music] and where it didn't, and then from there, we can keep improving the models. We care about Chach GPT being [music] useful and that's why we built Life Lifel so we can measure how helpful our models are and make them better for everyday life.
Тақырып ағылшын тіліндеLifeVal: Measuring AI progress on the tasks that matter in everyday life.
We use Chachi PT for [music] all sorts of things, but as researchers, we wanted to know how useful are these models in our everyday lives. [music] We make evals to measure what AI can do. But most of them revolve around workrelated things like coding or math, but there's so much…
AI қорытындысы: Басты тезистер
- We use Chachi PT for [music] all sorts of things, but as researchers, we wanted to know how useful are these models in our everyday lives
- [music] We make evals to measure what AI can do
- But most of them revolve around workrelated things like coding or math, but there's so much…
Ұқсас материалдар
Crusoe күрделі Wyoming деректер орталығы жобасын Google-ға сатты
Бұл келісім үлкен AI деректер орталықтарын дамытудың қиындықтарын көрсетеді.
OpenAI 1,25 триллион долларға бағаланды, ал конкурент Anthropic IPO-ға жақынды
Bloomberg-ке сәйкес, OpenAI жаңа қаржыландыру турысында 1,25 триллион долларға бағаланды, бұл 11 миллиард доллар тартуға мүмкіндік берді. Бұл оны әлемдегі ең қымбат компаниялардың біріне айналдырады, бұл күнде наурыз айында 852 миллиард бағамен 122 миллиард доллар тартылғаннан кейін.
AI адам денсаулығының болашағы үшін нені білдіреді? | Google зерттеу подкаст
Сіздің денсаулығыңызда болып жатқан оқиғалардың көпшілігі дәрігердің кабинетінен тыс жерде болады, солай емес пе? Бұл сізде күнде болып жатыр. Мен білемін, есте сақтау қиын: «Менде бұл симптом төрт апта бұрын болды ма, әлде үш апта бұрын болды ма?». - Және бұл өте рас. Дұрыс па? Сіздің тәжірибеңіздің көпшілігі…
Антропикалық модель 4 AI индустриясын таң қалдырды
Тәуелсіз зерттеу тобына Anthropic ішіне сирек рұқсат берілді. Оның тапқаны көптеген AI зерттеушілерін шынымен алаңдатты. MER мәліметтері бойынша, Anthropic қазір өзінің AI үлгілерін бір жыл бұрынғыдан шамамен екі есе жылдамдықпен жетілдіреді. Және оның көпшілігі жылдамдатады ...



