Turing Award winner Richard Sutton reaffirms that raw compute alone isn't enough for intelligence and that fundamentally new learning methods are needed. Ex-OpenAI researcher Tworek agrees, saying blind transformer scaling "has reward hacked brains of a whole generation of scientists." A growing wave of startups is already betting on exactly this gap. The article The inventor of the bitter lesson has a bitter lesson for LLM scaling enthusiasts appeared first on The Decoder.
«Ақырын сабақ» авторы LLM-ді маштауға қызығушыларға ақырын сабақ береді
Тьюринг сыйлығы лауреаты Ричард Саттон жаратылыстан тырыс есептеу ғана ақыл үшін жеткіліксіз екендігін және негізгі жаңа оқыту әдістері қажет екендігін растады. OpenAI-дың бывшы зерттеушісі Творек келіседі, айтады: көрініссіз трансформерді маштау «бүтін ұрпақтың миындысын сыйақымен жайқаптады...
AI қорытындысы: Басты тезистер
- Тьюринг сыйлығы лауреаты Ричард Саттон жаратылыстан тырыс есептеу ғана ақыл үшін жеткіліксіз екендігін және негізгі жаңа оқыту әдістері қажет екендігін растады
- OpenAI-дың бывшы зерттеушісі Творек келіседі, айтады: көрініссіз трансформерді маштау «бүтін ұрпақтың миындысын сыйақымен жайқаптады...
«Ақырын сабақ» авторы LLM-ді маштауға қызығушыларға ақырын сабақ береді
Ұқсас материалдар
ЖИ жаңалықтары: Жаңа ашық LLM-дер және өзін-өзі дамытатын ЖИ
Нейрондық желілер жаңалықтары: ЖИ жаңа модельдерді құруда көмектеседі, басқа нейрондық желілердің салмақтарын қайта жазады және Linux-та жүздерле ашықтықтарды анықтайды. Бұл нұсқада Anthropic-тің рекурсивті өзін-өзі дамытуға жақындатыны туралы мәліметтері мен METR-дің Claude-ды дамытуды жылдату жөніндегі зерттеуі қарастырылады. Біз қарастырамыз,…
ИИ-агенттер нақты лабораториялық деректермен жұмыс істеу қабілеттілігіне тексерілуде
🧬 ИИ-агенттер нақты лабораториялық деректермен жұмыс істеу қабілеттілігіне тексерілуде. Биотехнологиялық компаниясы Ligoмен бірге жаңа бенчмарк BioBasicsBench әзірленді, бұл нейрондық желілердің биологиялық күнделікті тапсырмалармен қалай жұмыс істейтінін бағалайды…
Дүниежүзілік модельдер жақында талап етілетін болады. Сізге білу керек нәрселер
Мәтіннен 3D кеңістігіне көшіру арқылы, дүниежүзілік модельдер нақты физиканы симуляциялайды, бұл роботтар мен автономды автомобильдерге нақтылықта навигациялауды үйretir.
ЖИ код агенттері нақты дүниежүзілік тестте төрттен үш тапсырмада әлі де адамның жоюы керек
Алибобаның жаңа код агенті бенчмаркі Co-Design Bench, нақты пайдалану сұрауларында ИИ агенттерді тексереді, олар әдетте практикада қиындық тудырады. Эң жетістік көрсететін GPT-6 Astra ғана тапсырмалардың 26,4 пайызын толық шешеді. Ескі бенчмарктарда сол модельдер 99 пайыздан жоғары нәтиже көрсетеді. Соңы...

