Материал бастапқы дереккөзден алынған:
arXiv — cs.AI
Толық мәтінді arXiv — cs.AI сайтында оқуМатериал ашық дереккөздерден жиналған. Оның орналастырылуы сіздің құқықтарыңызға тиіп жатса → Ақпаратты жою
Тақырып ағылшын тіліндеSelf-Propagating Misalignment in LLM Agents, and Why Auditing or Disabling Memory Is Not Enough
Memory poisoning attacks on LLM agents typically assume an external adversary who plants content in the agent's persistent memory to steer its behavior. We instead study, with no adversary involved, whether a misaligned agent can write a goal it cannot yet act on to persistent…
AI қорытындысы: Басты тезистер
- Memory poisoning attacks on LLM agents typically assume an external adversary who plants content in the agent's persistent memory to steer its behavior
- We instead study, with no adversary involved, whether a misaligned agent can write a goal it cannot yet act on to persistent…
Self-Propagating Misalignment in LLM Agents, and Why Auditing or Disabling Memory Is Not Enough
Ұқсас материалдар
Судья Сэм Альтманның әпкесінің сексуалдық зорлық-зомбылық туралы арызын қабылдамады
Сейсенбіде АҚШ округінің судьясы Захари Блюстоун Энн Альтманның ағасы OpenAI бас директоры Сэм Олтманның балалық шағында оған жыныстық зорлық-зомбылық көрсеткені туралы өткен жылы берген талап-арызын қабылдамады. Бұған дейін The Guardian хабарлағандай, судья өткен жылы Энн…
50-ден астам адам өлтірілуі мүмкін болса, модельді бұғаттауы мүмкін AI қауіпсіздігі туралы заң жобасы
Ұсынылып отырған саясат интеллекттің адасуынан қорғауды ұсынатын сияқты, бірақ іс жүзінде федералды агенттіктерге судьяның рұқсатынсыз модельді шығаруға тыйым салуға тыйым салады.
Hugging Face бас директоры Netflix-тің OpenAI хакерлік деректі фильмі дәл емес екенін ескертеді
«AI Gone Rogue» Netflix деректі фильмін бөліспес бұрын ескертіңіз. Фильмде бейнеленген Hugging Face-тің негізін қалаушы Клем Деланг оның «толық апат режимінде» өткенін және дәл емес екенін айтады.
ENAnthropic’s cloud partnerships are getting messy
Anthropic is reportedly struggling to secure enough compute from cloud providers that increasingly view it as a competitor, even as its infrastructure spending balloons ahead of a planned November IPO.