Бутерін закликає Info Finance зупинити експлойти в AI-управлінні

• Віталік попереджає, що наївне управління AI вразливе до маніпуляцій і експлойтів.
• Info finance створює різноманітність моделей і швидкі корекції, роблячи управління AI безпечнішим.
• Ринки прогнозів і вибіркові перевірки допомагають забезпечити безпеку прийняття рішень і фінансування AI.

Співзасновник Ethereum Віталік Бутерін попередив, що наївні моделі управління AI становлять серйозні ризики, і застеріг, що структури, які покладаються на AI для фінансування чи прийняття рішень, залишаються вразливими до маніпуляцій і експлойтів. На його думку, такі системи дозволяють зловмисникам відволікати ресурси, однак він виступає за підхід під назвою “info finance”, розроблений для створення підзвітності й запобігання зловживанням через ринки, людський нагляд і перевірки.

Аргументи проти наївного управління AI

Бутерін підкреслив, що наївне управління AI є ризикованим, і додав, що якщо AI використовується для розподілу коштів, люди можуть маніпулювати ним за допомогою власних підказок і отримувати надмірні гроші. Він також пояснив, що якщо моделі працюють без будь-яких обмежень чи інструкцій, ними можуть зловживати, заохочуючи хакерів використовувати підказки й обманювати AI, щоб отримати неправильні ресурси. 

Такі вразливості ставлять AI у потенційно небезпечну пастку. Далі Бутерін виявив системні слабкості, які, якщо їх не контролювати, можуть бути використані. Невидимі атаки, prompt injections — це приклади того, як зловмисники можуть легко скористатися ситуацією.

Info Finance як альтернатива

Бутерін обирає інформаційні фінанси замість наївного управління, описуючи це як підхід “institution design”, що поєднує відкриту ринкову конкуренцію з людською перевіркою. Він сказав:

Як альтернативу, я підтримую підхід info finance, де існує відкритий ринок, на якому кожен може запропонувати свої моделі, які підлягають механізму вибіркової перевірки, що може бути ініційований будь-ким і оцінений людським журі.

Він окреслив, що Info Finance дозволяє зовнішнім учасникам інтегрувати великі мовні моделі (LLMs) без жорсткого кодування однієї системи. Це забезпечить різноманітність моделей, зменшуючи ймовірність масових збоїв. Також це створює стимули для розробників і спекулянтів уважно стежити за недоліками й швидко реагувати на проблеми.

Один із запропонованих механізмів передбачає ринки прогнозів або ринки рішень. Кілька моделей змагатимуться, а учасники зможуть робити ставки на результати, сигналізуючи, які моделі здаються найбільш надійними. Людські журі або аудитори періодично проводитимуть вибіркові перевірки результатів, особливо у випадках із високими ставками.

Дивіться також: ETH Treasuries зросли до $12B, поки Віталік попереджає про ризики левериджу

Наслідки для криптовалют і ринків

Info finance спирається на багаторівневу підзвітність, і це помітно у відкритій конкуренції, яка дозволяє оскаржувати або замінювати помилкові моделі. Людський нагляд додається через журі та аудити. Економічні стимули не дозволяють маніпуляціям, а прозорість робить зловмисну поведінку видимою.

Пов’язуючи управління AI з блокчейном і торгівлею, Бутерін припускає, що недоліки централізованого AI можуть підвищити інтерес до децентралізованих рішень, здебільшого побудованих на Ethereum. Крім того, токени, такі як RNDR від Render Network і GRT від The Graph, забезпечують інфраструктуру для AI-обчислень, отримуючи вигоди від розвитку. Далі, трейдери також можуть використовувати ETH і ці токени для арбітражу на тлі волатильності ринку. 

Ончейн-дані свідчать, що кількість транзакцій ETH, пов’язаних із AI-смарт-контрактами, зростає, а питання управління AI можуть впливати й на технологічні акції, зокрема такі компанії, як NVIDIA і Microsoft, які інвестують в AI. Загалом Бутерін зазначив, що Info Finance дозволяє швидше виправляти помилки, замінюючи несправні моделі й караючи порушників. Він також додав, що перевірки журі та вибіркові перевірки запобігатимуть поширенню експлойтів.

Публікація Buterin Pushes Info Finance to Stop Exploits in AI Governance вперше з’явилася на Cryptotale.