Coinbase тестирует ChatGPT. Изменит ли ИИ криптоиндустрию?
Coinbase, одна из крупнейших криптовалютных бирж в мире, провела тест с использованием приложения искусственного интеллекта (ИИ) ChatGPT для оценки рисков безопасности смарт-контрактов. Биржа, расположенная в Сан-Франциско, протестировала точность инструмента ИИ с помощью своей системы проверки токенов ERC-20, опубликовав результаты 20 марта в блоге
Процесс проверки безопасности Coinbase включает в себя выявление потенциальных рисков, связанных с новыми активами, и обеспечение их соответствия стандартам безопасности биржи перед включением в листинг. Способность ChatGPT быстро оценивать риски смарт-контрактов сделала его привлекательным инструментом для тестирования биржей Coinbase. Однако компания отметила, что ChatGPT не соответствует ее требованиям к точности проверки безопасности, ссылаясь на непоследовательность ответов и неправильное обозначение активов с высоким риском как активов с низким риском.
Чтобы определить эффективность ChatGPT, Coinbase сравнила результаты анализа чат-бота с результатами своей внутренней команды. Компания сопоставила в общей сложности 20 оценок риска смарт-контрактов между ChatGPT и ручным анализом, при этом ChatGPT получал одинаковый результат в 60% случаев. Однако в восьми неверных результатах ИИ обозначил высокорисковый актив как низкорисковый в пяти случаях из десяти.
Команда безопасности Coinbase научила ChatGPT проводить анализ безопасности с использованием своего формата. Однако машина все равно неправильно обозначала риски, потому что не могла распознать, "когда ей не хватает контекста для проведения надежного анализа безопасности". Кроме того, ответы ChatGPT были непоследовательными, когда ему неоднократно задавали один и тот же вопрос. Coinbase заявила, что инструмент искусственного интеллекта "находился под влиянием комментариев в коде и, похоже, иногда по умолчанию использовал комментарии, а не логику функций".
Несмотря на неточности ChatGPT, Coinbase считает, что ИИ и автоматизация могут значительно улучшить оценку безопасности. Биржа заявила, что как только автоматизированные или интеллектуальные процессы смогут продемонстрировать тот же уровень точности, что и существующие процессы, эти инструменты будут использоваться только в качестве вспомогательного, а не основного средства.
Это не первый раз, когда Coinbase экспериментирует с ChatGPT. Ранее в этом месяце управляющий директор Coinbase Конор Гроган в своем сообщении в Твиттере сообщил, что ChatGPT успешно справился с поиском ошибок в смарт-контрактах. Гроган предложил чатботу реальный контракт Ethereum, попросив его обнаружить любые уязвимости в системе безопасности. Он не только обнаружил уязвимости, но и предложил конкретные способы взлома контракта в демонстрационных целях.
