В рамках тестирования сотрудники криптобиржи Coinbase самостоятельно проанализировали 20 смарт-контрактов различных токенов на предмет риска, а затем использовали ChatGPT для той же цели.
В 12 случаях из 20 выводы нейросети об уровне риска совпадали с выводами экспертов.
«Из восьми случаев неправильной оценки риска ChatGPT в пяти случаях присвоил токенам с высоким риском оценку низкого риска. Это худшая возможная ошибка — недооценка риска актива может быть гораздо опаснее, чем переоценка уровня риска, “, – говорят представители компании.
Аналитики отметили преимущества ChatGPT, но заявили, что преждевременно отказываться от ручного тестирования смарт-контрактов. По мнению экспертов Coinbase, нейронная сеть плохо работает, когда у нее недостаточно контекстных данных для проведения анализа. Кроме того, ChatGPT слишком много внимания уделяет комментариям в коде смарт-контракта, тогда как логика самой программы важнее.
«Хотя ChatGPT демонстрирует потенциал для быстрой оценки рисков смарт-контрактов, результаты нейронной сети слишком неопределенны, чтобы их можно было интегрировать в процессы оценки безопасности Coinbase. Мы ожидаем, что при правильной конструкции точность инструмента может быть улучшена, но это не так полностью полагаться на него невозможно», — заключают представители биржи.
Популярность нейросети ChatGPT привлекла внимание мошенников. Недавно разработчики проекта Harvest Keeper, который «использовал искусственный интеллект и нейронные сети для оптимизации торговли», выпустили пользовательские активы на сумму более 1 миллиона долларов.
