Компания BlockSec провела повторное тестирование бенчмарка EVMBench от OpenAI и Paradigm для аудита смарт-контрактов и обнаружила, что боты оказались менее изощренными в реальных условиях эксплуатации уязвимостей.
Авторы расширили среду тестирования, включив в нее больше конфигураций моделей и более свежие инциденты безопасности, которые не могли быть включены в обучающие данные для программ LLM.
Хотя искусственный интеллект, возможно, и не способен заменить специалистов по безопасности, авторы отмечают, что машинный интеллект является естественным дополнением к проверке кода человеком.
"Настоящий вопрос не в том, „может ли ИИ заменить человека?“, а в том, „как люди и ИИ должны работать вместе?“ ИИ отвечает за широкий охват (систематическое сканирование); люди — за глубинный (знание протоколов, состязательное мышление). Ни один из них не может выполнить работу другого. Вместе они образуют полноценную систему аудита", — написал Чжоу.
Аудит с использованием ИИ имеет реальную ценность, но заменить людей пока рано. Правильное направление — это сотрудничество человека и ИИ
