Симулятор с открытым исходным кодом позволяет глубже понять узкие места ускорителей искусственного интеллекта следующего поколения в автономном режиме
Ускорители искусственного интеллекта на базе RISC-V стали популярными не только для искусственного интеллекта и машинного обучения, но и как средства для изучения рабочих нагрузок высокопроизводительных вычислений в целом. Tenstorrent — один из примеров. Хотя они подробно документируют свою архитектуру Tensix и открыто разрабатывают свой программный стек, исторически для запуска кода требовалась физическая карта, а их недавно выпущенный симулятор ориентирован на аппаратную эквивалентность, а не на самоанализ. В этой статье мы представляем Wolfpine, симулятор RISC-V, разработанный сообществом для архитектуры Tensix, поддерживающий поколения Wormhole и Blackhole и легко интегрирующийся со стеком программного обеспечения TT-Metal. Созданный полностью на основе общедоступной документации, программного обеспечения с открытым исходным кодом и измерений физического оборудования, Wolfpine написан на чистом Python для удобства чтения и простоты модификации. Включаемая модель затрат с отслеживанием происхождения постепенно повышает точность синхронизации, а типизированные потоки событий, трассировка каждого компонента и экспорт временной шкалы позволяют программистам выявлять и диагностировать узкие места в производительности, которые скрывает само оборудование.
## В чем суть открытия Как может чисто программный инструмент, полностью созданный на основе общедоступных документов, выявить узкие места микроархитектуры, которые физическое аппаратное обеспечение скрывает от разработчиков? ## Как это устроено: принцип работы Wolfpine моделирует архитектуру ускорителя Tensix, используя управляемый событиями тактовый насос, который проходит через активные блоки обработки и пассивные области памяти. Он напрямую взаимодействует со стеком программного обеспечения поставщика через реверс-инжиниринг протокола сетевых сокетов, используя декларативные модели стоимости для отслеживания остановок выполнения на уровне цикла, доступа к памяти и задержек сети на кристалле. ## Что это меняет на практике Позволяет исследователям и программистам HPC разрабатывать, профилировать и оптимизировать код для передовых микросхем искусственного интеллекта, не покупая физические карты и не полагаясь на закрытые проприетарные инструменты моделирования. ## Границы метода и риски Написанный на чистом Python, он работает с 3.5x по 192x медленнее, чем реальное оборудование, и до 20x медленнее, чем симуляторы C++ поставщиков. Кроме того, ее модель стоимости цикла недооценивает переменные операции, такие как целочисленное деление, и в настоящее время в ней отсутствует многочиповое моделирование Ethernet. ## Результаты и доказательства - **Комплексный скор значимости:** 9.6 / 10.0 - **Уровень доказательности:** Теоретическое обоснование - **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)