computing_infrastructure · 2026-11-06
Превращение цифровых трасс в геномные символы решает главную проблему заторов в суперкомпьютерах
Ввод-вывод (I/O) является основным узким местом для производительности высокопроизводительных вычислений (HPC). Одной из проблем является конфликт между заданиями при совместном использовании параллельной файловой системы. Однако решение этой проблемы зависит от знания временного поведения рабочих мест. В этой статье мы предлагаем основанный на кластеризации подход для характеристики временного поведения операций ввода-вывода. Мы предлагаем SAGE — облегченный метод, который разбивает трассировку ввода-вывода на короткие окна и изучает на их основе алфавит. След затем становится последовательностью символов, которую мы называем «геномом», и используем кластеризацию, чтобы разделить их на классы. Мы оцениваем SAGE и его двухэтапный вариант SAGE-2 на 819 771 реальной трассировке от 2 систем HPC. Мы сравниваем их с другими современными методами по трем показателям, включая тот, который мы предлагаем. По сравнению с K-образной формой, лучшим из доступных базовых показателей, SAGE-2 снижает средние внутрикластерные показатели в среднем на 9.1% и достигает этого за 2 минуты кластеризации по сравнению с 3,8 часами, что является ускорением 109x. Что еще более важно, кластеры, созданные SAGE и SAGE-2, несут достаточно информации для принятия мер: мы оцениваем использование центроидов кластера для планирования ввода-вывода и показываем, что наш подход может уменьшить растяжение ввода-вывода вплоть до 24% по сравнению с современным уровнем техники (размещение по циклическому принципу).
## В чем суть открытия
Почему суперкомпьютеры стоимостью в несколько миллионов долларов тормозят при передаче данных, когда мы можем превратить шумные потоки ввода-вывода в простые алфавиты для ускорения работы с помощью 109x?
## Как это устроено: принцип работы
SAGE разрезает необработанные временные ряды на окна по 5 выборок, выполняет z-нормализацию различий для обнаружения шаблонов формы (букв) и кластеризует необработанную полосу пропускания для назначения уровней амплитуды (числа). Следы преобразуются в последовательности символов («геномы»), преобразованные до длины L, которые группируются с помощью представления вектора сходства и двухэтапной группировки «форма-затем-амплитуда» (SAGE-2).
## Что это меняет на практике
Позволяет планировщикам заданий HPC динамически размещать задания в параллельных файловых системах OST без предварительного предположения о периодичности заданий, сокращая время простоя вычислительных узлов и потери энергии, вызванные конфликтами ввода-вывода в производственных суперкомпьютерных центрах.
## Границы метода и риски
Повторная выборка до фиксированной длины генома L может маскировать высокочастотные периодические паттерны ввода-вывода (требующие комбинации с FTIO); полагается на исторические трассировки выполнения заданий; Настройка гиперпараметров (W, L) может потребоваться при переносе между различными топологиями хранения.
## Результаты и доказательства
- **Комплексный скор значимости:** 9.6 / 10.0
- **Уровень доказательности:** Теоретическое обоснование
- **Реализация в открытом доступе:** Да (верифицируемый репозиторий кода)
quantum_physics · 2026-11-18
Аннотация: Современная цифровая инфраструктура сталкивается с системным комплексным кризисом по трем фундаментальным векторам: вероятностная ловушка ИИ (стохастические модели с галлюцинациями и катастрофическим потреблением энергии), уязвим
ai_frontier · 2026-11-18
Abstract Background Children with cerebral palsy (CP) exhibit substantially elevated energetic costs of walking, yet the biomechanical origins of this excessive cost remain unclear, limiting the effectiveness of current interventions. Metho
ai_frontier · 2026-11-18
Детекторы Шиллинга для рекомендательных систем почти всегда оцениваются по одному числу — обнаружению AUROC, без учета того, когда ему можно доверять. Мы проверяем обнаружение пространства представления с помощью VEIL (Вариационная оценка п
brain_bci · 2026-11-18
Монреальская когнитивная оценка (MoCA) широко используется в исследованиях болезни Паркинсона (БП) для измерения когнитивных функций, но опубликованные пороговые значения для легких когнитивных нарушений (PD-MCI) и деменции (PDD) различаютс
brain_bci · 2026-11-18
Компьютеризированная когнитивная тренировка (CCT) направлена на смягчение снижения когнитивных функций при субъективном снижении когнитивных функций (SCD) и легких когнитивных нарушениях (MCI). Однако соблюдение требований и долгосрочное
brain_bci · 2026-11-18
Изучить этническое неравенство в результатах найма и представительстве рабочей силы среди медсестер и акушерок в разных диапазонах оплаты, а также оценить, могут ли регулярно собираемые административные данные генерировать воспроизводимые п
biomedicine_health · 2026-11-18
Это обновление ранее опубликованного обзора. Женщины с бесплодием могут использовать дополнительные методы лечения для улучшения репродуктивных результатов. Мио-инозитол и D-хиро-инозитол — это широко доступные пищевые добавки, которые обыч
biomedicine_health · 2026-11-18
Имеглимин — противодиабетический препарат на основе метформина, который улучшает гликемию за счет оптимизации функции митохондрий. Данные свидетельствуют о том, что он повышает эффективность митохондрий и сохраняет массу β-клеток поджелудоч
brain_bci · 2026-11-18
Несмотря на наблюдаемые преимущества современных методов лечения, у людей, живущих со спинальной мышечной атрофией (СМА), сохраняются некоторые тяжелые симптомы. Усталость постоянно указывается сообществом СМА как главная неудовлетворенная
biomedicine_health · 2026-11-18
In reproductive-aged women with polycystic ovary syndrome, overweight or obesity exacerbates metabolic and reproductive risks; lifestyle interventions and metformin have limited weight-loss effects, and more effective pharmacological weight
biotech_bioengineering · 2026-11-18
Геномный отбор стал мощным инструментом для ускорения генетического улучшения в селекции животных, однако его более широкое применение часто ограничивается высокими затратами на генотипирование и снижением надежности прогнозирования среди п
biotech_bioengineering · 2026-11-18
Osteoglossidae, одна из самых древних пресноводных рыб, демонстрирующая трансконтинентальную дизъюнкцию, дает важную информацию о ранней эволюции костистых рыб и исторической биогеографии. Используя интегрированные стратегии секвенирования,
biotech_bioengineering · 2026-11-18
Фертильность молока сильно влияет на устойчивость фермы, поскольку молодых коров приходится выращивать в течение многих месяцев, прежде чем они начнут давать молоко. Возраст начала обслуживания (AFS) является ключевым фактором репродуктивно
biomedicine_health · 2026-11-18
Понимание движущих сил, лежащих в основе половых различий в продолжительности жизни, может дать ценную информацию об эволюции продолжительности жизни в целом. Однако сравнительные исследования, выявляющие эти факторы у беспозвоночных, остаю
ai_frontier · 2026-11-18
Травматическая оптическая нейропатия (ТОН) является основной причиной необратимой потери зрения после тупой черепно-мозговой травмы, однако отсутствие клинически значимых моделей на крупных животных, которые точно повторяют человеческий ТОН