NVIDIA L40S
vs
NVIDIA L20

vs
Сравнение видеокарт NVIDIA L40S vs NVIDIA L20

Результат сравнения видеокарт

NVIDIA L40S vs NVIDIA L20: одинаковая память, разная производительность

NVIDIA L40S и L20 построены на архитектуре Ada Lovelace и оснащены 48 ГБ памяти GDDR6 с ECC. У них одинаковая 384-битная шина, пропускная способность 864 ГБ/с и интерфейс PCIe 4.0 x16. По этим характеристикам модели выглядят близкими, но L40S относится к заметно более высокому классу.

Она получила больше CUDA-, Tensor- и RT-ядер, поэтому лучше подходит для генеративного ИИ, нагруженного инференса, рендеринга и виртуальных рабочих станций. L20 сохраняет большой объём памяти, но существенно уступает по вычислительной скорости.

Основные различия

Характеристика NVIDIA L40S NVIDIA L20
Архитектура Ada Lovelace Ada Lovelace
CUDA-ядер 18 176 11 776
Tensor-ядер 568 368
RT-ядер 142 92
Производительность FP32 91,6 TFLOPS около 59,3 TFLOPS
Память 48 ГБ GDDR6 ECC 48 ГБ GDDR6 ECC
Пропускная способность памяти 864 ГБ/с 864 ГБ/с
Интерфейс PCIe 4.0 x16 PCIe 4.0 x16
Максимальная мощность 350 Вт около 300 Вт
Охлаждение пассивное пассивное

L40S содержит примерно на 54% больше CUDA-ядер. Сопоставимый перевес наблюдается в вычислениях FP32, а в тензорных операциях разрыв может быть ещё больше.

Что дают 48 ГБ памяти

Главное преимущество L20 - тот же объём видеопамяти, что и у L40S. Это позволяет загружать крупные языковые модели, сложные сцены, объёмные наборы данных и несколько виртуальных рабочих столов.

Но объём памяти определяет прежде всего, поместится ли задача на ускорителе. Скорость её выполнения зависит от вычислительных блоков и тензорной производительности.

Обе карты могут запустить одну и ту же модель, но L40S быстрее обрабатывает запросы, поддерживает больший поток пользователей и требует меньше времени для обучения или дообучения. Одинаковая пропускная способность памяти не компенсирует разницу в мощности GPU.

Искусственный интеллект

L40S рассчитана на смешанные серверные нагрузки: инференс, обучение нейросетей, генеративный ИИ, видеообработку и профессиональную визуализацию. Она поддерживает Tensor-ядра четвёртого поколения, FP8 и Transformer Engine.

L20 разумнее использовать в более умеренных сценариях:

  • инференс с небольшим числом одновременных запросов;
  • запуск моделей, которым требуется до 48 ГБ памяти;
  • периодическое дообучение;
  • серверы с ограниченным энергопотреблением.

В постоянно загруженном сервисе преимущество L40S становится особенно заметным: один ускоритель способен обслуживать больше запросов без увеличения числа карт.

Рендеринг и виртуальные рабочие станции

L40S оснащена 142 RT-ядрами против 92 у L20. Это делает её предпочтительнее для трассировки лучей, фотореалистичного рендеринга, цифровых двойников и сложных сцен в NVIDIA Omniverse.

Дополнительные CUDA-ядра ускоряют симуляцию, обработку геометрии и вычислительные этапы рендера. Обе модели также подходят для удалённых инженерных, дизайнерских и медиапроизводственных рабочих станций.

L40S и L20 используют пассивное охлаждение, поэтому им требуется серверный корпус с направленным воздушным потоком. Для обычного настольного компьютера без специально организованного охлаждения такие карты не рассчитаны.

Энергопотребление и масштабирование

Максимальная мощность L40S достигает 350 Вт, тогда как L20 потребляет около 300 Вт. В многокарточном сервере разница влияет на блоки питания, охлаждение и плотность размещения оборудования.

При этом L40S потребляет больше, но обеспечивает заметно более высокую производительность на один установленный ускоритель.

Обе модели работают через PCIe и не поддерживают объединение памяти через NVLink. В системах с несколькими GPU результат поэтому зависит от топологии PCIe, процессорной платформы и программной оптимизации.

Что выбрать

NVIDIA L40S стоит выбирать, если ускоритель будет постоянно использоваться для генеративного ИИ, высоконагруженного инференса, обучения моделей, рендеринга или нескольких виртуальных рабочих станций. Она существенно быстрее и обеспечивает больше производительности на один слот сервера.

NVIDIA L20 стоит рассматривать, когда важны 48 ГБ памяти, но максимальная скорость не требуется. Она подходит для умеренного инференса, графической виртуализации, обработки видео и профессиональной визуализации.

L20 нельзя считать прямым аналогом L40S. Она сохраняет тот же объём памяти и пропускную способность, но относится к более низкому классу вычислительной производительности. Для умеренных нагрузок этого достаточно, а для постоянно загруженных систем L40S заметно предпочтительнее.

Преимущества

  • Больше Блоки шейдинга: 18176 (18176 vs 11776)
  • Новее Дата выпуска: November 2023 (October 2022 vs November 2023)

Общая информация

NVIDIA
Производитель
NVIDIA
October 2022
Дата выпуска
November 2023
Desktop
Платформа
Desktop
L40S
Название модели
L20
Tesla Ada
Поколение
Tesla Ada
1110MHz
Базоввая частота
1440MHz
2520MHz
Boost Частота
2520MHz
PCIe 4.0 x16
Интерфейс шины
PCIe 4.0 x16
76,300 million
Транзисторы
76,300 million
142
RT ядра
92
568
Tensor ядра
?
Тензорные ядра — это специализированные процессоры, разработанные специально для глубокого обучения, обеспечивающие более высокую производительность обучения и вывода по сравнению с обучением FP32. Они позволяют выполнять быстрые вычисления в таких областях, как компьютерное зрение, обработка естественного языка, распознавание речи, преобразование текста в речь и персонализированные рекомендации. Два наиболее заметных применения тензорных ядер — это DLSS (Deep Learning Super Sampling) и AI Denoiser для снижения шума.
368
568
TMU
?
Блоки наложения текстур (TMU) служат компонентами графического процессора, которые способны вращать, масштабировать и искажать двоичные изображения, а затем размещать их в виде текстур на любой плоскости заданной трехмерной модели. Этот процесс называется отображением текстур.
368
TSMC
Производитель
TSMC
5 nm
Размер процесса
5 nm
Ada Lovelace
Архитектура
Ada Lovelace

Характеристики памяти

48GB
Объем памяти
48GB
GDDR6
Тип памяти
GDDR6
384bit
Шина памяти
?
Ширина шины памяти обозначает количество бит данных, которые видеопамять может передать за один такт. Чем больше ширина шины, тем больший объем данных может быть передан мгновенно, что делает ее одним из важнейших параметров видеопамяти. Пропускная способность памяти рассчитывается как: Пропускная способность памяти = Частота памяти x Ширина шины памяти / 8. Следовательно, если частоты памяти одинаковы, ширина шины памяти будет определять размер пропускной способности памяти.
384bit
2250MHz
Частота памяти
2250MHz
864.0 GB/s
Пропускная способность
?
Пропускная способность памяти — это скорость передачи данных между графическим чипом и видеопамятью. Он измеряется в байтах в секунду, и формула для его расчета: пропускная способность памяти = рабочая частота × ширина шины памяти / 8 бит.
864.0 GB/s

Дисплей и мультимедиа

1x HDMI 2.1
3x DisplayPort 1.4a
Выходы
4x DisplayPort 1.4a

Теоретическая производительность

483.8 GPixel/s
Пиксельный филлрейт
?
Скорость заполнения пикселей — это количество пикселей, которые графический процессор (GPU) может визуализировать в секунду, измеряется в мегапикселях/с (миллион пикселей в секунду) или GPixels/s (миллиард пикселей в секунду). Это наиболее часто используемый показатель для оценки производительности обработки пикселей видеокарты.
322.6 GPixel/s
1431 GTexel/s
Текстурный филлрейт
?
Скорость заполнения текстуры — это количество элементов карты текстур (текселей), которые графический процессор может сопоставить с пикселями за одну секунду.
927.4 GTexel/s
91.61 TFLOPS
FP16 (half)
?
Важным показателем для измерения производительности графического процессора являются возможности вычислений с плавающей запятой. Числа с плавающей запятой половинной точности (16 бит) используются в таких приложениях, как машинное обучение, где допустима более низкая точность. Числа с плавающей запятой одинарной точности (32-битные) используются для обычных задач обработки мультимедиа и графики, а числа с плавающей запятой двойной точности (64-битные) необходимы для научных вычислений, требующих широкого числового диапазона и высокой точности.
59.35 TFLOPS
1431 GFLOPS
FP64 (double)
?
Важным показателем для измерения производительности графического процессора являются возможности вычислений с плавающей запятой. Числа с плавающей запятой двойной точности (64-битные) необходимы для научных вычислений, требующих широкого числового диапазона и высокой точности, а числа с плавающей запятой одинарной точности (32-битные) используются для обычных задач обработки мультимедиа и графики. Числа с плавающей запятой половинной точности (16 бит) используются в таких приложениях, как машинное обучение, где допустима более низкая точность.
927.4 GFLOPS
89.778 TFLOPS
FP32 (float)
?
Важным показателем для измерения производительности графического процессора являются возможности вычислений с плавающей запятой. Числа с плавающей запятой одинарной точности (32-битные) используются для обычных задач обработки мультимедиа и графики, а числа с плавающей запятой двойной точности (64-битные) необходимы для научных вычислений, требующих широкого числового диапазона и высокой точности. Числа с плавающей запятой половинной точности (16 бит) используются в таких приложениях, как машинное обучение, где допустима более низкая точность.
59.35 TFLOPS

Другое

142
Потоковый мультипроцессор (SM)
?
Несколько потоковых процессоров (SP) вместе с другими ресурсами образуют потоковый мультипроцессор (SM), который также называется основным ядром графического процессора. Эти дополнительные ресурсы включают в себя такие компоненты, как планировщики деформации, регистры и общую память. SM можно считать сердцем графического процессора, аналогично ядру ЦП, при этом регистры и общая память являются дефицитными ресурсами внутри SM.
92
18176
Блоки шейдинга
?
Самым фундаментальным процессором является потоковый процессор (SP), в котором выполняются определенные инструкции и задачи. Графические процессоры выполняют параллельные вычисления, что означает, что несколько процессоров SP работают одновременно для обработки задач.
11776
128 KB (per SM)
Кэш L1
128 KB (per SM)
48MB
Кэш L2
96MB
300W
TDP
275W
1.3
Версия Vulkan
?
Vulkan — это кроссплатформенный графический и вычислительный API от Khronos Group, предлагающий высокую производительность и низкую нагрузку на процессор. Он позволяет разработчикам напрямую управлять графическим процессором, снижает затраты на рендеринг и поддерживает многопоточные и многоядерные процессоры.
1.3
3.0
Версия OpenCL
3.0
4.6
OpenGL
4.6
8.9
CUDA
8.9
12 Ultimate (12_2)
DirectX
12 Ultimate (12_2)
1x 16-pin
Разъемы питания
1x 16-pin
192
ROP
?
Конвейер растровых операций (ROP) в первую очередь отвечает за расчеты освещения и отражений в играх, а также за управление такими эффектами, как сглаживание (AA), высокое разрешение, дым и огонь. Чем более требовательны к сглаживанию и световым эффектам в игре, тем выше требования к производительности для ROP; в противном случае это может привести к резкому падению частоты кадров.
128
6.7
Шейдерная модель
6.7
700W
Требуемый блок питания
600W

Бенчмарки

FP32 (float) / TFLOPS
L40S
89.778 +51%
L20
59.35
OpenCL
L40S
362331 +38%
L20
262467