Оригинал ↗

🔥 deepseek v4.1-flash — вылетел и сразу в опенсорс новый флагман от китайцев, заточен ровно под то, что сейчас нужнее всего: агентные нагрузки и длинные контексты • MoE, 552B параметров суммарно, но активны всего 8B на префилле и 16B на декоде — инференс дешёвый • контекст до 1 000 000 токенов • нативно видит картинки: свой vision-энкодер deepseek-vit, обучен с нуля • новая causal encoder-decoder архитектура: 20 слоёв энкодера + 20 декодера главный прикол — эффективность. kv-кэш на токен ужали до 890 байт: это в 4 раза меньше, чем у v4-flash, и в 437 раз меньше первого поколения. добились связкой compressed sparse attention 2 + swa bounded replay + fp4-кэширование для агентных пайплайнов с тяжёлым входным контекстом это очень серьёзная экономия на инференсе и да, чисто в теории запускается дома: видяшка на 12gb vram + ~100gb системной ram — и погнали))) веса: huggingface.co/deepseek-ai/DeepSeek-V4.1-Flash 🚀 umaai.site/computer 👾 Друг Опенсурса

Оригинал: https://t.me/tch_net/777
#ai#source#subscriber

← к ленте