DeepSeek disponibiliza código-fonte aberto do TileKernels, biblioteca de kernels de GPU para treinamento e inferência de modelos em larga escala

Mensagem do Gate News, 23 de abril — A DeepSeek disponibilizou o código-fonte aberto do TileKernels sob a licença MIT, uma biblioteca de kernels de GPU escrita em TileLang para treinamento e inferência de modelos de linguagem em larga escala. O TileLang é uma linguagem de domínio desenvolvida pela equipe tile-ai para expressar kernels de GPU de alto desempenho em Python. A DeepSeek afirmou que a maioria dos kernels da biblioteca já se aproximou dos limites de desempenho do hardware em densidade de computação e largura de banda de memória, com partes já implantadas em operações internas de treinamento e inferência.

A biblioteca compreende seis categorias de kernels: MoE (mistura de especialistas) com gating e roteamento, incluindo seleção de especialistas Top-k, mapeamento de token para especialista e expandir/reduzir fundidos com normalização de pesos; quantização que suporta formatos FP8, FP4 e E5M6 com quantização por token, por bloco e por canal, incluindo operações fundidas de SwiGLU+quantização; transposição em lote; gating Engram com propagação direta/reversa de RMSNorm fundida e redução de gradiente de pesos; Manifold HyperConnection com normalização Sinkhorn e split/aplicar mistos; e interfaces de autograd de alto nível que encapsulam kernels de baixo nível em camadas treináveis.

Engram e Manifold HyperConnection são componentes proprietários da arquitetura do modelo da DeepSeek, com detalhes de implementação divulgados publicamente pela primeira vez. A biblioteca exige GPUs das arquiteturas NVIDIA SM90 ou SM100 (H100/H200 ou série Blackwell), CUDA Toolkit 13.1 ou superior, e PyTorch 2.10 ou superior.

Aviso: As informações nesta página podem ser provenientes de terceiros e não representam as opiniões ou pontos de vista da Gate. O conteúdo exibido nesta página é apenas para referência e não constitui aconselhamento financeiro, de investimento ou jurídico. A Gate não garante a exatidão ou integridade das informações e não será responsável por quaisquer perdas decorrentes do uso dessas informações. Os investimentos em ativos virtuais apresentam altos riscos e estão sujeitos a uma volatilidade de preços significativa. Você pode perder todo o capital investido. Por favor, compreenda completamente os riscos envolvidos e tome decisões prudentes com base em sua própria situação financeira e tolerância ao risco. Para mais detalhes, consulte o Aviso Legal.

Related Articles

Morpho Association vai executar uma série de transferências de carteira nas próximas semanas para gestão de fundos

Mensagem da Gate News, 23 de abril — A Morpho Association realizará uma série de transferências de sua carteira de propriedade da associação nas próximas semanas como parte de operações rotineiras de gestão de fundos.

GateNews23m atrás

JPMorgan: Incidentes de Segurança em DeFi e Estagnação do TVL Reduzem Adoção Institucional

Mensagem do Gate News, 23 de abril — analistas do JPMorgan destacaram que incidentes recorrentes de segurança em DeFi e a estagnação do valor total bloqueado (TVL) em termos de ETH continuam a limitar o interesse institucional em finanças descentralizadas, segundo a The Block. O relatório do banco apontou para um ataque recente envolvendo ponte entre cadeias, com participação da Kelp DAO, que resultou em aproximadamente bilhão em evaporação de TVL ao longo de vários dias. Os atacantes cunharam cerca de milhão em rsETH sem garantia e, em seguida, usaram isso como colateral no Aave para tomar emprestado ETH real, criando aproximadamente milhão em dívida ruim. Após o incidente de segurança, os usuários migraram para o USDT da Tether como ativo de refúgio.

GateNews29m atrás

ENS Anuncia o ENSv2, Nova Infraestrutura de Domínios para Integração em Larga Escala e Expansão de Subdomínios

Mensagem do Gate News, 23 de abril — A ENS anunciou o lançamento iminente do ENSv2, uma nova infraestrutura de domínios projetada para integração em larga escala e expansão de subdomínios. O sistema aprimorado representa a próxima geração da arquitetura de nomenclatura de domínios da ENS, criada para apoiar adoção mais ampla e escalabilidade aprimorada em todo o ecossistema.

GateNews40m atrás

MoonPay Lança Contas Virtuais com Iron em Nova York, Habilitando Pagamentos Regulatórios de Stablecoin para Empresas

Mensagem do Gate News, 23 de abril — A MoonPay anunciou o lançamento de Contas Virtuais alimentadas pela tecnologia Iron no estado de Nova York, fornecendo infraestrutura de pagamentos regulamentados de fiat para stablecoin para empresas de fintech, plataformas cripto, neobanks, corretoras e instituições financeiras. O serviço habilita

GateNews1h atrás

Cofundador do MetaMask, Dan Finlay, deixa a Consensys após 10 anos, citando burnout

Mensagem do Gate News, 23 de abril — Dan Finlay, cofundador e desenvolvedor de longa data do MetaMask, anunciou na quarta-feira que está deixando a Consensys, citando esgotamento após uma década construindo a carteira cripto. Finlay disse que planeja passar um tempo com sua família e desejou ao time bem em seu caminho futuro. Eu

GateNews1h atrás

Aurise Foundation lança token de rendimento de ouro XAUE com $76M reserva inicial

Mensagem do Gate News, 23 de abril — A Aurise Foundation anunciou o lançamento do XAUE, um token de rendimento de ouro baseado em Ethereum, posicionado como uma camada de cofre para o Tether Gold (XAUT). Parceiros do ecossistema Aurelion e Antalpha contribuíram conjuntamente com 16.052 XAU, no valor de aproximadamente $76 milhões, como a reserva inicial. XAUE

GateNews2h atrás
Comentário
0/400
Sem comentários