Papiers de recherche IA et signaux techniques depuis arXiv selectionnes par ChAIcked.
Une étude propose une stratégie inspirée par l'informatique quantique utilisant un mélange d'experts pour la classification d'images, en contraste avec les CNN classiques qui utilisent l'échantillonnage par diffusion et le pooling par blocs.
Blog · Computer Vision · Neural Networks · Recherche · — Ouvrir l’article
Une étude remet en question la pratique courante d'utiliser des MLP simples comme encodeurs tabulaires dans les systèmes multimodaux, en évaluant des modèles tabulaires de pointe comme alternatives plus robustes.
Blog · Multimodal Learning · Tabular Data · Recherche · — Ouvrir l’article
Explique la prévalence des valeurs propres du Hessien quasi-nulles dans les paysages de perte des réseaux de neurones par les symétries continues approximatives, offrant un aperçu de la géométrie locale.
Blog · Theory · Optimization · Recherche · — Ouvrir l’article
Une nouvelle méthode utilise les grands modèles de langage pour générer des améliorations de réseaux de neurones en limitant la génération à des architectures de même famille, séparant les effets d'apprentissage par transfert de l'adaptation.
Blog · Models · Architecture Search · Développement · — Ouvrir l’article
FourTune introduit une approche de quantification 4-bit complète pour l'entraînement des modèles de diffusion, réduisant les besoins en mémoire et le temps d'entraînement pour rendre le fine-tuning plus pratique.
Blog · Models · Optimisation · Fine-Tuning · — Ouvrir l’article
Des chercheurs appliquent des codes bicyclettes bivariés pour réduire le surcoût d'erreur dans les réseaux de neurones convolutifs quantiques, permettant une exécution pratique sur les appareils quantiques actuels.
Blog · Models · Quantum Computing · Optimisation · — Ouvrir l’article
Un réseau de neurones tri-branche efficace en paramètres combine des réseaux de neurones graphiques, des réseaux profonds et des plongements SMILES pour une prédiction plus précise des propriétés moléculaires.
Blog · Models · Data · Développement · — Ouvrir l’article
Une nouvelle stratégie de défense contre l'empoisonnement des données exploite l'observation que les modèles apprennent les échantillons empoisonnés plus facilement que les échantillons bénins, utilisant des seuils de perte d'entraînement.
Blog · Models · Sécurité · Développement · — Ouvrir l’article
La recherche applique des techniques économétriques comme la correction de Heckman pour traiter la sélection sur les variables inobservables dans les données d'entraînement, résolvant les limitations des approches standard.
Blog · Data · Développement · Méthodologie · — Ouvrir l’article