Skip to content

Chercheur Stagiaire - Architecture Efficace pour LLMs

    • Montréal , Québec
  • f5rmc

Description de l'offre d'emploi

Huawei Canada a une ouverture de stage immédiate pour un chercheur.

À propos de l'équipe :

Fondé en 2012, le laboratoire Noah's Ark est devenu une organisation de recherche de premier plan avec des réalisations notables dans le milieu universitaire et industriel. La mission du laboratoire est de faire progresser l'intelligence artificielle et les domaines connexes pour le bénéfice de l'entreprise et de la société. Animé par des projets impactants à long terme, l'objectif est d'améliorer la recherche de pointe tout en intégrant des innovations dans les produits et services de l'entreprise, y compris les LLM, RL, NLP, la vision par ordinateur, la théorie de l'IA et la conduite autonome.

À propos du poste :

  • Aider à proposer et explorer de nouvelles idées de recherche pour améliorer l'efficacité et la scalabilité des grands modèles de langage.

  • Participer à des projets de recherche appliquée axés sur la possibilité de longs contextes LLMs, y compris le travail sur les architectures efficaces, la curation des données et les méthodes post-formation.

  • Collaborer sur des projets de bout en bout en concevant et en réalisant des expériences, en analysant les résultats et en présentant les conclusions.

  • Publier des recherches dans des conférences de premier plan sur l'apprentissage automatique et le traitement automatique du langage naturel (NLP).

  • Suivre les avancées dans l'écosystème LLM et IA, traduisant les nouveaux développements en insights exploitables pour l'équipe.

Pré-requis du poste

Profil du candidat idéal :

  • Actuellement en doctorat ou en master en informatique, génie logiciel ou dans un domaine connexe.

  • Une compréhension approfondie des fondamentaux du NLP et des grands modèles de langage (LLM) et des méthodes de pointe, associée à une solide base théorique en apprentissage automatique.

  • Expertise dans les architectures modernes de LLM, y compris les modèles transformateurs (par ex. Llama, Qwen) et une bonne connaissance des modèles à attention linéaire (par ex. GDN, Mamba, GLA).

  • Solides compétences en programmation en Python avec une expertise en PyTorch. Expérience dans la formation et l'évaluation des LLMs.

  • La familiarité avec les modèles de diffusion est un atout.

  • Excellentes compétences en communication orale et écrite. Capacité à travailler dans un environnement de recherche collaboratif.

Huawei vise à soutenir un environnement de travail francophone pour ses employés au Québec. Nous avons pris des mesures pour éviter de demander une autre langue que le français pour ce poste. Cependant, la maîtrise de l'anglais est essentielle pour ce rôle pour les raisons suivantes :

La personne devra communiquer régulièrement avec des collègues situés en dehors du Québec, où l'anglais est la langue principale utilisée pour la communication entre les bureaux. De plus, la nature des tâches liées à ce poste, qui relève d'un domaine hautement spécialisé de l'intelligence artificielle, nécessite également une connaissance de l'anglais.

ou