À propos du poste
Dans ce poste de contractant à distance rémunéré à l'heure, vous travaillerez en tant qu'expert en la matière (SME) en finance et comptabilité pour créer des tâches professionnelles réalistes, évaluer le travail financier généré par l'IA et concevoir des grilles d'évaluation détaillées définissant ce que doit contenir une réponse professionnelle de haute qualité.
Vous développerez des questions exigeantes et des livrables portant sur des domaines tels que l'analyse financière, la comptabilité, la finance d'entreprise, l'analyse d'investissement, l'évaluation, la modélisation financière, le reporting, l'audit, le risque ou des disciplines connexes. Vous évaluerez si les sorties de l'IA utilisent des hypothèses, des méthodologies, des calculs, un jugement professionnel et un raisonnement de soutien appropriés.
Un axe majeur de ce poste est la conception de grilles d'évaluation et la rédaction d'évaluations. Vous traduirez le jugement professionnel en finance et comptabilité en critères structurés couvrant l'exactitude, la méthodologie, l'exhaustivité, l'importance relative, les hypothèses, les calculs, les considérations de risque et la qualité du raisonnement. Vous pourrez également critiquer et améliorer les grilles d'évaluation élaborées par d'autres experts.
Ce poste s'inscrit chez SME Careers, une entreprise de services de données pour l'IA en forte croissance et filiale de SuperAnnotate, qui fournit des données d'entraînement à bon nombre des plus grandes entreprises d'IA et laboratoires de modèles de fondation au monde. Votre expertise contribue directement à améliorer les principaux modèles d'IA mondiaux en rendant les sorties financières plus exactes, rigoureuses et utiles sur le plan professionnel.
Ce que vous ferez
- Créer des tâches financières professionnelles : élaborer des problèmes exigeants en finance, comptabilité, évaluation, investissement, audit ou analyse.
- Concevoir des grilles d'évaluation : définir les calculs, les hypothèses, le raisonnement et les considérations professionnelles attendus dans des réponses solides.
- Évaluer les sorties financières : examiner les analyses générées par l'IA sous l'angle de l'exactitude, de la méthodologie, de la logique et de l'exhaustivité.
- Apprécier le jugement professionnel : déterminer si les hypothèses et les conclusions sont raisonnables et suffisamment étayées.
- Identifier les erreurs significatives : détecter les calculs incorrects, le traitement comptable, la logique d'évaluation, l'interprétation financière ou l'analyse de risque erronés.
- Critiquer les grilles d'évaluation des pairs : examiner les critères pour l'ambiguïté, les composantes manquantes, la duplication, la subjectivité excessive ou les erreurs techniques.
- Élaborer du contenu de référence : produire des analyses, des solutions, des critiques et des explications de haute qualité.
- Soutenir l'entraînement de l'IA : générer des tâches, des grilles d'évaluation, des évaluations, des préférences et des paires réponse de référence adaptées au RL et au SFT.
- Maintenir les normes professionnelles : veiller à ce que les sorties reflètent les conventions et la terminologie appropriées en finance et comptabilité.
Ce que nous recherchons
- Licence ou diplôme supérieur en finance, comptabilité, économie, commerce, mathématiques appliquées ou une discipline connexe.
- Des certifications professionnelles pertinentes telles que CPA, CFA, ACCA, ACA, CMA, FRM ou équivalent sont fortement préférées le cas échéant.
- Solide maîtrise professionnelle de l'anglais, minimum C1.
- 3+ ans d'expérience professionnelle en finance, comptabilité, analyse d'investissement, finance d'entreprise, reporting financier, audit, conseil, risque ou un domaine connexe.
- Solide connaissance des méthodologies, calculs, hypothèses et normes analytiques professionnels pertinents pour votre spécialité.
- Capacité à créer des tâches financières ou comptables professionnelles réalistes exigeant du jugement plutôt qu'une simple restitution factuelle.
- Forte capacité à concevoir des grilles d'évaluation détaillées couvrant l'exactitude, la méthodologie, les hypothèses, l'exhaustivité, l'importance relative, la qualité du raisonnement et la présentation professionnelle.
- Capacité à distinguer les erreurs de calcul, les erreurs méthodologiques, les hypothèses non étayées et les différences professionnelles raisonnables.
- À l'aise pour critiquer des grilles d'évaluation créées par d'autres experts en finance ou comptabilité.
- Grand souci du détail lors de l'examen de l'exactitude numérique, de la logique financière, de la terminologie, des hypothèses, des rapprochements et des conclusions.
- Une expérience en entraînement, en rédaction d'examens, en revue d'audit, en revue de comité d'investissement, en assurance qualité financière, en revue de recherche ou en évaluation professionnelle est fortement préférée.
- Une expérience préalable en évaluation d'IA, en benchmarking de modèles, en annotation, en RLHF ou en notation fondée sur des grilles d'évaluation est préférée.