Primary competition visual

Compétition sur les Large Language Models (LLMs) pour le droit OHADA

Helping Cameroon
220 000 XAF
Completed (over 1 year ago)
Generative AI
Natural Language Processing
Questioning and Answering
59 joined
10 active
Starti
Apr 07, 24
Closei
May 31, 24
Reveali
May 10, 24
Large Language Model Challenge on OHADA Law

L'Organisation pour l'Harmonisation en Afrique du Droit des Affaires (OHADA) est un cadre juridique essentiel adopté par 17 pays d'Afrique de l'Ouest et du Centre depuis 1993, visant à promouvoir le développement économique et à attirer les investissements en harmonisant les lois commerciales. Originaire de Maurice et plus tard révisée au Québec, Canada, l'OHADA inclut des pays qui sont largement d'anciennes colonies françaises, utilisant un modèle juridique français modernisé pour simplifier et améliorer le climat d'investissement dans une région comptant un marché de 225 millions de consommateurs. L'initiative aborde les défis persistants de la croissance économique en Afrique subsaharienne en fournissant un ensemble unifié de lois commerciales, connues sous le nom d'Actes Uniformes, couvrant divers aspects des opérations commerciales.

L'OHADA a été établie dans un contexte de crise économique aiguë et de chute drastique des niveaux d'investissement en Afrique, avec l'insécurité juridique et judiciaire identifiée comme une cause majeure de méfiance des investisseurs. L'obsolescence, la disparité et l'inaccessibilité des règles régissant les opérations économiques ont généré une insécurité juridique, conduisant à une incertitude quant à la règle applicable, tandis que le dénuement des tribunaux, l'insuffisance du personnel judiciaire, le manque de formation en droit économique pour un tel personnel, les retards judiciaires et les problèmes éthiques constituaient la base de l'insécurité judiciaire, entraînant une certaine imprévisibilité des décisions judiciaires. Pour y remédier, la mission de l'OHADA était de rationaliser l'environnement juridique des entreprises afin d'assurer la sécurité juridique et judiciaire des activités économiques, dans le but de stimuler les investissements et de créer un nouveau pôle de développement en Afrique. Pour atteindre ces objectifs, l'OHADA s'est engagée à:

  • Développer un droit des affaires simple, moderne, harmonisé et adapté pour ses États membres afin de faciliter les activités commerciales ; ce droit commun est contenu dans les Actes Uniformes qui, une fois adoptés, s'appliquent de manière identique dans tous les États membres. À ce jour, dix Actes Uniformes ont été adoptés ;
  • Veiller à ce que ce droit soit appliqué avec diligence, dans des conditions garantissant la sécurité juridique des activités économiques ; cet objectif est atteint en sécurisant la résolution judiciaire des litiges commerciaux et en promouvant les méthodes alternatives de résolution des conflits.

Le traité OHADA a contribué de manière significative à l'intégration juridique et à la facilitation des investissements dans ses États membres grâce à l'établissement d'une cour supranationale – la Cour Commune de Justice et d'Arbitrage – assurant l'uniformité et la cohérence dans les interprétations juridiques. Cette cour, influencée par les traditions juridiques françaises, joue un rôle crucial dans la résolution des litiges et favorise un environnement juridique fiable pour les investisseurs nationaux et étrangers. Source.

L'OHADA a déjà développé et mis en application 11 Actes Uniformes couvrant divers domaines de la vie économique : le droit commercial général, le droit des sociétés commerciales et des groupements d'intérêt économique, le droit des sociétés coopératives, le droit des sûretés, les procédures simplifiées de recouvrement de créances et des voies d'exécution, les procédures collectives d'apurement du passif, le droit comptable, le droit du transport de marchandises par route, le droit de l'arbitrage et le droit de la médiation.

Dans ce contexte, un challenge de LLM (Large Language Models) sur le jeu de données de l'OHADA (Organisation pour l'Harmonisation en Afrique du Droit des Affaires) peut contribuer de manière significative au paysage juridique et économique de la région pour plusieurs raisons clés:

  • l'amélioration de l'expertise juridique: En promouvant une compréhension plus profonde et une expertise dans les lois commerciales harmonisées parmi les érudits et praticiens juridiques. Cette expertise accrue peut conduire à des pratiques juridiques plus efficaces et contribuer à l'application uniforme des lois à travers les États membres.
  • Attraction des Investissements: L'OHADA vise à créer un climat d'investissement propice pour attirer à la fois des investissements nationaux et étrangers dans un vaste marché de 225 millions de consommateurs. Le Chatbot peut facilement mettre en évidence l'engagement de la région envers un environnement juridique stable et prévisible, encourageant ainsi davantage les investissements. Cela peut conduire à la proposition de solutions innovantes pour le développement continu et le raffinement des lois commerciales dans la région par l'exploration de défis juridiques contemporains et la formulation d'arguments juridiques avancés.
  • Uniformité et Intégration Juridique: Avec la création de la cour supranationale et l'adoption des Actes Uniformes, l'OHADA cherche à assurer l'uniformité juridique à travers ses États membres. Les concours peuvent servir de plateforme pour explorer des questions juridiques complexes, aidant ainsi à l'interprétation et à l'application cohérentes de ces lois via l'adoption d'une métrique idéale pour évaluer le Chatbot résultant. Soulignant l'importance d'un système juridique uniforme dans la création d'un climat d'investissement favorable et contribuant au développement économique global de l'Afrique de l'Ouest et du Centre.
  • Sécurité Juridique Mondiale: Une compréhension approfondie du paysage juridique de l'OHADA est une garantie claire pour les personnes et les entreprises.

Le challenge joue un rôle vital dans l'avancement de l'éducation juridique, la promotion de l'intégration juridique et économique, et contribuera à l'objectif global de favoriser le développement économique en Afrique de l'Ouest et du Centre.

Objectif de la compétition

L'objectif principal de ce concours est d'exploiter le potentiel des Large Language Models (LLMs) pour améliorer l'accessibilité et la compréhension des documents juridiques de l'OHADA, avec un accent particulier sur le développement d'une métrique appropriée pour l'évaluation des Risques, Ambiguïtés et Gouvernance (RAG). Ce défi vise à démystifier les textes juridiques de l'OHADA non seulement pour les praticiens du droit, mais aussi pour les cadres d'entreprises et le grand public à travers ses États membres. En participant, les participants joueront un rôle crucial dans l'élévation de la littératie juridique, en assurant la conformité et en facilitant la prise de décisions éclairées au sein de l'un des cadres juridiques clés de l'Afrique. Cette initiative cherche des solutions innovantes pour évaluer avec précision et communiquer les complexités des risques juridiques, des ambiguïtés et des problèmes de gouvernance, rendant ainsi le système juridique plus transparent et navigable pour toutes les parties prenantes impliquées.

The Organisation for the Harmonisation of Corporate Law in Africa (OHADA) is a vital legal framework adopted by 17 West and Central African countries since 1993, aimed at promoting economic development and attracting investments by harmonizing business laws. Originating in Mauritius and later revised in Quebec, Canada, OHADA includes countries that are largely former French colonies, utilizing a modernized French legal model to streamline and improve the investment climate in a region with a 225 million-consumer market. The initiative addresses the persistent economic growth challenges in sub-Saharan Africa by providing a unified set of business laws, known as Uniform Acts, covering various aspects of business operations.

OHADA was established in a context of acute economic crisis and a drastic fall in investment levels in Africa, with legal and judicial insecurity identified as a major cause of investor distrust. The obsolescence, disparity, and inaccessibility of the rules governing economic operations generated legal insecurity, leading to uncertainty about the applicable rule, while the deprivation of courts, the inadequacy of judicial personnel, the lack of economic law training for such personnel, judicial delays, and ethical issues constituted the basis of judicial insecurity, resulting in a certain unpredictability of judicial decisions. To address this, OHADA's mission was to rationalize the legal environment for businesses to ensure the legal and judicial security of economic activities, with the aim of stimulating investment and creating a new development hub in Africa. To achieve this, OHADA is committed to:

Developing a simple, modern, harmonized, and adapted business law for its member states to facilitate business activities; this common law is contained in Uniform Acts which, once adopted, apply identically across all member states. Ten Uniform Acts have been adopted to date;

Ensuring that this law is applied diligently, under conditions that guarantee the legal security of economic activities; this goal is achieved by securing the judicial resolution of business disputes and promoting alternative dispute resolution methods.

The OHADA treaty has significantly contributed to legal integration and investment facilitation in its member states through the establishment of a supranational court—the Common Court of Justice and Arbitration—ensuring uniformity and consistency in legal interpretations. This court, influenced by French legal traditions, plays a crucial role in resolving disputes and fostering a reliable legal environment for both domestic and foreign investors. Source.

OHADA has already developed and enforced 11 Uniform Acts covering various areas of economic life: general commercial law, law of commercial companies and economic interest groups, law of cooperative societies, securities law, simplified debt collection procedures and enforcement, collective insolvency proceedings, accounting law, road transport of goods law, arbitration law, and mediation law.

Given this context, an LLM (Large Langauge Models) competition on OHADA (Organisation for the Harmonisation of Corporate Law in Africa) dataset can significantly contribute to the region's legal and economic landscape for several key reasons:

  • Enhanced Legal Expertise: By promoting a deeper understanding and expertise in the harmonized business laws among legal scholars and practitioners. This increased expertise can lead to more efficient legal practices and contribute to the uniform application of laws across member states.
  • Investment Attraction: OHADA aims to create a conducive investment climate to attract both domestic and foreign investment in a vast market of 225 million consumers. The Chatbot can easily spotlight the region's commitment to a stable and predictable legal environment, further encouraging investment. It can lead to the proposal of innovative solutions for the ongoing development and refinement of business laws in the region via the exploration of contemporary legal challenges and the formulation of advanced legal arguments.
  • Legal Uniformity and Integration: With the creation of the supranational court and the adoption of Uniform Acts, OHADA seeks to ensure legal uniformity across its member states. The competitions can serve as a platform for exploring complex legal questions, thereby aiding in the consistent interpretation and application of these laws via adopting an ideal metric to evaluate the resulting Chatbot. Highlighting the importance of a uniform legal system in creating a favorable investment climate and contributing to the overall economic development of West and Central Africa.
  • Global legal security : A deep understanding of OHADA legal landscape is a clear guarantee for people and companies.

The competition will play a vital role in advancing legal education, promoting legal and economic integration, and contributing to the overall goal of fostering economic development in West and Central Africa.

Competition goal

The primary goal of this competition is to leverage the potential of Large Language Models (LLMs) to enhance the accessibility and comprehension of OHADA legal documents, with a specific focus on developing an appropriate metric for Risk, Ambiguity, and Governance (RAG) evaluation. This challenge aims to demystify OHADA's legal texts not just for legal practitioners, but also for business executives and the broader public across its member states. By taking part, participants will play a crucial role in elevating legal literacy, ensuring compliance, and facilitating informed decision-making within one of Africa's pivotal legal frameworks. This initiative seeks innovative solutions to accurately assess and communicate the complexities of legal risks, ambiguities, and governance issues, thereby making the legal system more transparent and navigable for all stakeholders involved.

About data354 (data354.com)

data354 is a consulting firm specializing in data analytics and AI solutions, a leader in its field in French-speaking Africa with an international presence. Its mission is to unleash the power of data through data-centric digitalization strategies and develop AI solutions associated with a deep understanding of local realities.

Data354 offers end-to-end support: Data & AI strategy consulting, Implementation of data, infrastructure and platforms, Development of intelligent solutions.

Évaluation

Pour cette compétition, nous avons établi un certain nombre de critères et de limitations pour vos soumissions. Veuillez lire attentivement les exigences suivantes :

  • Seuls les LLMs open-source sont autorisés, par exemple, LLama-2, Mistral-7B, Phi-2, etc.
  • ChatGPT n'est pas autorisé.
  • Le LLM formé devrait pouvoir fonctionner sur Google Colab, ou localement.
  • Les LLMs de petite taille sont préférés et doivent respecter les restrictions matérielles ci-dessous.
  • Vous êtes limités aux spécifications matérielles suivantes ou équivalentes : Processeur multicoeur (par exemple, Intel Core i7/i9, AMD Ryzen 7/9) pour un traitement efficace, ou le Google Colab gratuit.
  • Les LLMs et autres outils utilisés ne doivent pas avoir de problèmes de sécurité (connus). Si des problèmes de sécurité deviennent connus pendant le concours, ceux-ci doivent être résolus et communiqués aux organisateurs du concours.
  • Les LLMs et leur utilisation doivent disposer d'une documentation suffisante.
  • Les LLMs et autres outils doivent être activement maintenus.
  • Utilisez les ensembles de données fournies dans la formation et si vous utilisez d'autres ensembles de données, ceux-ci doivent être librement disponibles et documentés.
  • La solution doit utiliser uniquement des paquets open-source et disponibles publiquement.

Cette compétition sera évaluée en trois phases:

  • Phase 1: Soumission de modèle normal, notée avec la métrique d'erreur ROUGE-1-gramme (50%)

L'algorithme de notation Recall-Oriented Understudy for Gisting Evaluation (ROUGE) calcule la similarité entre un document candidat et une collection de documents de référence. Normalement, nous utilisons le score ROUGE pour évaluer la qualité des modèles de traduction et de résumé de documents. Vous pouvez lire plus sur ROUGE ici.

Pour chaque ligne de l'ensemble de données, votre fichier de soumission doit contenir 2 colonnes : ID et Texte.

Pour chaque réponse que vous retournez pour ID_x_réponse, vous devrez fournir la réponse ainsi qu'extraire les verbes et les noms et les remplir dans l'ordre où ils apparaissent dans votre Texte dans ID_x_réponse.

La question serait:

Q1 : Les délibérations du tribunal arbitral sont-elles publiques ou secrètes ?

Votre fichier de soumission devrait ressembler à ceci :

ID                                   Target
Q1_Answer                             Les délibérations du tribunal arbitral sont secrètes
Q1_Document_de_Référence              AU_arbitrage
Q1_Numéro_d'Article                   18

Dans la deuxième phase d'évaluation, les 10 meilleurs modèles seront évalués selon une grille de notation.

  • Grille de notation de la Phase 2 : Un fichier appelé Eval.csv vous sera fourni pour évaluer votre RAG en utilisant votre métrique proposée. La soumission de la métrique améliorée proposée utilisée pour l'évaluation, cette évaluation sera contre des données et des questions inédites et une évaluation humaine. (25%)
  • Phase 3 : Les trois meilleures équipes passent à une phase ultérieure dans laquelle elles ont l'opportunité de transformer leur travail en un produit commercial. Cette phase culmine avec une présentation orale lors de la conférence indabaX Cameroun devant un jury. À la suite de ces présentations, la sélection finale sera faite pour choisir les gagnants de la 1ère, 2ème et 3ème place. (25%)

English

For this competition, we have placed a number of criteria and limitations on your submissions. Please read the following requirements carefully:

  • Only open-source LLMs are allowed, e.g. LLama-2, Mistral-7B, Phi-2, etc.
  • ChatGPT is not allowed.
  • The trained LLM should be able to run on Google colab, or locally.
  • Small-size LLMs are preferred, and need to adhere to the below hardware restrictions.
  • You are limited to the following or equivalent hardware specifications: Multi-core processor (e.g., Intel Core i7/i9, AMD Ryzen 7/9) for efficient processing, or the free Google Colab.
  • LLMs and other tools used should have no (known) security issues. If any security issues become known during the competition, these need to be addressed and made known to the competition organizers.
  • LLMs and their use should have sufficient documentation.
  • LLMs and other tools should be actively maintained.
  • Use the provided datasets in training and should you use other datasets, this should be openly available and documented.
  • The solution must use publicly-available, open-source packages only.

This competition will be evaluated in three phases:

  • Phase 1: Normal model submission, scored with the ROUGE-1-gram error metric (50%)

The Recall-Oriented Understudy for Gisting Evaluation (ROUGE) scoring algorithm calculates the similarity between a candidate document and a collection of reference documents. Normally, we use the ROUGE score to evaluate the quality of document translation and summarisation models. You can read more about ROUGE here.

For every row in the dataset, your submission file should contain 2 columns: ID and Text.

For each answer you return for ID_x_answer you will need to provide the answer as well as extract verbs and nouns and fill them in in the order they appear in your Text in ID_x_answer.

The question would be:

Q1: Are deliberations of the arbitral tribunal public or secret?

Your submission file should look like this:

ID                                 Target
Q1_Answer                          Deliberations of the arbitral tribunal are secret
Q1_Reference_Document              AU_arbitrage
Q1_Article_Number                  18

In the second scoring phase, the top 10 models will be evaluated against a scoring rubric

  • Phase 2 scoring rubric: A file called Eval.csv will be provided to you to evaluate your RAG using your proposed metric. Submission of the proposed improved metric used for evaluation, this evaluation will be against unseen data and questions and human evaluation. (25%)
  • Phase 3: The three best teams move on to a further phase in which they have the opportunity to turn their work into a business product. This phase culminates in a pitch presentation at the indabaX Cameroon conference in front of a jury. Following these presentations, the final selection will be made to choose the 1st, 2nd and 3rd place winners. (25%)
Prix
  • Premier Prix : 100 000 FCFA
  • Deuxième Prix : 70 000 FCFA
  • Troisième Prix : 50 000 FCFA

Il y a 1 000 points Zindi disponibles. Vous pouvez en savoir plus sur les points Zindi ici.

Le classement public : 35 % de l'ensemble de données de test

Le classement privé : 65 % de l'ensemble de données de test

First Prize: 100,000 FCFA

Second Prize: 70,000 FCFA

Third Prize:50,000 FCFA

There are 1 000 Zindi points available. You can read more about Zindi points here.

The public Leaderbaord : 35% of the test dataset

The private Leaderboard: 65% of the test dataset

Chronologie

Le concours se termine le 31 May 2024 at 23:59 PM GMT.

Annonce des gagnants: 5 Juin 2024

Nous nous réservons le droit de mettre à jour la chronologie du concours si nécessaire.

The competition closes on 10 May 2024 at 23:59 PM GMT.

Winners will be announced on 5 June 2024.

We reserve the right to update this timeline if necessary.

Éligibilité

Cette compétition est ouverte aux étudiants de tous niveaux résidant au Cameroun. Les participants peuvent former des équipes de 2 à 3 membres. La diversité de genre et de domaine d'études au sein des équipes est vivement encouragée.

This competition is open to students of all levels residing in Cameroon. Participants may form teams of 2 to 3 members. Diversity in gender and field of study within teams is highly encouraged.

How to get started with Zindi

How to enroll in your first Zindi competition

How to create a team on Zindi

How to update your profile on Zindi

How to use Colab on Zindi

How to mount a drive on Colab

Rules

Cette compétition est ouverte aux étudiants de tous niveaux résidant au Cameroun. Les participants peuvent former des équipes de 2 à 3 membres. La diversité de genre et de domaine d'études au sein des équipes est vivement encouragée.

Équipes et collaboration

Vous pouvez participer à cette competition en tant qu'individu ou en équipe de 3 personnes au maximum. Le nombre total de soumissions doit être inférieur ou égal au nombre maximum de soumissions autorisé à la date de création de l'équipe. Une équipe aura droit au nombre maximum de soumissions pour la competition, moins le nombre total de soumissions parmi les membres de l'équipe au moment de la formation de l'équipe. Les prix ne sont transférés qu'aux joueurs individuels ou au chef d'équipe.

Les comptes multiples par utilisateur ne sont pas autorisés, pas plus que la collaboration ou l'appartenance à plusieurs équipes. Les personnes et leurs contributions provenant de plusieurs comptes seront immédiatement disqualifiées de la plateforme.

Le code ne doit pas être partagé en privé en dehors de l'équipe. Tout code partagé doit être mis à la disposition de tous les participants au concours par l'intermédiaire de la plate-forme. (c'est-à-dire sur les forums de discussion).

Aucun membre supplémentaire ne peut être ajouté aux équipes au cours de la dernière heure du hackathon.

Une équipe peut être dissoute si elle n'a pas encore présenté de projet. Une fois la soumission effectuée, les membres individuels ne peuvent plus quitter l'équipe.

Tous les membres de l'équipe reçoivent des points associés à leur classement dans le concours et il n'y a pas de partage ou de division des points entre les membres de l'équipe.

Datasets and packages

La solution doit utiliser uniquement des logiciels libres accessibles au public.

Vous ne pouvez utiliser que les ensembles de données fournis dans le cadre de ce concours. Les outils d'apprentissage automatique tels que AutoML ne sont pas autorisés.

Vous pouvez utiliser des modèles pré-entraînés à condition qu'ils soient accessibles à tous.

Les données utilisées dans le cadre de ce concours sont la propriété exclusive de Zindi et de l'organisateur du concours. Vous ne pouvez pas transmettre, dupliquer, publier, redistribuer ou fournir ou mettre à disposition les données du concours à toute partie ne participant pas au concours (cela inclut le téléchargement des données sur un site public tel que Kaggle ou GitHub). Vous pouvez télécharger, stocker et travailler avec les données sur n'importe quelle plateforme en nuage telle que Google Colab, AWS ou similaire, tant que 1) les données restent privées et 2) que cela ne contrevient pas aux règles d'utilisation de Zindi.

Vous devez informer Zindi immédiatement dès que vous avez connaissance d'une transmission ou d'un accès non autorisé aux données du concours, et collaborer avec Zindi pour rectifier toute transmission ou tout accès non autorisé.

Votre solution ne doit pas enfreindre les droits d'un tiers et vous devez être légalement autorisé à céder à Zindi la propriété de tous les droits d'auteur sur le code de la solution gagnante.

Submissions and winning

Vous pouvez faire maximum 10 soumissions par jour

Vous pouvez faire un maximum de 100 soumissions au total dans cette competition.

Avant la fin de la compétition, vous devez choisir 2 soumissions qui seront jugées pour le classement privé. Si vous ne faites pas de choix, vos deux meilleures contributions au classement public seront utilisées pour le classement privé.

Pendant la compétition, votre meilleur score public sera affiché, quelles que soient les contributions que vous avez sélectionnées. À la clôture de la compétition, c'est votre meilleur score privé sur les deux soumissions sélectionnées qui sera affiché.

Zindi maintient un classement public et un classement privé pour chaque compétition. Le classement public comprend environ 40 % de l'ensemble des données de test. Pendant la durée de la compétition, le tableau de classement public classe les solutions soumises en fonction du score de précision qu'elles ont atteint. À la clôture de la compétition, le classement privé, qui couvre les 60 % restants de l'ensemble de données du test, sera rendu public et constituera le classement final de la compétition.

Notez que pour être prise en compte, votre soumission doit d'abord être traitée. Si votre soumission échoue au cours de l'étape de traitement, elle ne sera pas comptabilisée et ne recevra pas de score ; elle ne sera pas non plus prise en compte dans votre limite quotidienne de soumissions. Si vous rencontrez des problèmes avec votre fichier de soumission, le mieux est de demander conseil sur le forum de discussion du concours.

Si vous êtes dans le top 5 au moment de la clôture du classement, nous vous enverrons un courriel pour vous demander votre code. Dès réception de l'e-mail, vous disposerez de 2 heures pour répondre et soumettre votre code en suivant les directives de soumission détaillées ci-dessous. Si vous ne répondez pas, vous serez disqualifié.

Si votre solution est l'une des solutions gagnantes, vous devrez nous soumettre le code de votre solution gagnante pour vérification, et vous acceptez ainsi de céder à Zindi tous les droits d'auteur mondiaux relatifs à cette solution gagnante.

Si deux solutions obtiennent des scores identiques sur le tableau de classement, la date et l'heure de la soumission seront déterminantes (la solution la plus ancienne gagnera).

Si la métrique d'erreur exige que des probabilités soient soumises, ne fixez pas de seuils (ou n'arrondissez pas vos probabilités) pour améliorer votre place dans le classement. Afin de s'assurer que le client reçoit la meilleure solution, Zindi aura besoin des probabilités brutes. Cela permettra aux clients de fixer des seuils en fonction de leurs propres besoins.

Vous reconnaissez et acceptez que Zindi puisse, sans obligation de le faire, supprimer ou disqualifier une personne, une équipe ou un compte si Zindi estime que cette personne, cette équipe ou ce compte enfreint le présent règlement. La participation à cette compétition implique l'acceptation du règlement officiel de la compétition.

Zindi s'engage à fournir des solutions de valeur à ses clients et partenaires. À cette fin, nous nous réservons le droit de disqualifier votre soumission pour des raisons d'utilisabilité ou de valeur. Cela inclut, sans s'y limiter, l'utilisation de fuites de données ou toute autre pratique que nous considérons comme compromettant la valeur inhérente de votre solution.

Zindi se réserve également le droit de vous disqualifier et/ou de disqualifier vos soumissions de toute compétition si nous pensons que vous avez violé les règles ou l'esprit de la compétition ou de la plateforme de quelque manière que ce soit. Les disqualifications sont indépendantes de votre position dans le classement et sont entièrement à la discrétion de Zindi.

Veuillez consulter les FAQ et les conditions d'utilisation pour connaître les règles supplémentaires qui peuvent s'appliquer à cette compétition. Nous nous réservons le droit de mettre à jour ces règles à tout moment.

Reproducibility of submitted code

  • Si le code que vous avez soumis ne reproduit pas votre score sur le tableau de classement, nous nous réservons le droit d'ajuster votre rang au score généré par le code que vous avez soumis.
  • Si votre code ne fonctionne pas, vous serez exclu du top 10. Veuillez vous assurer que votre code fonctionne avant de soumettre votre solution.
  • Définissez toujours la graine. L'exécution répétée de votre modèle devrait toujours vous placer à la même position dans le classement. Lors de l'exécution de votre solution, si le hasard vous fait descendre dans le classement, nous nous réservons le droit d'ajuster votre rang au score le plus proche que votre soumission reproduit.
  • Nous attendons une documentation complète. Celle-ci doit comprendre toutes les données utilisées
  • Les données de sortie et l'endroit où elles sont stockées
  • L'explication des fonctionnalités utilisées
  • Un fichier d'exigences avec tous les paquets et versions utilisés
  • Votre solution doit inclure les données originales fournies par Zindi et des données externes validées (si elles sont autorisées).
  • Toutes les modifications de données doivent être effectuées dans un carnet de notes (et non manuellement dans Excel).
  • Code d'environnement à exécuter. (par exemple Google Colab ou les spécifications de votre machine locale)
  • Durée d'exécution prévue pour chaque carnet. Cette information sera utile à l'équipe d'évaluation pour l'allocation du temps et des ressources.

Data standards:

  • Le code soumis doit fonctionner sur les ensembles de données originaux de formation, de test et autres fournis.
  • Si les données externes sont autorisées, elles doivent être disponibles gratuitement et publiquement, y compris les modèles pré-entraînés avec des bibliothèques standard. Si les données externes sont autorisées, toutes les données utilisées doivent être partagées avec Zindi pour être approuvées et ensuite partagées sur le forum de discussion. Zindi indiquera également les données externes disponibles sur la page des données.
  • Packages :
  • Vous devez soumettre un fichier d'exigences avec tous les paquets et versions utilisés.
  • Si aucun fichier d'exigences n'est fourni, les solutions seront exécutées avec les paquets les plus récents disponibles.
  • Les packages personnalisés dans votre cahier de soumission ne seront pas acceptés.
  • Vous ne pouvez utiliser que des outils accessibles à tous, c'est-à-dire pas de services payants ou d'essais gratuits nécessitant une carte de crédit.

Consequences of breaking any rules of the competition or submission guidelines:

  • Première infraction : Pas de prix pendant 6 mois et 2000 points seront retirés de votre profil (période de probation). Si vous êtes pris en flagrant délit de tricherie, toutes les personnes impliquées dans la tricherie seront disqualifiées pour le(s) défi(s) dans lequel(s) vous avez été pris, vous ne pourrez plus gagner de concours pendant les six prochains mois et 2000 points seront retirés de votre profil. Si vous avez moins de 2000 points dans votre profil, vos points seront mis à 0.
  • Deuxième infraction : Interdiction d'accéder à la plateforme. Si vous êtes pris en flagrant délit pour la deuxième fois, votre compte Zindi sera désactivé et vous ne pourrez plus gagner de concours ou de points Zindi en utilisant un autre compte.
  • Les équipes composées de personnes prises en flagrant délit de tricherie ne seront pas éligibles pour gagner des prix ou des points dans la compétition au cours de laquelle la tricherie a eu lieu, indépendamment de la connaissance ou de la participation de ces personnes à l'infraction.
  • Les équipes composées de personnes ayant déjà commis une infraction ne pourront prétendre à aucun prix dans le cadre d'un concours pendant la période de probation de six mois.

Monitoring of submissions

  • Nous examinerons les 10 meilleures solutions de chaque compétition à la fin.
  • Nous nous réservons le droit de demander un code à n'importe quel utilisateur à n'importe quel moment d'un concours. Vous aurez 24 heures pour soumettre votre code en suivant les règles d'examen du code (voir ci-dessus). Zindi se réserve le droit de ne pas expliquer les raisons de sa demande de code. Si vous ne soumettez pas votre code dans les 24 heures, vous ne pourrez pas gagner de compétitions ou de points Zindi pendant les six prochains mois. Si vous êtes à nouveau suspecté et que votre code est demandé et que vous ne le soumettez pas dans les 24 heures, votre compte Zindi sera désactivé et vous ne pourrez plus gagner de compétitions ou de points Zindi avec un autre compte.

English

Teams and collaboration

You may participate in competitions as an individual or in a team of up to three people. When creating a team, the team must have a total submission count less than or equal to the maximum allowable submissions as of the formation date. A team will be allowed the maximum number of submissions for the competition, minus the total number of submissions among team members at team formation. Prizes are transferred only to the individual players or to the team leader.

Multiple accounts per user are not permitted, and neither is collaboration or membership across multiple teams. Individuals and their submissions originating from multiple accounts will be immediately disqualified from the platform.

Code must not be shared privately outside of a team. Any code that is shared, must be made available to all competition participants through the platform. (i.e. on the discussion boards).

The Zindi data scientist who sets up a team is the default Team Leader but they can transfer leadership to another data scientist on the team. The Team Leader can invite other data scientists to their team. Invited data scientists can accept or reject invitations. Until a second data scientist accepts an invitation to join a team, the data scientist who initiated a team remains an individual on the leaderboard. No additional members may be added to teams within the last hour of a hackathon.

The team leader can initiate a merge with another team. Only the team leader of the second team can accept the invite. The default team leader is the leader from the team who initiated the invite. Teams can only merge if the total number of members is less than or equal to the maximum team size of the competition.

A team can be disbanded if it has not yet made a submission. Once a submission is made individual members cannot leave the team.

All members in the team receive points associated with their ranking in the competition and there is no split or division of the points between team members.

Datasets and packages

The solution must use publicly-available, open-source packages only.

You may use only the datasets provided for this competition. Automated machine learning tools such as automl are not permitted.

You may use pretrained models as long as they are openly available to everyone.

You are allowed to access, use and share competition data for any commercial,. non-commercial, research or education purposes, under a CC-BY SA 4.0 license.

You must notify Zindi immediately upon learning of any unauthorised transmission of or unauthorised access to the competition data, and work with Zindi to rectify any unauthorised transmission or access.

Your solution must not infringe the rights of any third party and you must be legally entitled to assign ownership of all rights of copyright in and to the winning solution code to Zindi.

Submissions and winning

You may make a maximum of 5 submissions per day.

You may make a maximum of 100 submissions for this competition.

Before the end of the competition you need to choose 2 submissions to be judged on for the private leaderboard. If you do not make a selection your 2 best public leaderboard submissions will be used to score on the private leaderboard.

During the competition, your best public score will be displayed regardless of the submissions you have selected. When the competition closes your best private score out of the 2 selected submissions will be displayed.

Zindi maintains a public leaderboard and a private leaderboard for each competition. The Public Leaderboard includes approximately 20% of the test dataset. While the competition is open, the Public Leaderboard will rank the submitted solutions by the accuracy score they achieve. Upon close of the competition, the Private Leaderboard, which covers the other 80% of the test dataset, will be made public and will constitute the final ranking for the competition.

Note that to count, your submission must first pass processing. If your submission fails during the processing step, it will not be counted and not receive a score; nor will it count against your daily submission limit. If you encounter problems with your submission file, your best course of action is to ask for advice on the Competition’s discussion forum.

If you are in the top 5 at the time the leaderboard closes, we will email you to request your code. On receipt of email, you will have 2 hours to respond and submit your code following the Reproducibility of the submitted code guidelines detailed below. Failure to respond will result in disqualification.

If your solution places 1st, 2nd, or 3rd on the final leaderboard, you will be required to submit your winning solution code to us for verification, and you thereby agree to assign all worldwide rights of copyright in and to such winning solution to Zindi.

If two solutions earn identical scores on the leaderboard, the tiebreaker will be the date and time in which the submission was made (the earlier solution will win).

The winners will be paid via bank transfer, PayPal if payment is less than or equivalent to $100, or other international money transfer platform. International transfer fees will be deducted from the total prize amount, unless the prize money is under $500, in which case the international transfer fees will be covered by Zindi. In all cases, the winners are responsible for any other fees applied by their own bank or other institution for receiving the prize money. All taxes imposed on prizes are the sole responsibility of the winners. The top winners or team leaders will be required to present Zindi with proof of identification, proof of residence and a letter from your bank confirming your banking details. Winners will be paid in USD or the currency of the competition. If your account cannot receive US Dollars or the currency of the competition then your bank will need to provide proof of this and Zindi will try to accommodate this.

Please note that due to the ongoing Russia-Ukraine conflict, we are not currently able to make prize payments to winners located in Russia. We apologise for any inconvenience that may cause, and will handle any issues that arise on a case-by-case basis.

Payment will be made after code review and sealing the leaderboard.

You acknowledge and agree that Zindi may, without any obligation to do so, remove or disqualify an individual, team, or account if Zindi believes that such individual, team, or account is in violation of these rules. Entry into this competition constitutes your acceptance of these official competition rules.

Zindi is committed to providing solutions of value to our clients and partners. To this end, we reserve the right to disqualify your submission on the grounds of usability or value. This includes but is not limited to the use of data leaks or any other practices that we deem to compromise the inherent value of your solution.

Zindi also reserves the right to disqualify you and/or your submissions from any competition if we believe that you violated the rules or violated the spirit of the competition or the platform in any other way. The disqualifications are irrespective of your position on the leaderboard and completely at the discretion of Zindi.

Please refer to the FAQs and Terms of Use for additional rules that may apply to this competition. We reserve the right to update these rules at any time.

Reproducibility of submitted code

  • If your submitted code does not reproduce your score on the leaderboard, we reserve the right to adjust your rank to the score generated by the code you submitted.
  • If your code does not run you will be dropped from the top 5. Please make sure your code runs before submitting your solution.
  • Always set the seed. Rerunning your model should always place you at the same position on the leaderboard. When running your solution, if randomness shifts you down the leaderboard we reserve the right to adjust your rank to the closest score that your submission reproduces.
  • Custom packages in your submission notebook will not be accepted.
  • You may only use tools available to everyone i.e. no paid services or free trials that require a credit card.

Documentation

A README markdown file is required

It should cover:

  • How to set up folders and where each file is saved
  • Order in which to run code
  • Explanations of features used
  • Environment for the code to be run (conda environment.yml file or an environment.txt file)
  • Hardware needed (e.g. Google Colab or the specifications of your local machine)
  • Expected run time for each notebook. This will be useful to the review team for time and resource allocation.

Your code needs to run properly, code reviewers do not have time to debug code. If code does not run easily you will be bumped down the leaderboard.

Consequences of breaking any rules of the competition or submission guidelines:

  • First offence: No prizes for 6 months and 2000 points will be removed from your profile (probation period). If you are caught cheating, all individuals involved in cheating will be disqualified from the challenge(s) you were caught in and you will be disqualified from winning any competitions for the next six months and 2000 points will be removed from your profile. If you have less than 2000 points to your profile your points will be set to 0.
  • Second offence: Banned from the platform. If you are caught for a second time your Zindi account will be disabled and you will be disqualified from winning any competitions or Zindi points using any other account.
  • Teams with individuals who are caught cheating will not be eligible to win prizes or points in the competition in which the cheating occurred, regardless of the individuals’ knowledge of or participation in the offence.
  • Teams with individuals who have previously committed an offence will not be eligible for any prizes for any competitions during the 6-month probation period.

Monitoring of submissions

  • We will review the top 5 solutions of every competition when the competition ends.
  • We reserve the right to request code from any user at any time during a challenge. You will have 24 hours to submit your code following the rules for code review (see above). Zindi reserves the right not to explain our reasons for requesting code. If you do not submit your code within 24 hours you will be disqualified from winning any competitions or Zindi points for the next six months. If you fall under suspicion again and your code is requested and you fail to submit your code within 24 hours, your Zindi account will be disabled and you will be disqualified from winning any competitions or Zindi points with any other account.