Posted on

[edm-announce] Diagnostic Questions: The NeurIPS 2020 Education Challenge

  • From: Stephen Fancsali <sfancsali@xxxxxxxxx>
  • To: edm-announce@xxxxxxxxxxxxx
  • Date: Fri, 24 Jul 2020 13:06:55 -0400

[on behalf of Jack Wang]

We invite individuals and teams to participate in Diagnostic Questions: The
NeurIPS 2020 Education Challenge.

1. Call for Participation
We invite individuals and teams to join this year’s NeurIPS competition on
educational data mining. The competition website is where participants can
find datasets, rules and submission guidance. Submission to the competition
is open from July 15, 2020 until October 23, 2020.

2. Key Dates
● July 15, 2020: Submission to all tasks of the competition opens; dataset
and starter kit released
● October 23 2020: Final submission deadline for all tasks
● November 15 2020: Final competition results announced, private evaluation
leaderboards revealed, prize-winners notified.

3. Prize and Support

Competition Prizes

Microsoft and Eedi will provide a total of $5,000 in cash prizes for the
competition. There will be $1,000 prizes awarded to the winning team for
each task. In addition, a $1,000 prize for the overall winner across all
tasks will be awarded, as determined by the team’s average rank across each
competition task (smallest average rank wins). If a team hasn’t submitted a
working solution to a particular task, their rank for that task will be
considered to be equal to the number of entrants across all tasks in total.
(Further restrictions on eligibility for the prize may apply. Please see
rules for details). In the event of a tie, this prize will be split evenly
between the tied teams.

Azure Cloud Computing Credits

Microsoft made available 50 grants of $250 Azure cloud computing credits to
students participating in the contest. Students are not required to use
Azure to compete. Please fill in the application form here to apply. The
credits will be allocated to the first 50 valid applications.

4. Competition Overview

Digital technologies are becoming increasingly prevalent in education,
enabling personalized, high quality education resources to be accessible by
students across the world. Importantly, among these resources are
diagnostic questions: the answers that the students give to these questions
reveal key information about the specific nature of misconceptions that the
students may hold. Analyzing the massive quantities of data stemming from
students’ interactions with these diagnostic questions can help us more
accurately understand the students’ learning status and thus allow us to
automate learning curriculum recommendations. In this competition, you will
focus on the students’ answer records to these multiple-choice diagnostic
questions, with the aim of 1) accurately predicting which answers the
students provide; 2) accurately predicting which questions have high
quality; and 3) determining a personalized sequence of questions for each
student that best predicts the student’s answers. These tasks closely mimic
the goals of a real-world educational platform and are highly
representative of the educational challenges faced today. We provide data
from the last two school years (2018-2020) of students’ answers to
mathematics questions from Eedi (, a leading educational
platform which millions of students interact with daily around the globe.
By participating, you have a chance to make a lasting, real-world impact on
the quality of personalized education for millions of students across the

More Information, including instructions to get started and submission, can
be found in the official competition guide (

Organizing Team:
Jack Wang (Rice University),
Angus Lamb (Microsoft Research),
Evgeny Saveliev (Microsoft Research),
Pashmina Cameron (Microsoft Research),
Yordan Zaykov (Microsoft Research),
José Miguel Hernández-Lobato (University of Cambridge),
Richard Turner (University of Cambridge),
Richard G. Baraniuk (Rice University),
Craig Barton (Eedi),
Simon Peyton-Jones (Microsoft Research),
Simon Woodhead (Eedi),
Cheng Zhang (Microsoft Research)

– Link to the competition:
– Competition guide:

Contact: edu_competition@xxxxxxxxxxx

NeurIPS 2020 Education Challenge CFP.pdf

Description: Adobe PDF document

Ezoicreport this ad

Other related posts:

  • » [edm-announce] Diagnostic Questions: The NeurIPS 2020 Education Challenge – Stephen Fancsali