Evaluation datintro23

[dbosk]

Need to work on this with the TAs

"När jag fick hjälp med en laboration digitalt kändes det lite som att assarna
försökte lösa problemet åt mig, snarare än med mig. Det kändes
inte som att deras mål var att jag skulle förstå vad vi höll på med."

• Talk to the TAs so that they focus on the students' understanding rather than just solving the assignments.

Clarify the instructions on Canvas

"Det var ibland oklart vad man behövde göra för att gå vidare. Med det så
syftar jag inte på själva uppgifterna utan på det kronologiska
systemet i canvas."

"lite tydligare instruktioner på canvas"

Improved teaching material

"Informationen kring vad man lär sig på denna kurs samt tydligare instruktioner
i vad man ska göra. Det hade även varit till stor hjälp att enklare
få kontakt med assistenter eller annan personal ifall man hade frågor eller
behövde stöd, helst genom övningar på plats."

Git

"Mer genomgång för GitHub-delen av uppgiften."

"Jag tyckte att det skulle vara med hjälpsam om det fanns flera videos som
visade hur man skulle git commit och git push för det sista uppgiften
då det var lite svårare att göra."

LaTeX

"Mer invecklad modul inom LaTeX."

General

"Kanske några guider för hur man gör då man har andra operativsystem som kan
krångla till det lite, och exempelvis hur man på ett effektivt
sätt överför filer från overlief till github."

"I would like for the answer to be present after so that you could check to see
if what you wrote was right or wrong."

Discuss with students

"Videor som var mer relevanta för det man faktiskt behövde lära sig. Man fick
otroligt mycket ny info som man inte han ta åt sig som inte
behövdes i uppgifterna"

• The assessment isn't the course

"En autorättningsknapp som bara rättar ens egna arbete kanske skulle
funka bättre än script som rättar allas arbete där 95% antagligen inte är
uppdaterat."

"En funktion så att man kan stänga av kommentarerna/frågorna i videon."

"Feedbackloop är helt katastrofalt, försöker kolla på videos och så blir jag
bombarderad med svaret från eleverna på frågorna. Fixa bättre gui."

"Att läraren känns mer tillgänglig."

"Skulle vara bra om man kunde prata med läraren eller på nått sätt få hjälp
från honom när man körde fast"

Other

"Jag började ett annat program på KTH förut där vi inte hade den här kursen.
När vi skulle börja programmera blev allt extremt svårt eftersom
vi aldrig ens hade sett kommandotolken innan. Jag hade verkligen önskat att jag
fick läsa den här kursen innan vår programmeringskurs. Så,
gör den valbar på allt KTH:s program!"

"Lär er allt i kursen, det är guld för framtiden!"

[dbosk]

Workload: Much less than the 1.5 credits they get. But it depends on how you take the course.

The course is designed so that there is a lot that can be learned. But the assessment assesses the basics, which can be done in much less than 40 hours (1.5 credits).

[dbosk]

Grades: The results are as follows.

datintro23p1 LAB1 grades:
198 F
191 P

We can see that it's roughly 50% that completes it. This is less than datintro20 (197 P, 86 F; but less programmes). It's also less than datintro21 (223 P, 192 F; more programmes than datintro20). But it's more compared to datintro22 (134 P, 247 F).

[dbosk]

Analysis:

Better instructions for TAs on how to help students. (Students want to learn.)

Better instructions for the students that they'll ask TAs about practical problems, not the teacher. They can ask questions for the teacher related to the material in the video material.

Also better instructions to students that what they learn and what they assess are not the same thing. We don't assess everything, just the basics.

In general the students want the Git and LaTeX modules to be more extensive.

We can also review how we treat different OSes. Also how to transfer between OverLeaf and GitHub.

As to the learning material, we should add correct answers or suggested solutions to the questions in the videos. There are some, but lacks in others.

Some students appreciate the course very much, others less so. Those who appreciate it has experienced when they have use of it, or how it is when the course isn't available (other programmes).

[dbosk]

Prioritized development:

In order or priority:

• Instructions for TAs. 2h

• Revise the introduction to the course for the students. 4h

• Revise the teaching material (to map out changes) and questions in it (update or add questions). 8h

Expand on Git.

Expand on SSH and what it actually does. Also some mistakes IT has complained that students do, eg create cycles: ssh A, ssh B, ssh C, ssh A.

Incorporate some of my literate shell scripts as examples in the Terminal module.

LaTeX should be revised to use better packages.

[dbosk]

The evaluation findings from 2020--23 (this issue, #20, #74, #89 and their child issues) are now inventoried and prioritized in evaluation/improvements.md on the review-all-modules branch.

The open material issues are collected in the material-improvements milestone. The prioritized development list above is subsumed by the priorities in that document.

[dbosk]

Update: the datintro25 course analysis (CTFYS instance) is now in evaluation/datintro25.pdf and incorporated into the inventory, which reordered the priorities: assessment-vs-course clarity and the FeedbackFruits platform now top the list. datintro24 data is still missing.