Learning Analytics - Door data gestuurd leren

86
Learning Analytics D oor data gestuurd leren Joris Klerkx Research Expert, PhD. http://hci.cs.kuleuven.be @jkofmsk Erik Duval Professor http://hci.cs.kuleuven.be @erikd Studienamiddag - Learning analytics - HU Brussel - 22 mei 2014 1

description

Keynote studiedag: Learning analytics - analyseren om leren te optimaliseren HUB - VOV lerend netwerk

Transcript of Learning Analytics - Door data gestuurd leren

Page 1: Learning Analytics - Door data gestuurd leren

Learning AnalyticsDoor data gestuurd leren

Joris Klerkx Research Expert, PhD. http://hci.cs.kuleuven.be @jkofmsk

Erik Duval Professor http://hci.cs.kuleuven.be @erikd

Studienamiddag - Learning analytics - HU Brussel - 22 mei 2014

1

Page 2: Learning Analytics - Door data gestuurd leren

Our team:Human-Computer Interaction !

technology enhanced learning music research (personal) health

2

Page 3: Learning Analytics - Door data gestuurd leren

3 http://eng.kuleuven.be/datavislab/

Page 4: Learning Analytics - Door data gestuurd leren

http://www.slideshare.net/jkofmsk

4

Page 5: Learning Analytics - Door data gestuurd leren

About learning…

5

Page 6: Learning Analytics - Door data gestuurd leren

we are teaching students to solve problems we don't know using technologies we don't know

6

Page 7: Learning Analytics - Door data gestuurd leren

we are should be teaching students to solve problems we don't know using technologies we don't know

7

Page 8: Learning Analytics - Door data gestuurd leren

http://www.flickr.com/photos/jonbecker/4625331304/8

Page 9: Learning Analytics - Door data gestuurd leren

http

://w

ww.

yout

ube.

com

/wat

ch?v

=p0w

k4qG

2mIg

http

://w

ww.

lear

ner.o

rg/v

od/v

od_w

indo

w.ht

ml?

pid=

9

9

Page 10: Learning Analytics - Door data gestuurd leren

10

Page 11: Learning Analytics - Door data gestuurd leren

Motivation - empowerment

11

Page 12: Learning Analytics - Door data gestuurd leren

http://www.motivationhacker.com/motivation-is-situational-not-a-personality-trait/

Motivation - empowerment

12

Page 13: Learning Analytics - Door data gestuurd leren

Meten = Weten

13

Page 14: Learning Analytics - Door data gestuurd leren

Ex cathedra - exams

http://www.flickr.com/photos/wolflawlibrary/2417195782/14

Page 15: Learning Analytics - Door data gestuurd leren

Fake learning

15

Page 16: Learning Analytics - Door data gestuurd leren

exams

Judge a man by his questions/actions rather than by his answers…Voltaire

16

Page 17: Learning Analytics - Door data gestuurd leren

Continuous monitoring

exams

before - during - after

17

Page 18: Learning Analytics - Door data gestuurd leren

Learning analytics

18

Page 19: Learning Analytics - Door data gestuurd leren

Collecting traces that learners leave behind and using those traces to improve

learning

http://erikduval.wordpress.com/2012/01/30/learning-analytics-and-educational-data-mining/

Learning analytics

19

Page 20: Learning Analytics - Door data gestuurd leren

What to measure? Depends on the user

20

Page 21: Learning Analytics - Door data gestuurd leren

Analytics for Students access to learning resourcesposts in discussion foralogins to learning management systemsposts of assignmentsreplies to postsvotes in lecture response systemstime on page in electronic textbooklocation of device used to access course(and thus proximity to other users)software lines producedcontributions to shared documents or wikis

etc.

Who? !

!

What? !

!

When?

21

Page 22: Learning Analytics - Door data gestuurd leren

Analytics for professors

22

Page 23: Learning Analytics - Door data gestuurd leren

23

Page 24: Learning Analytics - Door data gestuurd leren

email, twitter, facebook, web reading, physical movement, location, proximity, food intake, sleeping, drinking, emotion tracking, weather info, attention, brainwaves, …

As learning moves online, traces also include…

Relevant? 24

Page 25: Learning Analytics - Door data gestuurd leren

http://bigtablechi13.appspot.com/dashboard.jsp

Learning Dashboards

25

Raw Aggregated

Page 26: Learning Analytics - Door data gestuurd leren

Conceptual process model

26

Page 27: Learning Analytics - Door data gestuurd leren

awareness

(self) reflection

sense making

impact

data

questions

answers

behavior change or new meaning

27

Page 28: Learning Analytics - Door data gestuurd leren

How can data on relevant actions be captured?

Inspiration

28

Page 29: Learning Analytics - Door data gestuurd leren

Inspiration

quantifiedself.com

29

Page 30: Learning Analytics - Door data gestuurd leren

http://www.fitbit.com/

Sensors

30

Page 31: Learning Analytics - Door data gestuurd leren

31

Page 32: Learning Analytics - Door data gestuurd leren

32

Page 33: Learning Analytics - Door data gestuurd leren

https://www.rescuetime.com/

Software Sensors

33

Page 34: Learning Analytics - Door data gestuurd leren

Web Analytics - trackers34

Page 35: Learning Analytics - Door data gestuurd leren

35

Page 36: Learning Analytics - Door data gestuurd leren

https://jawbone.com/up/coffee

Self-reporting

36

Page 37: Learning Analytics - Door data gestuurd leren

http://developer.runkeeper.com/healthgraph

Sharing, Comparing with your friends

37

Page 38: Learning Analytics - Door data gestuurd leren

What else do people track?

38

Page 39: Learning Analytics - Door data gestuurd leren

http://quantifiedself.com/QSLondon_Survey_overview.pdf 39

Page 40: Learning Analytics - Door data gestuurd leren

Making sense of the data

Raise awareness & Reflection

40

Page 41: Learning Analytics - Door data gestuurd leren

http://www.slideshare.net/infoscape41

Page 42: Learning Analytics - Door data gestuurd leren

42

Page 43: Learning Analytics - Door data gestuurd leren

algorithm <>

human

43

Page 44: Learning Analytics - Door data gestuurd leren

Trust?

http://www.demorgen.be/dm/nl/5403/Internet/article/detail/1890428/2014/05/18/Twitteractiviteit-verraadt-je-politieke-profiel.dhtml44

Page 45: Learning Analytics - Door data gestuurd leren

Number crunching <>

Human perception

45

Page 46: Learning Analytics - Door data gestuurd leren

Anscombe’”⁹s quartet ! uX = 9.0 uY = 7.5 sigma X = 3.317 sigma Y = 2.03 Y = 3 + 0.5X

http://en.wikipedia.org/wiki/Anscombe's_quartet

46

Page 47: Learning Analytics - Door data gestuurd leren

Educational Data mining

Data VisualisationVisual Dashboards

<>

47

Page 48: Learning Analytics - Door data gestuurd leren

Example dashboards

48

Page 49: Learning Analytics - Door data gestuurd leren

49

Page 50: Learning Analytics - Door data gestuurd leren

http://www.snappvis.org

50

Page 51: Learning Analytics - Door data gestuurd leren

http://www.engadget.com/2013/01/09/kno-launches-kno-me-interactive-textbook-metrics-lets-you-stu/

51

Page 52: Learning Analytics - Door data gestuurd leren

Khaled  Bachour,  Frederic  Kaplan,  Pierre  Dillenbourg,  "An  Interac:ve  Table  for  Suppor:ng  Par:cipa:on  Balance  in  Face-­‐to-­‐Face  Collabora:ve  Learning,"  IEEE  Transac:ons  on  Learning  Technologies,  vol.  3,  no.  3,  pp.  203-­‐213,  July-­‐September,  2010  

52

Page 53: Learning Analytics - Door data gestuurd leren

http://gigaom.com/2013/06/19/new-augmented-reality-glasses-let-teachers-know-when-their-students-are-falling-behind/

T. Zarraonandia, I. Aedo, P. Dıaz, and A. Montero. An augmented lecture feedback system to support learner and teacher communication. British Journal of Educational Technology, 44(4):616–628, 2013.

53

Page 54: Learning Analytics - Door data gestuurd leren

54

Page 55: Learning Analytics - Door data gestuurd leren

What we do

55

Page 56: Learning Analytics - Door data gestuurd leren

56

Page 57: Learning Analytics - Door data gestuurd leren

57

Page 58: Learning Analytics - Door data gestuurd leren

58

Page 59: Learning Analytics - Door data gestuurd leren

59

Page 60: Learning Analytics - Door data gestuurd leren

60

Page 61: Learning Analytics - Door data gestuurd leren

61

Page 62: Learning Analytics - Door data gestuurd leren

62

Page 63: Learning Analytics - Door data gestuurd leren

63

Page 64: Learning Analytics - Door data gestuurd leren

http

://to

mde

buys

er.u

lyss

is.b

e/to

pija

/Cod

e/Vi

sual

izat

ionV

2_1.

htm

l

64

Page 65: Learning Analytics - Door data gestuurd leren

65

Page 66: Learning Analytics - Door data gestuurd leren

Abundance of data?

Page 67: Learning Analytics - Door data gestuurd leren

http://ariadne.cs.kuleuven.be/LARAe/chi14/67

Page 68: Learning Analytics - Door data gestuurd leren

68

Page 69: Learning Analytics - Door data gestuurd leren

69

Page 70: Learning Analytics - Door data gestuurd leren

70

Page 71: Learning Analytics - Door data gestuurd leren

71Tabletops

Page 72: Learning Analytics - Door data gestuurd leren

J. Santos, S. Charleer, G. Parra, J. Klerkx, E. Duval, and K. Verbert. Evaluating the use of open badges in an open learning environment. In D. Hernandez-Leo, T. Ley, R. Klamma, and A. Harrer, editors, Scaling up Learning for Sustained Impact, volume 8095 of Lecture Notes in Computer Science, pages 314–327. Springer Berlin Heidelberg, 2013.72

Page 73: Learning Analytics - Door data gestuurd leren

73

Page 74: Learning Analytics - Door data gestuurd leren

74

In-class display

Page 75: Learning Analytics - Door data gestuurd leren

75

Measuring sentiment

Page 76: Learning Analytics - Door data gestuurd leren

76

Measuring emotion

Page 77: Learning Analytics - Door data gestuurd leren

Privacy? Control?

77

Page 78: Learning Analytics - Door data gestuurd leren

Fear Uncertainty Doubt

78

Page 79: Learning Analytics - Door data gestuurd leren

http://www.slideshare.net/abelardo_pardo/ethics-and-privacy-in-learning-analytics#

Attention Trust (2005)

Property

Mobility

(Economy)

TransparancyData access policies

79

Page 80: Learning Analytics - Door data gestuurd leren

http://quantifiedself.com/QSLondon_Survey_overview.pdf 80

QS community

Page 81: Learning Analytics - Door data gestuurd leren

When

81

Page 82: Learning Analytics - Door data gestuurd leren

http://www.nmc.org/pdf/2014-nmc-horizon-report-he-EN.pdf82

Page 83: Learning Analytics - Door data gestuurd leren

83

Page 84: Learning Analytics - Door data gestuurd leren

Also: you?

84

Page 85: Learning Analytics - Door data gestuurd leren

what can we measure & how is it relevant? what is relevant & how can we measure it?

85

Page 86: Learning Analytics - Door data gestuurd leren

Thank you for your attention!

[email protected]

@jkofmsk

86