Itemanalyse und Faktorstruktur eines Fragebogens zur Messung von Vertrauen im Umgang mit automatischen Systemen

ZusammenfassungIm Umgang mit automatisierten Systemen spielt das Vertrauen des Nutzers eine entscheidende Rolle für das zukünftige Nutzungsverhalten. Dieses Konstrukt wird bisher vor allem durch Selbstbeurteilungsverfahren erfasst. In der vorliegenden Untersuchung wurde ein im englischsprachigen Raum weit verbreitetes Verfahren ins Deutsche übersetzt (verfügbar unter: http://www.ifab.kit.edu/1705.php). Die Validierung fand in einem computerbasierten Flugsimulator mit N = 60 Personen statt, wobei durch den Ausfall eines Subsystems Vertrauensunterschiede hervorgerufen wurden. Anschließende statistische Analysen führten zu einem Fragebogen mit sechs Items auf der Dimension Vertrauen und fünf Items auf der Dimension Misstrauen. Das vorgestellte Verfahren spricht für die Mehrdimensionalität des Konstruktes Vertrauen. Besonderes Augenmerk sollte in zukünftigen Analysen auf die Entwicklung von Vertrauen über einen längeren Zeitraum gelegt werden. Praktische Relevanz Im Rahmen dieser Arbeit wurde ein deutschsprachiges psychometrisches Testverfahren zur Messung von Vertrauen in automatische Systeme erarbeitet. Das hier vorgestellte Instrument erlaubt eine valide, reliable und ökonomische Messung von Vertrauen, die unabhängig des konkreten Anwendungskontextes durchgeführt werden kann. Die Grundlage bildete ein bereits validiertes Selbstbeurteilungsverfahren von Vertrauen im englischsprachigen Raum, dessen Entwicklung sich nicht nur durch eine theoretische, sondern auch empirische Verankerung auszeichnete.AbstractTrust is an important variable when describing the interaction between humans and automated systems and has so far been measured by self-assessment scales. Within this work a German questionnaire for assessing human-automation trust is developed (see http://www.ifab.kit.edu/1705.php for download) by relying on a wide-spread and accepted English tool. For the validation of the German scale a flight simulator experiment with N = 60 subjects has been performed. Trust differences were caused by manipulating the reliance of a subsystem. Subsequent statistical analyses support an instrument consisting of six items loading on a trust factor and five items loading on a distrust factor. Thus, further evidence is provided that trust is a multidimensional construct. Future research should concentrate on dealing with the development of human-automation trust over a longer period of time. Practical Relevance Within this article a German psychometric tool for measuring trust in automated systems is introduced. The proposed self-assessment scale is valid, reliable and economical and it can be used in numerous domains where automation of activities has been or will be established. An English scale for human-automation trust, which formed the basis of the here suggested German tool, did not only take into account theoretical, but also empirical considerations.

[1]  N. Moray,et al.  Adaptive automation, trust, and self-confidence in fault management of time-critical tasks. , 2000 .

[2]  Masooda Bashir,et al.  Trust in Automation , 2015, Hum. Factors.

[3]  Scott M. Galster,et al.  Effects of Reliable and Unreliable Automation on Subjective Measures of Mental Workload, Situation Awareness, Trust and Confidence in a Dynamic Flight Task , 2004 .

[4]  John D. Lee,et al.  Trust, self-confidence, and operators' adaptation to automation , 1994, Int. J. Hum. Comput. Stud..

[5]  N Moray,et al.  Trust, control strategies and allocation of function in human-machine systems. , 1992, Ergonomics.

[6]  Norman L. Chervany,et al.  Trust and Distrust Definitions: One Bite at a Time , 2000, Trust in Cyber-societies.

[7]  Josef F. Krems,et al.  Drivers’ Reliance on Lane-Keeping Assistance Systems as a Function of the Level of Assistance , 2015 .

[8]  Randall D. Spain,et al.  Towards an Empirically Developed Scale for System Trust: Take Two , 2008 .

[9]  Bonnie M. Muir,et al.  Trust Between Humans and Machines, and the Design of Decision Aids , 1987, Int. J. Man Mach. Stud..

[10]  John D. Lee,et al.  Trust in Automation: Designing for Appropriate Reliance , 2004 .

[11]  Raja Parasuraman,et al.  Humans and Automation: Use, Misuse, Disuse, Abuse , 1997, Hum. Factors.

[12]  Julian Sanchez,et al.  FACTORS THAT AFFECT TRUST AND RELIANCE ON AN AUTOMATED AID , 2006 .

[13]  Göran Falkman,et al.  Presenting system uncertainty in automotive UIs for supporting trust calibration in autonomous driving , 2013, AutomotiveUI.

[14]  Regina A. Pomranky,et al.  The role of trust in automation reliance , 2003, Int. J. Hum. Comput. Stud..

[15]  Victor A. Riley,et al.  Operator reliance on automation: Theory and data. , 1996 .

[16]  B P O'Connor,et al.  SPSS and SAS programs for determining the number of components using parallel analysis and Velicer’s MAP test , 2000, Behavior research methods, instruments, & computers : a journal of the Psychonomic Society, Inc.

[17]  Colin G. Drury,et al.  Foundations for an Empirically Determined Scale of Trust in Automated Systems , 2000 .

[18]  H. Marsh,et al.  In Search of Golden Rules: Comment on Hypothesis-Testing Approaches to Setting Cutoff Values for Fit Indexes and Dangers in Overgeneralizing Hu and Bentler's (1999) Findings , 2004 .

[19]  Michael ten Hompel,et al.  Digitalisierung industrieller Arbeit: Entwicklungsperspektiven und Gestaltungsansätze , 2017, Handbuch Industrie 4.0.

[20]  Mark Vollrath,et al.  Improving the Driver–Automation Interaction , 2013, Hum. Factors.

[21]  Stephen G. West,et al.  Structural equation models with non-normal variables: Problems and remedies , 1995 .

[22]  Josef F. Krems,et al.  Effects of Take-Over Requests and Cultural Background on Automation Trust in Highly Automated Driving , 2017 .

[23]  Daniel R. Ilgen,et al.  Not All Trust Is Created Equal: Dispositional and History-Based Trust in Human-Automation Interactions , 2008, Hum. Factors.

[24]  Stephanie M. Merritt Affective Processes in Human–Automation Interactions , 2011, Hum. Factors.

[25]  Carl W. Turner,et al.  Validation of a Two Factor Structure for System Trust , 2005 .

[26]  P. Bentler,et al.  Cutoff criteria for fit indexes in covariance structure analysis : Conventional criteria versus new alternatives , 1999 .