Wie kann eine Studie Teilnehmende befragen, sobald sie an einem Ort ankommen?

Was Geofencing macht

Ein Geofence ist eine virtuelle Grenze um einen Ort, festgelegt durch einen Mittelpunkt und einen Radius. Das Smartphone erkennt, wann es den Bereich betritt oder verlässt, und jedes dieser Ereignisse kann eine Aktion auslösen. In der Experience-Sampling-Forschung ist diese Aktion eine Benachrichtigung mit einem Link zu einem kurzen Fragebogen, einer Intervention oder einer experimentellen Aufgabe, die eintrifft, während die Person am Ort ist oder ihn gerade verlassen hat.

Geofencing unterscheidet sich von kontinuierlichem Standort-Tracking, das die Position in regelmäßigen Abständen aufzeichnet. Tracking erzeugt sensible Daten, belastet den Akku und hat oft Lücken. Beim Geofencing meldet das Smartphone nur, dass eine Grenze überschritten wurde. Wenn die Teilnehmenden die Orte selbst festlegen, etwa ihre Wohnung oder ihren Arbeitsplatz, müssen keine Standortdaten an die Forschenden übertragen werden.

Wie die Methode geprüft wurde

Shevchenko und Reips (2024) untersuchten das in Samply umgesetzte Geofencing in drei Studien. Zwei Maße beschreiben, wie gut es funktionierte. Die Sensitivität ist der Anteil der tatsächlichen Ankünfte oder Abfahrten, die eine Benachrichtigung auslösten. Die Präzision ist der Anteil der Benachrichtigungen, denen eine tatsächliche Ankunft oder Abfahrt entsprach.

• In Studie 1 gingen vier Testpersonen festgelegte Routen in einer Innenstadt, einem Wohngebiet und einem Wald ab. Jede Route hatte 15 Orte mit einem Radius von 10, 50 oder 100 m. Über 360 Tests hinweg wurden Betriebssystem, Radius, Umgebung, WLAN-Einstellung und Art des Ereignisses variiert.
• In Studie 2 wiederholten zwei Testpersonen die Tests mit einem externen GPS-Tracker als Referenz (120 Tests) und verglichen das Durchqueren eines Ortes mit einem fünfminütigen Aufenthalt in seiner Mitte.
• In Studie 3 erhielten 58 Studierende im November und Dezember 2022 Benachrichtigungen auf ihren eigenen Smartphones, wenn sie die Universität betraten oder verließen, und gaben täglich an, ob sie an der Universität gewesen waren.

Ergebnisse

In Studie 1 lösten 82,5 % der Besuche eines Ortes eine Benachrichtigung aus. Benachrichtigungen beim Ankommen kamen im Mittel 87 m vom Mittelpunkt des Bereichs entfernt, beim Verlassen 234 m. iOS-Geräte verpassten weniger Benachrichtigungen als Android-Geräte, während Android seine Benachrichtigungen näher an der Grenze sendete. Im Wald, wo Teile der Route keine mobile Internetverbindung hatten, war die Sensitivität geringer.

Studie 2 bestätigte den Unterschied zwischen den Betriebssystemen. Ein größerer Radius und ein fünfminütiger Aufenthalt erhöhten die Sensitivität, und Abfahrten wurden seltener erkannt als Ankünfte. iOS sendete Ankunftsbenachrichtigungen, bevor das Smartphone die Grenze überschritt, Android danach.

Mit den eigenen Smartphones der Studierenden in Studie 3 lagen Sensitivität und Präzision für Ankünfte bei je 70 %. Für Abfahrten betrug die Präzision 89 % und die Sensitivität 18 %, die meisten Abfahrten lösten also keine Benachrichtigung aus. Wenn eine Ankunftsbenachrichtigung gesendet wurde, waren die Teilnehmenden in 97 % der Fälle an der Universität. Fehlalarme entstanden also vor allem durch verzögerte oder wiederholte Benachrichtigungen, nicht durch einen falschen Ort.

Empfehlungen für das Studiendesign

Der Artikel fasst seine Ergebnisse als Empfehlungen für Forschende zusammen:

• Einen Radius von mindestens 100 m verwenden. Bei 10 m verpassten Android-Geräte Benachrichtigungen, und iPhones sendeten sie zu früh.
• Orte wählen, an denen sich die Teilnehmenden mindestens 5 Minuten aufhalten.
• Betriebssystem und Gerätemodell erfassen und den Teilnehmenden Anleitungen für die Akku-Einstellungen geben, die auf manchen Android-Geräten Hintergrundprozesse stoppen.
• Gebiete ohne mobiles Internet oder mit überlastetem Netz meiden und die Grenze in offenem Gelände setzen.
• Teilnehmende bitten, das WLAN eingeschaltet zu lassen. Bei ausgeschaltetem WLAN kamen Benachrichtigungen beim Verlassen verzögert.
• Bei Abfragen beim Verlassen mit stärker schwankendem Timing rechnen als bei Abfragen beim Ankommen.
• Überlappende Bereiche vermeiden, weniger als 20 Orte pro Gerät verwenden und Kontrollfragen stellen, etwa „Sind Sie gerade an dem Ort?“ in der Abfrage und „Waren Sie heute an dem Ort?“ am Ende des Tages.

Der Standort wird weiterhin auf dem Smartphone der Teilnehmenden verarbeitet. Die Einwilligungserklärung sollte daher erklären, was die App erkennt und was an die Forschenden übermittelt wird.