Anwendung der vermittelten Kenntnisse und Fähigkeiten

Ergebnis

Prozentualer Anteil der [Zielgruppe angeben], die das vermittelte Wissen und/oder die vermittelten Fähigkeiten während des [Bezugszeitraum angeben] genutzt haben

Dieser Indikator misst, inwieweit die Projektteilnehmer das Wissen oder die Fähigkeiten, die ihnen durch projektgestützte Aktivitäten wie Schulungen, Workshops oder Vorführungen vermittelt wurden, in die Praxis umsetzen. Der Schwerpunkt liegt dabei auf der Anwendung in relevanten Kontexten und nicht allein auf dem Erwerb von Wissen oder Fähigkeiten.

Ermitteln Sie den Wert des Indikators anhand der folgenden Methodik:

 

1) Legen Sie eine begrenzte Anzahl der wichtigsten Kenntnisse und/oder Fähigkeiten fest, von denen erwartet wird, dass die Teilnehmenden sie nach Abschluss der Projektbegleitung anwenden. Stellen Sie sicher, dass die ausgewählten Kenntnisse und/oder Fähigkeiten für das relevant sind, was die Teilnehmenden in ihrem jeweiligen Kontext realistisch gesehen anwenden können. 

2) Legen Sie den Bezugszeitraum fest, in dem die Teilnehmer das ausgewählte Wissen und/oder die ausgewählten Fähigkeiten voraussichtlich angewendet haben. Stellen Sie sicher, dass die Teilnehmer in diesem Zeitraum einen realistischen Bedarf oder die Gelegenheit hatten, diese anzuwenden.

3) Legen Sie fest, wie Sie beurteilen wollen, ob die Teilnehmer das vordefinierte Wissen und/oder die vordefinierten Fähigkeiten während des in Schritt 2 festgelegten Bezugszeitraums angewendet haben. Sehen Sie sich die folgenden Ansätze an und wählen Sie die für Ihren Kontext am besten geeignete(n) Option(en) aus:

• Strukturierte Interviews:

  • Führen Sie Interviews mit einer repräsentativen Stichprobe von Teilnehmern. Fragen Sie : „Können Sie mir sagen, welche der folgenden Kenntnisse oder Fähigkeiten Sie gegebenenfalls im [Bezugszeitraum angeben] im Anschluss an [spezifische Projektaktivität angeben] genutzt haben?“

  • Die Antwortmöglichkeiten sollten den Optionen entsprechen, die Sie in Schritt 1 oben definiert haben. Beschreiben Sie die Optionen als konkrete Handlungen oder Entscheidungen und nicht nur als Schulungsthemen. Geben Sie den Befragten die Möglichkeit anzugeben, dass sie keine der Optionen genutzt haben oder sich nicht daran erinnern können. Fügen Sie außerdem die Option „Sonstiges – bitte angeben: ……..." hinzu . Die unter „Sonstiges“ erfassten Antworten sollten bei der Berechnung des Indikators nicht berücksichtigt werden, können jedoch nützliche zusätzliche Erkenntnisse liefern.

  • Frage: „Haben Sie in diesem Zeitraum weitere Kenntnisse oder Fähigkeiten genutzt, die im Rahmen von [Aktivität angeben] behandelt wurden ?“

  • Prüfen Sie abschließend, ob die Teilnehmer ein konkretes Beispiel für die von ihnen angegebene Anwendung nennen können, indem Sie fragen: „Können Sie mir bitte sagen, wie und wann Sie [ das angegebene Wissen/die angegebene Fähigkeit angeben] angewendet haben ?“

• Direkte Beobachtung: Beobachten Sie, soweit dies möglich ist, ob die Teilnehmer die angestrebten Fähigkeiten korrekt anwenden, und stützen Sie sich dabei gegebenenfalls auf vorab festgelegte Kriterien. In manchen Fällen können Sie schriftliche Aufzeichnungen einsehen, aus denen die Anwendung der vermittelten Kenntnisse bzw. Fähigkeiten hervorgeht.

• Bericht einer anderen Person: In manchen Fällen ist es möglich, Vorgesetzte, Kollegen oder Mitglieder der Gemeinschaft zu befragen, ob sie beobachtet haben, dass der Teilnehmer das betreffende Wissen oder die entsprechenden Fähigkeiten angewandt hat.

 

4) Legen Sie im Voraus einen Mindeststandard fest, ab dem davon ausgegangen wird, dass ein Teilnehmer das Wissen und/oder die Fähigkeiten angewendet hat. Je nach Maßnahme kann der Standard Folgendes festlegen:

• die Mindestanzahl an wesentlichen Kenntnissen oder Fähigkeiten, die angewendet worden sein müssen;

• die Mindesthäufigkeit der Nutzung, zum Beispiel „mindestens zweimal im letzten Monat“; und/oder

• Nachweis dafür, dass eine Fertigkeit korrekt angewendet wurde.

Stellen Sie sicher, dass jeder von Ihnen festgelegte Standard leicht messbar und realistisch ist. Ziehen Sie in Betracht, einen Trainer oder eine andere Person hinzuzuziehen, die versteht, was die Teilnehmer lernen sollten. Testen Sie den Standard vorab und passen Sie ihn bei Bedarf an.

5) Erheben Sie die erforderlichen Daten zu einem geeigneten Zeitpunkt nach Abschluss der Projektmaßnahme unter Verwendung des in Schritt 2 festgelegten Bezugszeitraums.

 

6) So ermitteln Sie den Wert des Indikators:

• die Anzahl der bewerteten Teilnehmer zu ermitteln, die den in Schritt 4 definierten Mindeststandard für die Nutzung erfüllen;

• dies durch die Gesamtzahl der bewerteten Teilnehmer dividieren, bei denen festgestellt werden konnte, ob der Standard erfüllt wurde; und

• Multiplizieren Sie das Ergebnis mit 100, um es in einen Prozentsatz umzurechnen.

Erfassen Sie separat die Anzahl der Teilnehmer, bei denen nicht festgestellt werden konnte, ob die Kenntnisse oder Fähigkeiten angewendet wurden.

Diese Daten können nach Geschlecht und Altersgruppe sowie – sofern relevant und durchführbar – auch nach Art der erhaltenen Unterstützung, Behinderungsstatus und anderen relevanten Kriterien aufgeschlüsselt werden.

1) Bewerten Sie nach Möglichkeit die entsprechenden Kenntnisse und Fähigkeiten vor und nach der Projektmaßnahme. Basisdaten können Ihnen zudem dabei helfen, die Gestaltung der Maßnahmen zur Stärkung der Kenntnisse und Fähigkeiten im Rahmen eines Projekts zu optimieren.

 

2) Legen Sie fest, ob der Indikator die Anwendung von Wissen/Fähigkeiten aus einer einzelnen Projektaktivität (z. B. einer Schulung) oder die kumulative Wirkung mehrerer Projektaktivitäten messen soll. Wenden Sie diese Definition einheitlich an, wenn Sie das zu bewertende Wissen/die zu bewertenden Fähigkeiten auswählen und die Teilnehmer nach deren Anwendung befragen.

 

3)Stellen Sie sicher, dass die Teilnehmer während des Bezugszeitraumseinen realistischen Bedarf oder die Gelegenheit hatten, das Wissen bzw. die Fähigkeitenanzuwenden. Wenn sie keine solche Gelegenheit hatten, spiegelt ein niedriger Indikatorwert möglicherweise nicht ihre Bereitschaft oder Fähigkeit wider, das Gelernte anzuwenden.

 

4) Stellen Sie sicher, dass bei der Datenerhebung die tatsächliche Anwendung der Kenntnisse/Fähigkeiten erfasst wird und nicht nur die Absicht, diese anzuwenden. Bitten Sie die Teilnehmenden, konkrete Beispiele dafür zu nennen, wie und wann sie diese angewendet haben. Vergleichen Sie, soweit möglich, die selbst gemachten Angaben mit Beobachtungen, Aufzeichnungen oder Informationen von anderen Personen, um Verzerrungen aufgrund sozialer Erwünschtheit zu verringern.

 

5) Falls möglich, wiederholen Sie die Bewertung im Laufe der Zeit, beispielsweise einmal relativ kurz nach der Aktivität und erneut einige Monate später. So lässt sich feststellen, ob die Anwendung des Wissens bzw. der Fähigkeiten von Dauer ist und nicht nur kurz nach der Aktivität stattfindet.

 

6) Fragen Sie außerdem, wie und warum die Teilnehmenden das Wissen bzw. die Fähigkeiten genutzt oder nicht genutzt haben. Dies kann dabei helfen, Hindernisse und fördernde Faktoren für die Anwendung zu identifizieren und zu beurteilen, ob die Projektunterstützung den Bedürfnissen der Teilnehmenden entsprach.

Ziehen Sie auch die Verwendung der folgenden Indikatoren in Betracht:

• Erweiterung von Wissen und Fähigkeiten (misst, ob der beabsichtigte Lernerfolg erzielt wurde, bevor geprüft wird, ob er angewendet wird)

• Häufigkeit von Hindernissen für Veränderungen (erklärt unter anderem, warum die Teilnehmer zwar wissen, was zu tun ist, dies aber in der Praxis nicht umsetzen)