English

Education Vital Signs (EVS) is a statistically validated, normed assessment of school climate.

School climate is an indicator of the collective feelings, relationships, and perceptions in the learning environment. A positive culture drives engagement, unlocks collaboration, and fuels learning.

EVS is a well-validated tool first developed in 2002; EVS has been subject to four different validation studies, most recently in 2015. The 2015 re-analysis and norms are based on 6200 individuals. The total EVS database includes over 15,000 responses from students, parents, teachers and administrators over 100 schools ranging from 100-2000 students, a mix of private, public, religious, and charter schools primarily in the US, Canada, and Asia.

The EVS is normed and standardized with a median score of 100 and a 15-point standard deviation following a bell curve typical of psychometric assessments such as the SEI (Six Seconds Emotional Intelligence assessment).

The EVS quickly identifies drivers both supporting and interfering with school success. The school/district climate reflects critical attitudes and behaviors of all stakeholders. These drivers of school climate significantly enhance student/teacher/staff/parent/administrator ability to work together effectively, resulting in success for all students and adults.

The EVS drivers of school climate are:

· Commitment

· Connection

· Accountability

· Growth

· Trust

The EVS outcomes aligned to the drivers of school climate are:

· Learning

· Involvement

· Safety

· Thriving

The climate factors of commitment, connection, accountability, growth, and trust predict 67.45% of the school’s success on the critical outcomes of school and:

55.14% of Involvement
58.39% of Learning
32.08% of Safety
53.54% of Thriving

The EVS creates a snapshot of the current school climate – an overview of community members’ relationship with the school. The climate is the context in which faculty work each day, in which students learn, and in which parents interact; our research shows that the climate based on these perceptions of “connectedness” strongly influences learning, involvement, safety, and thriving.

Value:

The value of the EVS process comes from an engaging dialogue about the survey results; we see these statistics as questions – not answers.

The EVS can be used to create buy-in for re-examination of a school’s mission, goals and objectives. It is valuable to aid leaders in supporting students, faculty, and parents during periods of stress, change, and growth. It provides an opportunity to start with a baseline of school climate and then measure improvement. It is an opportunity for collaboration and discussion by all stakeholders, resulting in a sense of increased alignment, inclusion, and engagement.

The confidential assessment is completed online by all or selected constituents in a school or district. The survey takes 10-20 minutes to complete. The entire process, from announcement to results, can be completed in less than two weeks.

With the EVS, a variety of different stakeholder groups can be examined. Subgroups can be created based on faculty and staff, students, administrators, and parents. In addition, subgroups such as departments, geographic locations, and types of support staff can be compared to identify areas of agreement or disagreement.

An examination of the perceptions of various stakeholder groups can validate the needs of specific groups and help target interventions. Critical customized questions may be added to measure the effects of a school’s ongoing initiatives and pinpoint specific strengths and concerns (e.g. bullying). The process of deciding questions is, itself, a powerful step in building engagement.

The EVS was developed by Six Seconds’ team of emotional intelligence (EQ) experts – Anabel Jensen, Ph.D., Joshua Freedman, and Carina Fiedeldey-Van Dijk, Ph.D. Drawing on the authors’ extensive backgrounds in EQ, the tool examines areas where emotionally intelligent and emotionally unintelligent behavior often affects performance and school culture.

Appendix A:

Additional statistical validity and reliability data

The EVS has undergone three separate and rigorous validation studies, most recently in 2014. Excluding statistically identified outlier responses, the database has qualities that adhere to the strictest psychometric standards for norming. The responses of individual schools/districts can be standardized against this database.

Descriptive statistics based on the norm group of the EVS, dimensions and outcomes of performance comply well with validation guidelines. Good concurrent validity is demonstrated by the components that explain 67.45% of the outcomes in a regression model.

Internal Consistency

One way to report on the reliability of a psychometric measure is to calculate the internal consistency of its underlying scales. Internal consistency refers to the extent to which items assigned to a test scale are correlated to one another.

Cronbach’s coefficient alpha ranges from 0.747-0.945 based on a small number of items per EVS component, indicating excellent reliability for the climate factors. Good alpha ranges are evident also for the outcomes, between 0.727 and 0.929. Cronbach’s coefficient alpha was used to calculate the internal consistency of the EVS factors and the dimension of Trust. This statistic can range from 0 to 1.0 and indicates to what extent the items in a factor measure the same construct. The internal consistency of the EVS climate factors and the Trust factor are strong and desirable.

Climate Factors:

COMMITMENT – 4 items – alpha .770

CONNECTION – 4 items – alpha .810

ACCOUNTABILITY – 4 items – alpha .747

GROWTH – 5 items – alpha .804

TRUST – 4 items – alpha .806

Climate Outcomes:

INVOLVEMENT – 3 items – alpha .729

LEARNING – 3 items – alpha .838

SAFETY – 3 items – alpha .727

THRIVING – 3 items – alpha .875

Survey statements are randomly ordered so as not to be leading in responses to a five-point, interval (Likert) scale, which enhances accuracy in assessment.

Italiano

L'Education Vital Signs (EVS) è un assessment statisticamente validato e normato che mette il focus sul clima scolastico.

Il clima di una Scuola è un indicatore di un insieme di sentimenti, relazioni e percezioni presenti in un ambiente dove si apprende. Una cultura positiva guida la motivazione, sblocca la collaborazione e alimenta l’apprendimento..

L'EVS è uno strumento ben validato sviluppato nel 2002; l'EVS è stato sottoposto a quattro differenti studi di validazione, il più recente nel 2015. Lo studio del 2015 è basato su 6200 persone. L’intero database EVS include oltre 15.000 risposte da studenti, genitori, insegnanti e personale amministrativo in oltre 100 scuole con un range di 100-2000 studenti, un mix di scuole private, pubbliche, religiose, principalmente negli Stati Uniti, in Canada e in Asia.

L'EVS è stato normato e standardizzato con un punteggio medio di 100 e con 15 punti di deviazione standard seguendo una tipica curva a campana di assessment psicometrici come il SEI (Six Seconds Emotional Intelligence assessment).

L'EVS identifica rapidamente elementi elementi che supportano e che interferiscono con il successo scolastico. Il clima dell’istituto/plesso riflette le attitudini e i comportamenti di tutti i soggetti interessati. Questi fattori del clima scolastico migliorano notevolmente la capacità di studenti/insegnanti/staff/genitori/amministratori di lavorare insieme con efficacia, garantendo iil successo per tutti i ragazzi e gli adulti.

I fattori EVS per il clima scolastico sono:

· Impegno

· Appartenenza

· Responsabilità

· Crescita

· Fiducia

Gli outcome EVS che scaturiscono dai fattori del clima sono:

· Apprendimento

· Coinvolgimento

· Sicurezza

· Benessere

I fattori del clima ovvero impegno, appartenenza, responsabilità, crescita, e fiducia predicono il 67.45% del successo scolastico ed in particolare le seguenti percentuali sui singoli outcome:

55.14% del coinvolgimento
58.39% dell’apprendimento
32.08% della sicurezza
53.54% del benessere

L'EVS crea un’istantanea dell’attuale clima della scuola – una panoramica delle relazioni dei membri della comunità con l’organizzazione. Il clima è il contesto in cui lavora lo staff ogni giorno, in cui gli studenti apprendono e in cui i genitori interagiscono; la nostra ricerca evidenzia come un clima basato su questa percezione di connessione influenza notevolmente l’apprendimento, il coinvolgimento, la sicurezza ed il benessere.

Valore:

Il valore del processo EVS viene da un coinvolgente dialogo sui risultati dell’indagine; vediamo il valore di queste statistiche nelle domande che generano piuttosto che vederle come risposte.

L'EVS può essere utilizzato per mettere a bordo e riesaminare la missione della scuola e i suoi obiettivi. Ha un gran valore nell'aiutare i leader nel supportare gli studenti, il personale e i genitori in periodi di stress, cambiamento e crescita. Fornisce un’opportunità di partire con la base del clima scolastico per poi misurare i miglioramenti. Crea la possibilità di collaborare e conversare tra tutti gli interessati in modo da aumentare il senso di allineamento, inclusione e coinvolgimento di tutti.

Il questionario è confidenziale e viene compilato online da tutte le persone selezionate nella scuola. Richiede circa 10-20 minuti per essere completato. L’intero processo, dall’annuncio dell’avvio fino alla presentazione dei risultati può completarsi anche in meno di due settimane.

Con l'EVS, si può esaminare una gran varietà di differenti gruppi. Si possono creare dei sottogruppi come ad esempio studenti, genitori, staff…. Inoltre, sottogruppi come dipartimenti, filiali geografiche, e diverse figure di staff potranno essere comparate in modo da identificare aree di accordo o di disaccordo.

Un esame delle diverse percezione dei gruppi di stakeholder possono validare o far emergere bisogni di specifici gruppi ed agevolare la pianificazione di azioni specifiche. Posso anche essere aggiunte domande personalizzate reputate strategiche in modo da valutare l’effetto di iniziative in corso e specifici punti di attenzione per la scuola (es. bullismo). Il processo per decidere le domande è già di per se un potente passo nel creare coinvolgimento.

L'EVS è stato sviluppato dal team di esperti sull’Intelligenza Emotiva di Six Seconds – Anabel Jensen, Ph.D., Joshua Freedman, e Carina Fiedeldey-Van Dijk, Ph.D. Poggiando sul notevole background sull’EQ degli autori, lo strumento esamina aree dove comportamenti emotivamente intelligenti o emotivamente non intelligenti influiscono sulla performance e sulla cultura scolastica.

Appendice A:

Ulteriori dati sulla validità e attendibilità statistica

L'EVS è passato attraverso vari studi di validazioni, il più recente iniziato nel 2014. Escludendo risposte non considerate di rilevanza statistica, il database esaminato ha una qualità che rispetta i più stringenti standard della norma psicometrica. Le risposte delle persone possono essere standardizzate in relazione a questo database.

La statistic descrittiva basata sulla norma del gruppo esaminato per l’EVS evidenzia come le dimensioni e gli outcome di performance sono strettamente correlati e aderenti alle linee guida per la validazione. Un buon dato che fa emergere la validità è dimostrato dai fattori che spiegano il 67.45% dei risultati/outcome secondo il modello di regressione lineare.

Consistenza Interna

Un buon modo per descrivere l’affidabilità della misurazione psicometrica è il calcolo della consistenza delle specifiche scale di misurazione. La consistenza interna si riferisce alla misura in cui i fattori esaminati sono correlati tra loro in accordo con la scala del campione di riferimento.

Il coefficiente dell’alpha di Cronbach varia in un range da 0.747-0.945 , indicando un’eccellente affidabilità dei fattori del clima come predittivi della performance. Buoni valori di alpha sono evidenti anche per gli outcome con un range tra 0.727 e 0.929. Il coefficiente dell’alpha di Cronbach viene utilizzato per calcolare la consistenza interna dei fattori dell’EVS e della dimensione della Fiducia. Questa statistica può variare da 0 a 1.0 e indica in che misura gli items rispetto un fattore misurano lo stesso costrutto. La consistenza interna dei fattori del clima dell’EVS ed il fattore della Fiducia mostrano di essere solidi oltre che auspicabili.

Fattori del clima:

IMPEGNO – 4 items – alpha .770

APPARTENENZA– 4 items – alpha .810

RESPONSABILITÀ – 4 items – alpha .747

CRESCITA– 5 items – alpha .804

FIDUCIA – 4 items – alpha .806

Ooutcomes/risultati del clima:

COINVOLGIMENTO – 3 items – alpha .729

APPRENDIMENTO – 3 items – alpha .838

SICUREZZA – 3 items – alpha .727

BENESSERE – 3 items – alpha .875

EVS Technical Briefing