Advertisement · 728 × 90

Posts by Samuel P León

Post image

¿Quieres conocer mejor la mente humana? Este libro es ameno, riguroso, y breve. Lo leerás en un par de tardes. Aprenderás un montón... ¿Qué más te puedo decir? (Vale, igual estoy un poco sesgada, pero no mucho 😀)

5 days ago 27 15 2 3

¿La vida de los catedráticos?
😜

3 weeks ago 1 0 0 0
OSF

Takeaway:

Assessment format does not only affect performance—it also shapes how students monitor their own learning.

Preprint:
osf.io/preprints/ed...

3 weeks ago 0 0 0 0

Interestingly:

Confidence judgments were weakly and inconsistently related to accuracy.

More confidence ≠ better calibration

3 weeks ago 0 0 1 0

In other words:

Self-assessments tracked actual performance much more closely in open-ended questions.

Generative tasks seem to provide more diagnostic cues.

3 weeks ago 0 0 1 0

But here is the key finding:

Metacognitive resolution was substantially higher in the open-ended format.

👉 Students were better at distinguishing when they performed well vs poorly.

3 weeks ago 0 0 1 0

Main results:

• Higher performance in multiple-choice
• Higher confidence in multiple-choice

So far, nothing surprising.

3 weeks ago 0 0 1 0

We compared multiple-choice vs open-ended questions in a real university exam (N = 150).

Students completed both formats and reported:
• Self-assessments
• Confidence judgments

3 weeks ago 0 0 1 0
Advertisement
OSF

New preprint 👇

Does assessment format influence how students monitor their own performance?

osf.io/preprints/ed...

3 weeks ago 7 2 2 1
Cartel informativo: Curso por videoconferencia. HERRAMIENTAS PARA FORMAR UN ALUMNADO CRÍTICO EN LA ERA DE LA DESINFORMACIÓN. Fechas: 22 y 29 de abril, 6 de mayo. Hora: 16:30. Ponentes: Lucía Selas (Fundación Maldita.es), Fernando Blanco (Dep. Psicología Social UGR). Enlace de inscripción: https://secretariavirtual.juntadeandalucia.es/secretariavirtual/consultaCEP/actividad/262923GE604/?

Cartel informativo: Curso por videoconferencia. HERRAMIENTAS PARA FORMAR UN ALUMNADO CRÍTICO EN LA ERA DE LA DESINFORMACIÓN. Fechas: 22 y 29 de abril, 6 de mayo. Hora: 16:30. Ponentes: Lucía Selas (Fundación Maldita.es), Fernando Blanco (Dep. Psicología Social UGR). Enlace de inscripción: https://secretariavirtual.juntadeandalucia.es/secretariavirtual/consultaCEP/actividad/262923GE604/?

Docentes de primaria y secundaria de Andalucía: ¿Queréis formación en herramientas para dotar de habilidades de pensamiento crítico a vuestro alumnado? ¿Queréis abordar en el aula el tema de la desinformación, pero no sabéis cómo? Este curso puede resultaros de interés:

3 weeks ago 34 32 4 3

La verdad es que ... Pá qé??
Hoy en día no hay más que darse una vuelta por las redes (por ejemplo) para ser bombardeado por mil cursos sobre IA impartidos por "carnet cumplidos"
Un ejemplo parecido a los expertos en tecnología que lo más que saben es diseñar un PPT de gatitos y unicornios.

4 weeks ago 0 0 0 0

#SystematicReview #MetaAnalysis #OpenScience #MetaScience #EducationResearch

1 month ago 0 1 0 0
OSF

RMQS is fully open:

🔗 OSF (codebook): osf.io/fnb3a
🔗 App & code: github.com/Samigabacho/...

Feedback is very welcome as the framework continues to evolve.

1 month ago 0 0 1 0

Why does this matter?

Because it allows researchers to:

- identify which methodological features matter
- run sensitivity analyses
- better interpret evidence

Not all “quality” is the same.

1 month ago 0 0 1 0

The framework includes:

📘 A versioned codebook (RMQS v2.0)
⚙️ A structured configuration system
💻 An open Shiny app for coding, visualization & export

All designed for transparency and usability in systematic reviews.

1 month ago 1 0 1 0
Advertisement

RMQS takes a different approach:

Instead of scoring studies, it:
✔ decomposes quality into explicit criteria
✔ defines clear coding rules
✔ documents decisions in a reproducible way

→ A more diagnostic approach to methodological assessment

1 month ago 0 0 1 0

Methodological quality is central to research synthesis.

But in practice, assessments often rely on:

* unclear criteria
* implicit decisions
* aggregated scores that hide important details

This can reduce transparency and interpretability.

1 month ago 0 0 1 0
OSF

🧵 New preprint out!

How transparent is methodological quality assessment in systematic reviews?

I introduce the Revised Methodological Quality Scale (RMQS), a framework designed to make these evaluations explicit, structured, and reproducible.

🔗 doi.org/10.35542/osf...

1 month ago 7 4 1 1
Preview
El problema no es la falta de evidencia. Es la falta de criterio. Pensar con la evidencia: una cuestión de competencia profesional

Después de muchos años compartiendo evidencias, ahora estoy cada vez más interesado en las condiciones epistémicas de uso de la ciencia en general. Reflexiono sobre ello aquí: open.substack.com/pub/investig...

1 month ago 15 9 1 2
OSF

No siempre... 😅
Te dejo un preprint donde hacemos pruebas específicas para tratar de dar muestra de que el efecto NO se deba a un artefacto

"Calibration and Confidence Across Two High‑Stakes Exams: Continu-ous and Group‑Based Evidence in an Authentic Course Setting"

doi.org/10.35542/osf...

1 month ago 3 2 0 0

Muchísimas gracias a Matías y a tí por darme la oportunidad de poder compartir un gran momento hablando de ciencia y de educación.

1 month ago 2 2 0 0
Multilevel Robust Bayesian Meta-Analysis

The Robust Bayesian Meta-Analysis package got updated with additional vignettes explaining how to perform Bayesian model-averaged publication bias-adjusted

- multilevel meta-analysis (cran.r-project.org/web/packages...)
- multilevel meta-regression (cran.r-project.org/web/packages...)

3 months ago 25 11 1 0

In 2011 Bayesians argued science would improve if we switch from frequentist to Bayesian statistics.

In 2025 we have realized science improves if we have scientists with smarter ideas about improving science than proposing to switch from Bayesian to frequentist statistics.

4 months ago 46 2 9 0

Job opportunity — Junior Professorship in Psychological Metascience @zpid.bsky.social leibniz-psychology.onlyfy.jobs/job/10kku5n7 h/t @bethclarke.bsky.social

4 months ago 23 23 1 2
Post image Post image Post image Post image

New preprint 🎉 Living systematic reviews ensure evidence stays current osf.io/preprints/ps...

In this brief comment (all four pages are here ⬇️), @iaiversen.bsky.social and I cover the benefits and challenges of living systematic reviews, along with two ways to increase their uptake

🧵 1/8

4 months ago 57 16 5 3
Advertisement

Generación de Conocimiento 2026?

4 months ago 0 0 1 0

Esto quiere decir que tenéis mucho tiempo libre????
Me temo que voy a tener que hablar con uno que yo me sé! XD

Ya estoy desenado ver la 3º temporada....

4 months ago 2 0 1 0

@mabelvillaescusa.bsky.social @brazolam.bsky.social @editorialoctaedro.bsky.social @samuelpleon.bsky.social ¿Nos ayudáis a difundir esta encuesta entre el profesorado? ¡Gracias!
bsky.app/profile/eril...

5 months ago 3 2 0 0

If you'd like to read more on this, see @iansample.bsky.social 's article.

Article: www.theguardian.com/science/2025...

Paper: direct.mit.edu/qss/article/...

6 months ago 5 3 0 0

Esa escusa podría incluso estar medianamente justificada si la presencialidad tuviera además un valor diferencial en cuanto a la formación se refiere, pero mi sensación es que no es así.
Eso junto a la motivación por el título sin más hace que las Uni Privadas se estén forrando.

6 months ago 0 0 0 0