¿Quieres conocer mejor la mente humana? Este libro es ameno, riguroso, y breve. Lo leerás en un par de tardes. Aprenderás un montón... ¿Qué más te puedo decir? (Vale, igual estoy un poco sesgada, pero no mucho 😀)
Posts by Samuel P León
¿La vida de los catedráticos?
😜
Takeaway:
Assessment format does not only affect performance—it also shapes how students monitor their own learning.
Preprint:
osf.io/preprints/ed...
Interestingly:
Confidence judgments were weakly and inconsistently related to accuracy.
More confidence ≠ better calibration
In other words:
Self-assessments tracked actual performance much more closely in open-ended questions.
Generative tasks seem to provide more diagnostic cues.
But here is the key finding:
Metacognitive resolution was substantially higher in the open-ended format.
👉 Students were better at distinguishing when they performed well vs poorly.
Main results:
• Higher performance in multiple-choice
• Higher confidence in multiple-choice
So far, nothing surprising.
We compared multiple-choice vs open-ended questions in a real university exam (N = 150).
Students completed both formats and reported:
• Self-assessments
• Confidence judgments
New preprint 👇
Does assessment format influence how students monitor their own performance?
osf.io/preprints/ed...
Cartel informativo: Curso por videoconferencia. HERRAMIENTAS PARA FORMAR UN ALUMNADO CRÍTICO EN LA ERA DE LA DESINFORMACIÓN. Fechas: 22 y 29 de abril, 6 de mayo. Hora: 16:30. Ponentes: Lucía Selas (Fundación Maldita.es), Fernando Blanco (Dep. Psicología Social UGR). Enlace de inscripción: https://secretariavirtual.juntadeandalucia.es/secretariavirtual/consultaCEP/actividad/262923GE604/?
Docentes de primaria y secundaria de Andalucía: ¿Queréis formación en herramientas para dotar de habilidades de pensamiento crítico a vuestro alumnado? ¿Queréis abordar en el aula el tema de la desinformación, pero no sabéis cómo? Este curso puede resultaros de interés:
La verdad es que ... Pá qé??
Hoy en día no hay más que darse una vuelta por las redes (por ejemplo) para ser bombardeado por mil cursos sobre IA impartidos por "carnet cumplidos"
Un ejemplo parecido a los expertos en tecnología que lo más que saben es diseñar un PPT de gatitos y unicornios.
RMQS is fully open:
🔗 OSF (codebook): osf.io/fnb3a
🔗 App & code: github.com/Samigabacho/...
Feedback is very welcome as the framework continues to evolve.
Why does this matter?
Because it allows researchers to:
- identify which methodological features matter
- run sensitivity analyses
- better interpret evidence
Not all “quality” is the same.
The framework includes:
📘 A versioned codebook (RMQS v2.0)
⚙️ A structured configuration system
💻 An open Shiny app for coding, visualization & export
All designed for transparency and usability in systematic reviews.
RMQS takes a different approach:
Instead of scoring studies, it:
✔ decomposes quality into explicit criteria
✔ defines clear coding rules
✔ documents decisions in a reproducible way
→ A more diagnostic approach to methodological assessment
Methodological quality is central to research synthesis.
But in practice, assessments often rely on:
* unclear criteria
* implicit decisions
* aggregated scores that hide important details
This can reduce transparency and interpretability.
🧵 New preprint out!
How transparent is methodological quality assessment in systematic reviews?
I introduce the Revised Methodological Quality Scale (RMQS), a framework designed to make these evaluations explicit, structured, and reproducible.
🔗 doi.org/10.35542/osf...
Después de muchos años compartiendo evidencias, ahora estoy cada vez más interesado en las condiciones epistémicas de uso de la ciencia en general. Reflexiono sobre ello aquí: open.substack.com/pub/investig...
No siempre... 😅
Te dejo un preprint donde hacemos pruebas específicas para tratar de dar muestra de que el efecto NO se deba a un artefacto
"Calibration and Confidence Across Two High‑Stakes Exams: Continu-ous and Group‑Based Evidence in an Authentic Course Setting"
doi.org/10.35542/osf...
Muchísimas gracias a Matías y a tí por darme la oportunidad de poder compartir un gran momento hablando de ciencia y de educación.
The Robust Bayesian Meta-Analysis package got updated with additional vignettes explaining how to perform Bayesian model-averaged publication bias-adjusted
- multilevel meta-analysis (cran.r-project.org/web/packages...)
- multilevel meta-regression (cran.r-project.org/web/packages...)
In 2011 Bayesians argued science would improve if we switch from frequentist to Bayesian statistics.
In 2025 we have realized science improves if we have scientists with smarter ideas about improving science than proposing to switch from Bayesian to frequentist statistics.
Job opportunity — Junior Professorship in Psychological Metascience @zpid.bsky.social leibniz-psychology.onlyfy.jobs/job/10kku5n7 h/t @bethclarke.bsky.social
New preprint 🎉 Living systematic reviews ensure evidence stays current osf.io/preprints/ps...
In this brief comment (all four pages are here ⬇️), @iaiversen.bsky.social and I cover the benefits and challenges of living systematic reviews, along with two ways to increase their uptake
🧵 1/8
Generación de Conocimiento 2026?
Esto quiere decir que tenéis mucho tiempo libre????
Me temo que voy a tener que hablar con uno que yo me sé! XD
Ya estoy desenado ver la 3º temporada....
@mabelvillaescusa.bsky.social @brazolam.bsky.social @editorialoctaedro.bsky.social @samuelpleon.bsky.social ¿Nos ayudáis a difundir esta encuesta entre el profesorado? ¡Gracias!
bsky.app/profile/eril...
If you'd like to read more on this, see @iansample.bsky.social 's article.
Article: www.theguardian.com/science/2025...
Paper: direct.mit.edu/qss/article/...
Esa escusa podría incluso estar medianamente justificada si la presencialidad tuviera además un valor diferencial en cuanto a la formación se refiere, pero mi sensación es que no es así.
Eso junto a la motivación por el título sin más hace que las Uni Privadas se estén forrando.