Evaluation of video content quality on PCSK9 inhibitors in social media

Abstract

Background and aims

The internet is a major source of health information, with platforms like YouTube® and Facebook® widely used by patients to learn about diseases and treatments. However, the reliability of content on PCSK9 inhibitors (PCSK9i), a therapy for dyslipidemia, remains unknown. This study aims to evaluate the general characteristics, user engagement metrics, reliability, comprehensiveness, and quality of English- and Spanish-language PCSK9i videos on YouTube® and Facebook®.

Materials and methods

Analytical observational study. Paired evaluations were conducted using validated tools: the modified DISCERN (mDISCERN) for reliability, a modified content score for comprehensiveness, and the Global Quality Score (GQS) for quality. Comparisons were made based on platform, source, and language.

Results

A total of 203 videos were analyzed. YouTube® videos had significantly higher median views, longer duration, and greater engagement than Facebook® videos, while Facebook® contained a higher proportion of non-valuable content (19.6% vs. 3.2%, p < 0.001). Most videos targeted patients and healthcare professionals, with professional organizations and independent users as the primary contributors. YouTube® videos were more frequently rated as “good or better” based on mDISCERN, content score, and GQS. Notably, for-profit organizations achieved the highest content scores and GQS values. Inter-rater reliability was excellent across all scoring tools, with kappa coefficients exceeding 0.89.

Conclusions

YouTube® videos on PCSK9i had higher engagement and reliability than those on Facebook®. For-profit organizations produced the most reliable and exhaustive videos. However, overall quality remains suboptimal, underscoring the need for greater oversight and effective strategies to ensure the dissemination of accurate, high-quality information.

Resumen

Introducción

Las plataformas digitales son una fuente común de información para pacientes sobre enfermedades y tratamientos. Sin embargo, no existen estudios que evalúen la fiabilidad del contenido sobre inhibidores de PCSK9 (PCSK9i). Este estudio analizó las características, la interacción y la calidad de videos en inglés y español sobre PCSK9i en YouTube® y Facebook®.

Materiales y métodos

Estudio observacional analítico. Se realizaron evaluaciones pareadas con herramientas validadas: el DISCERN modificado (mDISCERN) para la confiabilidad, un puntaje de contenido modificado para la exhaustividad y el Global Quality Score (GQS) para la calidad. Se compararon resultados por plataforma, fuente e idioma.

Resultados

Se analizaron 203 videos. Los de YouTube® mostraron medianas significativamente mayores en visualizaciones, además de mayor duración e interacción, mientras que Facebook® tuvo más contenido no valioso (19.6% vs. 3.2%, p < 0.001). La mayoría se dirigía a pacientes y profesionales de la salud, siendo las organizaciones profesionales y usuarios independientes los principales creadores. Los videos de YouTube® fueron calificados con mayor frecuencia como “buenos o mejores” según mDISCERN, puntaje de contenido y GQS. Las entidades con fines de lucro obtuvieron los puntajes más altos. La concordancia entre evaluadores fue excelente (coeficientes kappa > 0.89).

Conclusiones

Los videos sobre PCSK9i en YouTube® mostraron mayor interacción y fiabilidad que los de Facebook®. Las entidades con fines de lucro produjeron el contenido más fiable y exhaustivo. No obstante, la calidad general fue subóptima, lo que resalta la necesidad de mayor supervisión y estrategias eficaces para mejorar la información disponible.