image_pdfimage_print
27 mrt

Apple Watch bijt weer in het zand als medisch diagnostisticum

Apple smartwatch

Twee keer, in 2017 en 2018, publiceerde ik op deze website artikelen over het tevergeefs ziekten proberen vast te stellen  met behulp van smartwatches, in het bijzonder de Apple watch. Uit een zeer recente publicatie op 21 maart 2018 in de Journal of the American Medical Association(JAMA) blijkt dat de genoemde smartwatch in de verste verte niet als betrouwbaar diagnostisch hulpmiddel voor het vaststellen van atriumfibrilleren, een bepaalde vorm van een onregelmatige hartslag, te gebruiken is. De publicatie is weer afkomstig van een onderzoeksgroep aan de University of California, San Francisco(UCSF) met Brandon Ballinger als één van de auteurs. Het falen van de Apple smartwatch voor dit doel is niet direct af te leiden uit de kop en oppervlakkige lezing van de samenvatting van het artikel( “Passive Detection of Atrial Fibrillation Using a Commercially Available Smartwatch”). Pas als men de inhoud tot zich door laat dringen wordt het duidelijk dat de smartwatch jammerlijk faalde om betrouwbaar atriumfibrilleren vast te stellen en dus ten enenmale ongeschikt is om ook deze ziektetoestand vast te stellen.

Lees verder

09 feb

How to produce bullshit about diabetes detection with heartrate sensors on smartwatches

bullshit

De afgelopen paar dagen is er in de Amerikaanse media, die publiceren over de zegeningen van de “wearables”, zoals smartwatches en fitnesstrackers a la Fitbit, fors uitgepakt over het kunnen detecteren van diabetes met smartwatches. Ook Nederlandse media doken erop, zoals onder andere de website Smarthealth en de iCulture-website. De aanleiding is de presentatie van een onderzoeksgroep van de universiteit van San Francisco samen met de mensen achter de medische startup Cardiogram, (klik hier op de link Recent Claim) die de gelijknamige app maakt, op een congres van de Association for the Advancement of Artificial Intelligence (AAAI) in New Orleans van 2 tot 7 februari. Het onderzoek dat nog niet in vakliteratuur gepubliceerd is pretendeert met behulp van gebruik van hartfrequentie-data van smartwatches(Apple), geanalyseerd met een diep neuraal netwerk genaamd DeepHeart, diabetes mellitus met een accuratesse van 85 procent vast te stellen. Eerder publiceerden dezelfde mensen resultaten van onderzoek waarbij met dezelfde methodiek slaapapneu en hypertensie vastgesteld zouden kunnen worden. Dat onderzoek kon op zijn zachtst gezegd “sloppy science” genoemd worden, omdat de beschreven nauwkeurigheid op de keper beschouwd nogal fors tegenvalt en tot forse aantallen fout-positieven en fout-negatieven leidt. Ik publiceerde daar op 24 november 2017 over. 

Lees verder

24 nov

Sloppy science met Apple Watch samen met Cardiogram-app

smart-watchOp meerdere websites was rond 14 november 2017 te lezen dat hoge bloeddruk en het slaap-apneu-syndroom verrassend goed vast te stellen zou zijn met de app Cardiogram op een Apple Watch. De publicatie waarop dit verhaal gebaseerd is, werd als abstract op die datum gepubliceerd in het magazine Circulation van de American Heart Association. Het artikel oogt indrukwekkend met als titel: “Cardiovascular Risk Stratification Using Off-the-Shelf Wearables and a Multi-Task Deep Learning Algorithm “. Geschermd wordt met het gebruik van een “deep neural network” waarbij door middel van algoritmen computerprogramma’s voorspellingen kunnen doen over medische diagnose op basis van data afkomstig van “wearables”. Dat zijn draagbare sensors van lichaamsfuncties, zoals die zitten in diverse smart-watches en fitness-trackers(FitBit bijv.). Bij nadere beschouwing van de vermelde gegevens blijkt de accuratesse van de gebruikte methode nogal tegen te vallen en zullen de resultaten eerder ongerustheid bij smartwatch-dragers vergroten en leiden tot medische overconsumptie.

Lees verder

17 mrt

Sloppy thinking, sloppy statistics, sloppy science bij eHealthpromotie

iWatch en iPhoneHet Nederlandstalige internet magazine Computerworld kwam op 15 maart 2017 met een artikel voorzien van een opzienbarende kop. “Zo redt de Apple Watch levens met deep learning. De Apple Watch ontdekt diabetes en meer aan de hand van hartslag.” Bij kritische lezing van het stuk blijkt de vlag de lading niet te dekken. Aan een elektronisch apparaat en de bijbehorende software worden eigenschappen toegeschreven die in genen dele waar te maken zijn. De bewering dat met een smartwatch van Apple een ziekte als diabetes vastgesteld kan worden, epileptische aanvallen tijdig ontdekt kunnen worden, men vrij nauwkeurig een hoog cholesterolgehalte en slaap-apnoe kan vaststellen wekt zeer grote verwachtingen. De smartwatch zou dat doen op basis van de geregistreerde hartfrequentie en bewegingssensor, waarbij een algoritme kijkt naar verschillen en patronen. Data-analyse, machine learning en deep learning zouden de methodieken zijn waarmee deze afwijkingen vastgesteld kunnen worden. Grote woorden met weinig inhoud.  Met wat basale medische en statistische kennis is dit soort eHealth-propaganda snel te ontzenuwen. Ook blijkt deze berichtgeving mede gebaseerd te zijn op onderzoek dat eerder dit jaar, in januari 2017 gepubliceerd werd door de Stanford University uit de V.S. Die publicatie is gewoonweg “sloppy science”. In de laatste alinea staat er een verwijzing naar. Diagnostische eigenschappen worden daarin toegeschreven aan de zogenaamde wearables, smartwatches en handheld meters, die niet waar te maken zijn.

Lees verder