Berichten

“Peer reviewed research” bij koppeling Fitbit aan Cardiogram app: 4x rommel blijft rommel

peerSinds eind juni 2019 kan een klant de Cardiogram-app van Amerikaanse makelij niet alleen aan Apple-apparatuur(smartwatch, iPhone) koppelen, maar ook aan de fitness-tracker Fitbit. Het bedrijf Cardiogram pretendeert met wearables, zoals de smartwatch, op basis van registratie van de hartfrequentie meerdere ziekten te kunnen ontdekken bij dragers. Niet alleen hartritme-afwijkingen, maar ook het slaap-apneu-syndroom, hoge bloeddruk en suikerziekte. Op die beweringen is heel veel af te dingen. Over die samenwerking met de Apple smartwatch en de Fitbits staat op de website van Cardiogram een webpagina met de suggestieve kop Peer Reviewed Research. Duidelijk bedoeld om te imponeren, maar het gaat om een opsomming van zeer slordige , suggestieve wetenschap:  “sloppy science”. De bedoeling van de koppeling met Fitbit is om een veel groter publiek te bereiken en zo een omvangrijker, maar laakbaar, verdienmodel te hebben met ongeruste zielen. Het feit dat gepubliceerde onderzoeken “peer reviewed” zijn zegt nog niet veel over de kwaliteit van het onderzoek. Tijdschriften met een zeer magere reputatie kunnen best wel artikelen door meerdere beoordelaars uit het veld hebben laten bekijken. Het enkele feit dat ze zo beoordeeld worden maakt  de artikelen niet opeens zeer betrouwbaar.

Lees meer

Apple Watch bijt weer in het zand als medisch diagnostisticum

Apple smartwatch

Twee keer, in 2017 en 2018, publiceerde ik op deze website artikelen over het tevergeefs ziekten proberen vast te stellen  met behulp van smartwatches, in het bijzonder de Apple watch. Uit een zeer recente publicatie op 21 maart 2018 in de Journal of the American Medical Association(JAMA) blijkt dat de genoemde smartwatch in de verste verte niet als betrouwbaar diagnostisch hulpmiddel voor het vaststellen van atriumfibrilleren, een bepaalde vorm van een onregelmatige hartslag, te gebruiken is. De publicatie is weer afkomstig van een onderzoeksgroep aan de University of California, San Francisco(UCSF) met Brandon Ballinger als één van de auteurs. Het falen van de Apple smartwatch voor dit doel is niet direct af te leiden uit de kop en oppervlakkige lezing van de samenvatting van het artikel( “Passive Detection of Atrial Fibrillation Using a Commercially Available Smartwatch”). Pas als men de inhoud tot zich door laat dringen wordt het duidelijk dat de smartwatch jammerlijk faalde om betrouwbaar atriumfibrilleren vast te stellen en dus ten enenmale ongeschikt is om ook deze ziektetoestand vast te stellen.

Lees meer

How to produce bullshit about diabetes detection with heartrate sensors on smartwatches

bullshit

De afgelopen paar dagen is er in de Amerikaanse media, die publiceren over de zegeningen van de “wearables”, zoals smartwatches en fitnesstrackers a la Fitbit, fors uitgepakt over het kunnen detecteren van diabetes met smartwatches. Ook Nederlandse media doken erop, zoals onder andere de website Smarthealth en de iCulture-website. De aanleiding is de presentatie van een onderzoeksgroep van de universiteit van San Francisco samen met de mensen achter de medische startup Cardiogram, (klik hier op de link Recent Claim) die de gelijknamige app maakt, op een congres van de Association for the Advancement of Artificial Intelligence (AAAI) in New Orleans van 2 tot 7 februari. Het onderzoek dat nog niet in vakliteratuur gepubliceerd is pretendeert met behulp van gebruik van hartfrequentie-data van smartwatches(Apple), geanalyseerd met een diep neuraal netwerk genaamd DeepHeart, diabetes mellitus met een accuratesse van 85 procent vast te stellen. Eerder publiceerden dezelfde mensen resultaten van onderzoek waarbij met dezelfde methodiek slaapapneu en hypertensie vastgesteld zouden kunnen worden. Dat onderzoek kon op zijn zachtst gezegd “sloppy science” genoemd worden, omdat de beschreven nauwkeurigheid op de keper beschouwd nogal fors tegenvalt en tot forse aantallen fout-positieven en fout-negatieven leidt. Ik publiceerde daar op 24 november 2017 over. 

Lees meer

Sloppy science met Apple Watch samen met Cardiogram-app

smart-watchOp meerdere websites was rond 14 november 2017 te lezen dat hoge bloeddruk en het slaap-apneu-syndroom verrassend goed vast te stellen zou zijn met de app Cardiogram op een Apple Watch. De publicatie waarop dit verhaal gebaseerd is, werd als abstract op die datum gepubliceerd in het magazine Circulation van de American Heart Association. Het artikel oogt indrukwekkend met als titel: “Cardiovascular Risk Stratification Using Off-the-Shelf Wearables and a Multi-Task Deep Learning Algorithm “. Geschermd wordt met het gebruik van een “deep neural network” waarbij door middel van algoritmen computerprogramma’s voorspellingen kunnen doen over medische diagnose op basis van data afkomstig van “wearables”. Dat zijn draagbare sensors van lichaamsfuncties, zoals die zitten in diverse smart-watches en fitness-trackers(FitBit bijv.). Bij nadere beschouwing van de vermelde gegevens blijkt de accuratesse van de gebruikte methode nogal tegen te vallen en zullen de resultaten eerder ongerustheid bij smartwatch-dragers vergroten en leiden tot medische overconsumptie.

Lees meer