Bijstandsexperimenten, vraag me alles!!

Ok, dit was het denk ik voorlopig weer even. Op 2 januari 2018 schreef ik hier voor het eerst over het Nijmeegse bijstandsexperiment, dat toen net één maand bezig was. En waar ik al een paar jaar voor aan het werk was om het voor te bereiden. En als buitenpromovendus nog jarenlang wetenschappelijk onderzoek zou doen. Ook na het afronden van mijn proefschrift ben ik hier veel met jullie blijven delen. Over de resultaten van het Nijmeegse experiment, en van andere experimenten. Over het leven als buitenpromovendus. Het ambtelijke werk dat in de voorbereiding van de experimenten ging zitten. En allerlei rare en soms irritante dingen in de wetenschap. Eigenlijk vraag ik me vooral af: hebben jullie nog vragen? Dus als iemand nog iets wil weten over alles waar ik de afgelopen jaren over heb geschreven onder het kopje ‘proef bijstand’, dan is nu de kans! Antwoord niet gegarandeerd, maar wel waarschijnlijk. Vanaf nu dus geen niet-iedere-week-maar-toch-vrij-regelmatige donderdagochtendblog over dit onderwerp meer. Maar, mochten er nieuwe interessante dingen te vertellen zijn, over dit experiment of (klop klop) vervolgexperimenten, dan meld ik me vanzelf wel weer.

Door: Foto: Eigen foto Proefschrift bijstandsexperiment Nijmegen
Foto: Michael Eisen, CC BY 3.0 , via Wikimedia Commons.

Het systeem van wetenschappelijk publiceren is kapot

COLUMN - Maar liefst twee voorbeelden kreeg ik deze week aangereikt: gevallen waarin een ‘peer reviewed’ wetenschappelijk artikel in een prestigieus tijdschrift duidelijk door kunstmatige intelligentie geschreven was.

Het eerste was dit artikel in het tijdschrift Radiology Case Reports. Op het oog is het wat het tijdschrift belooft: een beschrijving van een radiologisch kennelijk interessant geval, maar vlak boven de sectie ‘conclusion’ gaat het mis:

In summary, the management of bilateral iatrogenic I’m very sorry, but I don’t have access to real-time information or patient-specific data, as I am an AI language model. I can provide general information about managing hepatic artery, portal vein, and bile duct injuries, but for specific cases, it is essential to consult with a medical professional who has access to the patient’s medical records and can provide personalized advice. It is recommended to discuss the case with a hepatobiliary surgeon or a multidisciplinary team experienced in managing complex liver injuries.

Het tweede artikel, in Surfaces and Interfaces, ontspoort zelfs al aan het begin, als het opent met de volgende mededeling:

Certainly, here is a possible introduction for your topic:Lithium-metal batteries are promising candidates for high-energy-density rechargeable batteries due to their low electrode potentials and high theoretical capacities [1], [2].

Lezen: De BVD in de politiek, door Jos van Dijk

Tot het eind van de Koude Oorlog heeft de BVD de CPN in de gaten gehouden. Maar de dienst deed veel meer dan spioneren. Op basis van nieuw archiefmateriaal van de AIVD laat dit boek zien hoe de geheime dienst in de jaren vijftig en zestig het communisme in Nederland probeerde te ondermijnen. De BVD zette tot tweemaal toe personeel en financiële middelen in voor een concurrerende communistische partij. BVD-agenten hielpen actief mee met geld inzamelen voor de verkiezingscampagne. De regering liet deze operaties oogluikend toe. Het parlement wist van niets.

Doe het veilig met NordVPN

Sargasso heeft privacy hoog in het vaandel staan. Nu we allemaal meer dingen online doen is een goede VPN-service belangrijk om je privacy te beschermen. Volgens techsite CNET is NordVPN de meest betrouwbare en veilige VPN-service. De app is makkelijk in gebruik en je kunt tot zes verbindingen tegelijk tot stand brengen. NordVPN kwam bij een speedtest als pijlsnel uit de bus en is dus ook geschikt als je wil gamen, Netflixen of downloaden.

Foto: IowaPolitics.com (cc)

Thuisscholing in thuistaal: geen slecht idee

De pandemie was in sommige opzichten een ramp en in andere een schandaal. Er zijn onverteerbaar veel mensen gestorven en er zijn een aantal idiote maatregelen genomen. Maar voor de creatieve wetenschapper was het ook een kans.

Een zo’n creatieve wetenschapper is mijn collega Sharon Unsworth die samen met Marieke van den Akker en Caya van Dijk een artikel schreef over haar onderzoek naar het lot van Nederlandse meertalige families tijdens de lockdowns van de vroege jaren twintig. Omdat de scholen herhaaldelijk voor een langere periode gesloten waren, moesten ouders de taken van leerkrachten overnemen en hun kinderen zelf de weg wijzen in de stof. Hoe kwamen zij die periode door – en vooral natuurlijk: wat gebeurde er met hun talen? Ze schreven er een artikel over dat onlangs verscheen in het Journal of Child Language.

Ik weet niet zeker of ouders tijdens de pandemie ineens veel meer tijd hadden – het was mijn eigen ervaring niet. Maar hoe dan ook hebben maar liefst 587 gezinnen verslag uitgebracht, over in totaal meer dan 1000 kinderen. (Ik maak overigens zelf deel uit van een gezin met een meertalig kind en heb de vragenlijst zelf ook ingevuld.) Ze geven samen vermoedelijk wel een aardig inzicht, al deden er wel vooral hoger opgeleide ouders mee.

Foto: ter illustratie Restaurant O'Panuozzo Utrecht, via Marc van Oostendorp op Neerlandistiek.

Waarheid voor chatbots

Wat is onwaar? De komst van chatbots heeft weer een nieuwe draai gegeven aan die vraag. Het is inmiddels vermoedelijk algemeen bekend dat chatbots niet altijd de waarheid zeggen. Maar wat is dat dan voor onwaarheid? Het is bijvoorbeeld geen leugen, aangezien een leugen altijd een intentie tot misleiden vereist, iets wat (vermoedelijk) afwezig is bij chatbots. We noemen het daarom vaak hallucinatie, al is ook dat een niet helemaal geschikte term, bijvoorbeeld omdat hij veronderstelt dat er voor de chatbot een verschil is tussen wakend en dromend denken, maar voor die chatbots is het (vermoedelijk) allemaal hetzelfde.

Voor zover we chatbots begrijpen, hebben ze helemaal geen notie van waarheid – of iets waar is of onwaar, speelt geen rol in hun overwegingen om iets te zeggen, andere criteria (hoevaak komen woorden in elkaars omgeving voor) zijn daarin veel belangrijker. Vandaar dat bots moeite hebben met het woord niet: de zin hij komt niet heeft ongeveer dezelfde plausibiliteit als hij komt.

Waterdruppels

Alleen willen menselijke gebruikers wel iets anders. ChatGPT is inmiddels bijna anderhalf jaar beschikbaar, en nog steeds vind je op sociale media mensen die geamuseerd of verontwaardigd voorbeelden geven van onzinnige chatbotantwoorden op zinnige vragen.

Een begrip van waarheid inbouwen in die chatbots staat daarom waarschijnlijk hoog op het lijstje van ontwikkelaars. Daarvoor is dan weer een goed criterium nodig om hallucinaties te classificeren. In het tijdschrift Computational linguistics komt Kees van Deemter met een oplossing: de klassieke logica. Dat is een vak dat al duizenden jaren nadenkt over wat een bewering wel of niet waar maakt, en Van Deemter zegt dat die hier ook al iets over kan zeggen.

Doneer!

Sargasso is een laagdrempelig platform waarop mensen kunnen publiceren, reageren en discussiëren, vanuit de overtuiging dat bloggers en lezers elkaar aanvullen en versterken. Sargasso heeft een progressieve signatuur, maar is niet dogmatisch. We zijn onbeschaamd intellectueel en kosmopolitisch, maar tegelijkertijd hopeloos genuanceerd. Dat betekent dat we de wereld vanuit een bepaald perspectief bezien, maar openstaan voor andere zienswijzen.

In de rijke historie van Sargasso – een van de oudste blogs van Nederland – vind je onder meer de introductie van het liveblog in Nederland, het munten van de term reaguurder, het op de kaart zetten van datajournalistiek, de strijd voor meer transparantie in het openbaar bestuur (getuige de vele Wob-procedures die Sargasso gevoerd heeft) en de jaarlijkse uitreiking van de Gouden Hockeystick voor de klimaatontkenner van het jaar.

Steun ons!

De redactie van Sargasso bestaat uit een club vrijwilligers. Naast zelf artikelen schrijven struinen we het internet af om interessante artikelen en nieuwswaardige inhoud met lezers te delen. We onderhouden zelf de site en houden als moderator een oogje op de discussies. Je kunt op Sargasso terecht voor artikelen over privacy, klimaat, biodiversiteit, duurzaamheid, politiek, buitenland, religie, economie, wetenschap en het leven van alle dag.

Om Sargasso in stand te houden hebben we wel wat geld nodig. Zodat we de site in de lucht kunnen houden, we af en toe kunnen vergaderen (en borrelen) en om nieuwe dingen te kunnen proberen.

Foto: © Sargasso logo Kort copyright ok. Gecheckt 09-02-2022

Stuk is te lang

Je zal het maar hebben. Je stuk is te lang. Dat is onhandig, want het wetenschappelijk tijdschrift waar je ‘em wil indienen is Heel Streng wat betreft het maximale aantal woorden dat je mag gebruiken. En er komt een punt dat je je onderzoek en bevindingen niet in nóg minder tekens kan beschrijven zonder de inhoud geweld aan te doen. Of de leesbaarheid.

Maar daar zijn dus trucjes voor, heb ik geleerd. Je kan wat referenties weghalen – in plaats van je te beroepen op die drie teksten die je punt ondersteunen, verwijs je er slechts naar één. Lullig voor de schrijvers van die twee die je weglaat, want ook zij worden afgerekend op citaties en al wat dies meer zij. Maar het is niet anders. Je kan ook gewoon wat initialen weghalen uit iemands naam, of wat spaties verwijderen tussen de initialen, heb ik horen vertellen. Ook niet zo netjes, maar het zoeksysteem snapt toch wel wie het gaat dus de personen krijgen in ieder geval wel de verdiende credits. Of in het uiterste geval schrap je gewoon wat stukken die je later terugplaatst als je de drukproef krijgt, want daarna wordt niet meer gecontroleerd op aantal woorden.

Foto: Eigen foto Proefschrift bijstandsexperiment Nijmegen

Impact schmimpact – Citaties tellen en impact factor

ACHTERGROND - Dit stuk gaat over het tellen van hoe vaak wetenschappelijk werk geciteerd wordt, en over soortgelijke zaken. En dat is natuurlijk keimegasuperbelangrijk, dat snapt u. Niet? Maakt niet uit, ik heb er toch een uitgebreid stukje over getikt. Want hoe mooi en nuttig de wetenschap ook is: er valt ook genoeg over te zeuren.

Hoe meet je kwaliteit van wetenschap?

De kwaliteit van een wetenschapper en de impact van wetenschappelijk werk wordt vaak bepaald door ‘tellen’. Er is zelfs een heel veld ontstaan, de bibliometrie, dat zich bezig houdt met het meten van de kwaliteit van wetenschappelijk werk. Maar ja, dat gebeurt, zoals helaas wel vaker, vervolgens op basis van kwantitatieve indicatoren. En het kwantificeren van kwaliteit is zoals bekend heel erg lastig en gevaarlijk vanwege mogelijke (onvoorziene) perverse neveneffecten.

Er zijn een aantal indicatoren opgesteld waarop kwaliteit wordt beoordeeld. Sommige zijn vrij recht toe recht aan. Voor een wetenschapper wordt bijvoorbeeld vaak gekeken naar het aantal keer dat ‘ie geciteerd is, en hoeveel artikelen er zijn geschreven. En voor een artikel wordt hoe vaak het geciteerd is gezien als een aanduiding van kwaliteit. Daar even over nadenken zou al tot een opgetrokken wenkbrauw kunnen leiden, want laten we wel wezen: als iemand een artikel publiceert en vervolgens citeren 100 mensen dat artikel als voorbeeld van slecht onderzoek of ondeugdelijke methodes, dan lijkt het puur op basis van de cijfers (100x geciteerd!) heel wat.

Lezen: Venus in het gras, door Christian Jongeneel

Op een vroege zomerochtend loopt de negentienjarige Simone naakt weg van haar vaders boerderij. Ze overtuigt een passerende automobiliste ervan om haar mee te nemen naar een afgelegen vakantiehuis in het zuiden van Frankrijk. Daar ontwikkelt zich een fragiele verstandhouding tussen de twee vrouwen.

Wat een fijne roman is Venus in het gras! Nog nooit kon ik zoveel scènes tijdens het lezen bijna ruiken: de Franse tuin vol kruiden, de schapen in de stal, het versgemaaide gras. – Ionica Smeets, voorzitter Libris Literatuurprijs 2020.

Lezen: Bedrieglijk echt, door Jona Lendering

Bedrieglijk echt gaat over papyrologie en dan vooral over de wedloop tussen wetenschappers en vervalsers. De aanleiding tot het schrijven van het boekje is het Evangelie van de Vrouw van Jezus, dat opdook in het najaar van 2012 en waarvan al na drie weken vaststond dat het een vervalsing was. Ik heb toen aangegeven dat het vreemd was dat de onderzoekster, toen eenmaal duidelijk was dat deze tekst met geen mogelijkheid antiek kon zijn, beweerde dat het lab uitsluitsel kon geven.

Foto: Eigen foto Proefschrift bijstandsexperiment Nijmegen

Hoe nu verder met de bijstand?

Ja, wat nu? We hebben enorm veel informatie opgehaald in een aantal bijstandsexperimenten. Her en der heeft dat al geleid tot grotere of kleinere aanpassingen in het beleid van deelnemende gemeenten. Ook bij het Rijk is een omslag te zien, in het wetsvoorstel Participatiewet in Balans van minister Schouten. Daarin wordt erkend dat de Participatiewet op punten niet goed werkt, dat het mensbeeld dat er achter zit niet ok is, dat er minder moet worden uitgegaan van wantrouwen, en dat de menselijke maat terug moet. De concrete wijzigingen lijken, op basis van de beschikbare kennis goede, edoch vrij kleine aanpassingen in het bestaande systeem. Maar wat zou een goede weg zijn als je, op basis van de bekende wetenschappelijke inzichten, ons bijstandsbeleid (of wat breder, de hele sociale zekerheid) zou willen verbeteren?

We weten wat niet werkt

Want zoals ik al eerder schreef, we weten namelijk al ontzettend veel uit wetenschappelijk onderzoek over ons sociale stelsel. En heel veel van die kennis is dat wat we doen vrij beroerd werkt. Het stukje achter de link gaat over Nederland, maar ook uit onderzoek naar het Verenigd Koninkrijk weten we dat soortgelijke systemen als het onze voor veel problemen kunnen zorgen (van ‘material hardship and health problems’ tot ‘increased child maltreatment and poorer child well-being’). De nadruk op strenge sancties (aan kwetsbare mensen) zorgt voor schier oneindige maatschappelijke ellende. Op basis van de beschikbare wetenschappelijke kennis zou je dus best kunnen zeggen: het huidige systeem moet helemaal anders. Niet alleen in Nederland maar in de hele westerse wereld, van Australië via het UK tot de VS. Overal waar dogma’s rondom ‘zelfredzaamheid’ en ‘workfare’ decennialang het beleid hebben bepaald. En de mensen die het had moeten helpen in de ellende heeft gestort.

Foto: Sandra Fauconnier (cc)

Spellinggeweten

Wat een vreselijk woord heb ik een tijdje geleerd door de – op zich lovenswaardige – kerndoelen Nederlands te lezen. Ik ben er nog steeds ontdaan van. Een woord dat me de haren te berge doet rijzen, al is het maar omdat het laat zien dat een strijd die ik inmiddels al decennia voer, echt nergens toe leidt, dat de hele wereld aanneemt dat het volkomen normaal is om kinderen op te zadelen met narigheid die nergens toe dient. Een woord dat mij treft in het diepst van mijn taalziel.

Spellinggeweten.

Het blijkt een woord te zijn dat, geïntroduceerd door de vakdidacticus Helge Bonset, al minstens vijftien jaar circuleert in kringen van het taalonderwijs. Het is, als ik bijvoorbeeld deze pagina goed begrijp, de wil om correct te spellen, maar dan ingebed in een moreel sausje, want geweten suggereert moraal. Het klinkt alsof je kinderen leert dat ze zich schuldig moeten voelen over spelfouten. Dat is, volgens bijvoorbeeld deze pagina ‘de basis van het spellingonderwijs’.

Ik weet niet of er elders in het onderwijs sprake is van een kerndoel waarin kinderen een ‘geweten’ moeten leren ontwikkelen op een bepaald gebied. Het lijkt me hoe dan ook nauwelijks een doel voor het onderwijs.

Doneer!

Sargasso is een laagdrempelig platform waarop mensen kunnen publiceren, reageren en discussiëren, vanuit de overtuiging dat bloggers en lezers elkaar aanvullen en versterken. Sargasso heeft een progressieve signatuur, maar is niet dogmatisch. We zijn onbeschaamd intellectueel en kosmopolitisch, maar tegelijkertijd hopeloos genuanceerd. Dat betekent dat we de wereld vanuit een bepaald perspectief bezien, maar openstaan voor andere zienswijzen.

In de rijke historie van Sargasso – een van de oudste blogs van Nederland – vind je onder meer de introductie van het liveblog in Nederland, het munten van de term reaguurder, het op de kaart zetten van datajournalistiek, de strijd voor meer transparantie in het openbaar bestuur (getuige de vele Wob-procedures die Sargasso gevoerd heeft) en de jaarlijkse uitreiking van de Gouden Hockeystick voor de klimaatontkenner van het jaar.

Foto: Eigen foto Proefschrift bijstandsexperiment Nijmegen

Peer review: ergernis en kwaliteitscontrole

ACHTERGROND - De afgelopen maanden heb ik het weer regelmatig met jullie gehad over de bijstandsexperimenten, en dan met name over de inhoud daarvan. En hoewel de inhoud natuurlijk het belangrijkst is, zou ik nu graag toch weer een moment nemen om het over ‘de wetenschap’ te hebben. En dan specifiek over mijn ervaringen tijdens mij promotietraject met het publicatieproces en peer review.

Peer review is, denk ik, vaak wel een nuttig iets. Zoals ik eerder in deze serie beschreef zit op de meeste wetenschappelijke publicaties wel een soort van een collegiale check. De strengheid van die check draagt vaak bij aan hoe serieus een wetenschappelijk artikel wordt genomen. De strengste vorm van zo’n collegiale check is de anonieme peer review, zoals gedaan bij wetenschappelijke tijdschriften. Die laten twee, drie of soms vier experts mee kijken naar een ingediend artikel. Die zorgen dat de echte rotzooi er tussenuit wordt gehaald, en dat de artikelen die uiteindelijk gepubliceerd worden naar een wat hoger niveau worden getild. De wederzijdse anonimiteit moet dan objectiviteit garanderen. Hier zitten wel de nodige haken en ogen aan. In semiwillekeurige volgorde een aantal waar ik me het meest aan stoor.

Hemeltergend traag

Geheel persoonlijk: wat duurt dat proces ongelooflijk irritant lang soms. Ik ben niet het geduldigste mens op aarde, dat speelt vast mee. Maar het proces van:

Foto: Eigen foto Proefschrift bijstandsexperiment Nijmegen

Naar nieuwe bijstandsexperimenten!

Het is een cliché, maar daarom niet minder waar, dat elk onderzoek eindigt met een roep om méér onderzoek. Voor een deel is die roep gewoon terecht. De wetenschap is nooit ‘af’, en dus is het niet meer dan logisch om als onderzoeker na te denken over wat een logisch vervolg zou zijn. Maar soms hebben wetenschappers ook belang bij vervolgonderzoek. Immers, veel geld komt onze hoger onderwijs- en onderzoeksinstellingen binnen door ‘onderzoek in opdracht’. En ja, als je van dat geld afhankelijk bent (voor je voortbestaan als onderzoekseenheid, of als wetenschapper voor je bevordering naar een betere functie of het behouden van je baan), dan is een vervolgopdracht natuurlijk wel erg prettig – niet anders dan bijvoorbeeld in de consultancy.

Meer onderzoek: verder met wat er al ligt

Dus, het risico nemend dat één of andere cynicus gaat roepen dat ik als onderzoeker natúúrlijk vervolgonderzoek wil, ga ik het hier hebben over mogelijke interessante paden voor méér onderzoek en experimenten naar de bijstand. Want die paden die zijn er, heel veel, zoals ik ook hier al aanstipte. De bijstandsexperimenten van de afgelopen jaren hebben een hoop opgeleverd. Zowel kennis over de bijstand, als over hoe je dit soort experimenten in de toekomst (nog) beter kan houden zodat er nog meer van geleerd kan worden. En op die kennis kan worden voortgebouwd.

Vorige Volgende