Overzicht

serie

Proef bijstand

Foto: daisy.images (cc)
Foto: daisy.images (cc)

Bijstandsexperimenten, vraag me alles!!

, door

OPROEP - Ok, dit was het denk ik voorlopig weer even. Op 2 januari 2018 schreef ik hier voor het eerst over het Nijmeegse bijstandsexperiment, dat toen net één maand bezig was. En waar ik al een paar jaar voor aan het werk was om het voor te bereiden. En als buitenpromovendus nog jarenlang wetenschappelijk onderzoek zou doen.

Ook na het afronden van mijn proefschrift ben ik hier veel met jullie blijven delen. Over de resultaten van het Nijmeegse experiment, en van andere experimenten. Over het leven als buitenpromovendus. Het ambtelijke werk dat in de voorbereiding van de experimenten ging zitten. En allerlei rare en soms irritante dingen in de wetenschap.

Eigenlijk vraag ik me vooral af: hebben jullie nog vragen? Dus als iemand nog iets wil weten over alles waar ik de afgelopen jaren over heb geschreven onder het kopje ‘proef bijstand’, dan is nu de kans! Antwoord niet gegarandeerd, maar wel waarschijnlijk.

Vanaf nu dus geen niet-iedere-week-maar-toch-vrij-regelmatige donderdagochtendblog over dit onderwerp meer. Maar, mochten er nieuwe interessante dingen te vertellen zijn, over dit experiment of (klop klop) vervolgexperimenten, dan meld ik me vanzelf wel weer.

Foto: daisy.images (cc)

Ambtelijke arbeid

, door

ACHTERGROND, LONGREAD - Dit stukkie gaat over een aspect van de bijstandsexperimenten waar ik tot dusver nog niet zo veel over geschreven heb: het ambtelijke werk dat er bij is komen kijken om ze mogelijk te maken. Bij de gemeentes, maar ook bij onder andere het Rijk. En ik wil het graag wat breder trekken, omdat er in de samenleving soms (cliché)beelden heersen over ‘wie er hard werken’. Als iemand het heeft over ‘de hardwerkende Nederlander’, laten we wel wezen, dan zal het meestal niet over de gemeenteambtenaar gaan.

Het ambtelijke werk aan de experimenten

Het verhaal over de praktische organisatie van het Nijmeegse bijstandsexperiment is er één van “ambitieus starten, heel lang wachten, in een rotvaart haasten om mee te kunnen doen”. Nijmegen was één van de eerste, zo niet de eerste, gemeente waar sprake was van het houden van een bijstandsexperiment, met een op vertrouwen gebaseerde bijstand. Echter: in Nijmegen kwam dit initiatief uit de gemeenteraad, terwijl in andere gemeenten het initiatief uit het college van B&W kwam. En een college kan in de regel sneller handelen, dus tegen de tijd dat in Nijmegen de formele besluitvorming geregeld was, waren er al vier gemeenten gestart met een onderhandeling met het ministerie over hoe die bijstandsexperimenten er uit zouden komen te zien. Nijmegen was te laat om daar nog bij aan te sluiten, en moest op de achterbank wachten. En wachten. Wel bloody anderhalf jaar wachten, totdat er (eindelijk) een concreet kader lag hoe de experimenten er uit mochten zien. (Gelukkig ben ik een geduldig mens).

Foto: daisy.images (cc)

Stuk is te lang

, door

Je zal het maar hebben. Je stuk is te lang. Dat is onhandig, want het wetenschappelijk tijdschrift waar je ‘em wil indienen is Heel Streng wat betreft het maximale aantal woorden dat je mag gebruiken. En er komt een punt dat je je onderzoek en bevindingen niet in nóg minder tekens kan beschrijven zonder de inhoud geweld aan te doen. Of de leesbaarheid.

Maar daar zijn dus trucjes voor, heb ik geleerd. Je kan wat referenties weghalen – in plaats van je te beroepen op die drie teksten die je punt ondersteunen, verwijs je er slechts naar één. Lullig voor de schrijvers van die twee die je weglaat, want ook zij worden afgerekend op citaties en al wat dies meer zij. Maar het is niet anders. Je kan ook gewoon wat initialen weghalen uit iemands naam, of wat spaties verwijderen tussen de initialen, heb ik horen vertellen. Ook niet zo netjes, maar het zoeksysteem snapt toch wel wie het gaat dus de personen krijgen in ieder geval wel de verdiende credits. Of in het uiterste geval schrap je gewoon wat stukken die je later terugplaatst als je de drukproef krijgt, want daarna wordt niet meer gecontroleerd op aantal woorden.

Foto: daisy.images (cc)

Impact schmimpact – Citaties tellen en impact factor

, door

ACHTERGROND - Dit stuk gaat over het tellen van hoe vaak wetenschappelijk werk geciteerd wordt, en over soortgelijke zaken. En dat is natuurlijk keimegasuperbelangrijk, dat snapt u. Niet? Maakt niet uit, ik heb er toch een uitgebreid stukje over getikt. Want hoe mooi en nuttig de wetenschap ook is: er valt ook genoeg over te zeuren.

Hoe meet je kwaliteit van wetenschap?

De kwaliteit van een wetenschapper en de impact van wetenschappelijk werk wordt vaak bepaald door ‘tellen’. Er is zelfs een heel veld ontstaan, de bibliometrie, dat zich bezig houdt met het meten van de kwaliteit van wetenschappelijk werk. Maar ja, dat gebeurt, zoals helaas wel vaker, vervolgens op basis van kwantitatieve indicatoren. En het kwantificeren van kwaliteit is zoals bekend heel erg lastig en gevaarlijk vanwege mogelijke (onvoorziene) perverse neveneffecten.

Er zijn een aantal indicatoren opgesteld waarop kwaliteit wordt beoordeeld. Sommige zijn vrij recht toe recht aan. Voor een wetenschapper wordt bijvoorbeeld vaak gekeken naar het aantal keer dat ‘ie geciteerd is, en hoeveel artikelen er zijn geschreven. En voor een artikel wordt hoe vaak het geciteerd is gezien als een aanduiding van kwaliteit. Daar even over nadenken zou al tot een opgetrokken wenkbrauw kunnen leiden, want laten we wel wezen: als iemand een artikel publiceert en vervolgens citeren 100 mensen dat artikel als voorbeeld van slecht onderzoek of ondeugdelijke methodes, dan lijkt het puur op basis van de cijfers (100x geciteerd!) heel wat.

Foto: daisy.images (cc)

Hoe nu verder met de bijstand?

, door

Ja, wat nu? We hebben enorm veel informatie opgehaald in een aantal bijstandsexperimenten. Her en der heeft dat al geleid tot grotere of kleinere aanpassingen in het beleid van deelnemende gemeenten. Ook bij het Rijk is een omslag te zien, in het wetsvoorstel Participatiewet in Balans van minister Schouten. Daarin wordt erkend dat de Participatiewet op punten niet goed werkt, dat het mensbeeld dat er achter zit niet ok is, dat er minder moet worden uitgegaan van wantrouwen, en dat de menselijke maat terug moet. De concrete wijzigingen lijken, op basis van de beschikbare kennis goede, edoch vrij kleine aanpassingen in het bestaande systeem. Maar wat zou een goede weg zijn als je, op basis van de bekende wetenschappelijke inzichten, ons bijstandsbeleid (of wat breder, de hele sociale zekerheid) zou willen verbeteren?

We weten wat niet werkt

Want zoals ik al eerder schreef, we weten namelijk al ontzettend veel uit wetenschappelijk onderzoek over ons sociale stelsel. En heel veel van die kennis is dat wat we doen vrij beroerd werkt. Het stukje achter de link gaat over Nederland, maar ook uit onderzoek naar het Verenigd Koninkrijk weten we dat soortgelijke systemen als het onze voor veel problemen kunnen zorgen (van ‘material hardship and health problems’ tot ‘increased child maltreatment and poorer child well-being’). De nadruk op strenge sancties (aan kwetsbare mensen) zorgt voor schier oneindige maatschappelijke ellende. Op basis van de beschikbare wetenschappelijke kennis zou je dus best kunnen zeggen: het huidige systeem moet helemaal anders. Niet alleen in Nederland maar in de hele westerse wereld, van Australië via het UK tot de VS. Overal waar dogma’s rondom ‘zelfredzaamheid’ en ‘workfare’ decennialang het beleid hebben bepaald. En de mensen die het had moeten helpen in de ellende heeft gestort.

Foto: daisy.images (cc)

Peer review: ergernis en kwaliteitscontrole

, door

ACHTERGROND - De afgelopen maanden heb ik het weer regelmatig met jullie gehad over de bijstandsexperimenten, en dan met name over de inhoud daarvan. En hoewel de inhoud natuurlijk het belangrijkst is, zou ik nu graag toch weer een moment nemen om het over ‘de wetenschap’ te hebben. En dan specifiek over mijn ervaringen tijdens mij promotietraject met het publicatieproces en peer review.

Peer review is, denk ik, vaak wel een nuttig iets. Zoals ik eerder in deze serie beschreef zit op de meeste wetenschappelijke publicaties wel een soort van een collegiale check. De strengheid van die check draagt vaak bij aan hoe serieus een wetenschappelijk artikel wordt genomen. De strengste vorm van zo’n collegiale check is de anonieme peer review, zoals gedaan bij wetenschappelijke tijdschriften. Die laten twee, drie of soms vier experts mee kijken naar een ingediend artikel. Die zorgen dat de echte rotzooi er tussenuit wordt gehaald, en dat de artikelen die uiteindelijk gepubliceerd worden naar een wat hoger niveau worden getild. De wederzijdse anonimiteit moet dan objectiviteit garanderen. Hier zitten wel de nodige haken en ogen aan. In semiwillekeurige volgorde een aantal waar ik me het meest aan stoor.

Hemeltergend traag

Geheel persoonlijk: wat duurt dat proces ongelooflijk irritant lang soms. Ik ben niet het geduldigste mens op aarde, dat speelt vast mee. Maar het proces van:

Foto: daisy.images (cc)

Naar nieuwe bijstandsexperimenten!

, door

Het is een cliché, maar daarom niet minder waar, dat elk onderzoek eindigt met een roep om méér onderzoek. Voor een deel is die roep gewoon terecht. De wetenschap is nooit ‘af’, en dus is het niet meer dan logisch om als onderzoeker na te denken over wat een logisch vervolg zou zijn. Maar soms hebben wetenschappers ook belang bij vervolgonderzoek. Immers, veel geld komt onze hoger onderwijs- en onderzoeksinstellingen binnen door ‘onderzoek in opdracht’. En ja, als je van dat geld afhankelijk bent (voor je voortbestaan als onderzoekseenheid, of als wetenschapper voor je bevordering naar een betere functie of het behouden van je baan), dan is een vervolgopdracht natuurlijk wel erg prettig – niet anders dan bijvoorbeeld in de consultancy.

Meer onderzoek: verder met wat er al ligt

Dus, het risico nemend dat één of andere cynicus gaat roepen dat ik als onderzoeker natúúrlijk vervolgonderzoek wil, ga ik het hier hebben over mogelijke interessante paden voor méér onderzoek en experimenten naar de bijstand. Want die paden die zijn er, heel veel, zoals ik ook hier al aanstipte. De bijstandsexperimenten van de afgelopen jaren hebben een hoop opgeleverd. Zowel kennis over de bijstand, als over hoe je dit soort experimenten in de toekomst (nog) beter kan houden zodat er nog meer van geleerd kan worden. En op die kennis kan worden voortgebouwd.

Foto: daisy.images (cc)

Ere wie ere toekomt: de ‘niet-officiële’ bijstandsexperimenten

, door

ACHTERGROND, LONGREAD - Er is inmiddels al een hoop geschreven over de bijstandsexperimenten, die gehouden zijn in Nederland, tussen 2017 en 2020. Hier op Sargasso, op andere blogs, in vaktijdschriften, wetenschappelijke artikelen en twee dissertaties. In veel van die teksten gaat het om (één van) de zes ‘officiële’ bijstandsexperimenten, die gehouden zijn met toestemming van het ministerie van SZW. Deze vonden plaats in Deventer, Groningen*, Nijmegen, Tilburg, Utrecht en Wageningen.

Echter: naast die zes waren er nog een aantal experimenten, die niet het officiële stempel van goedkeuring van SZW mochten dragen, maar qua inhoud toch behóórlijk veel lijken op de anderen. Ook ik heb me wel eens bezondigd aan het weglaten van deze ongestempelde broederexperimenten. In mijn proefschrift heb ik ze zelfs weggemoffeld in een voetnoot. Waarbij ik er, als insult to injury, nog eentje vergeten ben ook. Bij deze wil ik die omissie goedmaken, en wat extra aandacht geven aan deze andere experimenten.

Officieel en niet-officieel

Hoe zat het ook al weer? Heel beknopt: Rutte 2 voerde de Participatiewet in, in 2015. Daar waren heel veel mensen boos over. Waaronder veel gemeenten, die nog voor de daadwerkelijke invoering al in het wetsontwerp zagen dat het een ramp ging worden: te bureaucratisch, teveel gericht op verplichtingen en straffen, niet genoeg rekening houdend met kwetsbare mensen, et cetera. Dus wilden een aantal gemeenten experimenteren. Een vrij fors aantal, de schatting is dat ergens tussen de 50 en 80 gemeenten hier in eerste instantie wel oren naar hadden.

Foto: daisy.images (cc)

John Henry (steel-driving man) en de bijstandsproef

, door

ACHTERGROND - Dit stukje heeft de tag ‘Closing Time’, maar dat is niet helemaal kloppend: eigenlijk is het een ‘opening time’ en gaat dit stuk over het Nijmeegse bijstandsexperiment, en al wat daar omheen hangt. Maar toch beginnen we met een stukje muziek. Joe Bonomassa kennen jullie natuurlijk allemaal, want die is hier al eens eerder langsgekomen. Het gaat hier echter niet om de artiest, maar om de tekst van het nummer The Ballad of John Henry. Want John Henry, geloof het of niet, was relevant voor de analyse van de bijstandsexperimenten hier in Nederland.

Wellicht komt de naam de gamers en poëzieliefhebbers ook bekend voor:

John Henry said to his Captain: ‘A man ain’t nothin’ but a man,/And before I’ll let your steam drill beat me down,/I’ll die with the hammer in my hand.

Iemand? Dit komt natuurlijk uit Civilization V, als je het staal hebt  uitgevonden. En die hebben het weer van het gedicht John Henry, van anoniem: The Ballad of John Henry, the Steel-Drivin’ Man. Potverdorie, deze post had zelfs als Kunst op Zondag gekund!

Het John Henry-effect in de wetenschap

Maar we gaan het toch hebben over wetenschap, in relatie tot de bijstandsexperimenten. Want naast John Henry, kennen we ook het ‘John Henry effect’, waar je rekening mee moet houden als je een experiment doet. Zo lang de mensen in het experiment weten dat ze in een experiment zitten – maar dat is natuurlijk wel zo ethisch. Eigenlijk is het John Henry effect een subset van het (bekendere) Hawthorne effect. Dit is de naam van het effect dat mensen zich soms anders gedragen wanneer ze weten dat ze deel uitmaken van een experiment. De term is bedacht naar aanleiding van een experiment in de Hawthorne fabriek, waar ze testten of de felheid van het licht in de fabriek gerelateerd was aan hoe hard er gewerkt werd. Resultaat was dat zolang de proef duurde, men productiever werd als er iets veranderde – ongeacht wat, of het licht nou feller of donkerder werd. En toen de proef weer voorbij was de arbeidsproductiviteit weer werd zoals voorheen.

Foto: daisy.images (cc)

Het leven als buitenpromovendus

, door

ACHTERGROND - ‘Buitenpromovendus’, wat dat eigenlijk is en hoe dat gaat, vragen jullie? Geen probleem, ik vertel er graag wat over! Wie weet inspireert het deze of gene om zelf een aantal jaren te besteden aan het doen van een wetenschappelijk onderzoek.

De reguliere weg

Normaal gesproken promoveer je (haal je een PhD) aan de universiteit als aio, oftewel ‘assistent in opleiding’. Je krijgt dan een fulltime contract voor meestal vier, of soms ook drie, jaar. Die tijd moet je moet besteden aan het doen van onderzoek en het schrijven van een proefschrift. Je krijgt daarvoor ongeveer een modaal salaris, een hoeveelheid werk die flink groter is dan je redelijkerwijs af kan krijgen in de tijd die je hebt, een zeer afhankelijke positie ten opzichte van je begeleiders, en bij succes, en mazzel, een volgend tijdelijk contract als postdoc.

Mits je natuurlijk in de wetenschap wil blijven. Waarna soms nog één of twee tijdelijke contracten volgen, en je daarna, als alles goed gaat, eindelijk een eerste vast contract mag ontvangen als ‘UD’, of universitair docent. Als alles goed gaat, want de academie is een piramide, en er zijn minder postdoc plaatsen dan aio’s, en minder UD-plaatsen dan postdocs.

Quote du Jour

Quote du jour | onvoorwaardelijke bijstand in Noorwegen

, door

QUOTE - In Noorwegen heeft een gemeente besloten om een bijstandsexperiment te houden, waarbij deelnemers meer geld kregen en aan minder voorwaarden hoefden te voldoe… hee, wacht, dat klinkt bekend! Wat een goed idee! En natuurlijk is het dan heel interessant wat de bevindingen zijn van deze studie. Toch? Als het antwoord ja is, dan heb je geluk, want de resultaten zijn zojuist gepubliceerd. EN WAT ER TOEN GEBEURDE DAT VERWACHTTE NIEMAND:

Foto: daisy.images (cc)

Hoe werkt dat nou, die wetenschap?

, door

ACHTERGROND - Als achtergrond bij deze serie over het Nijmeegse bijstandsexperiment, is het wellicht aardig voor mensen een beetje een idee te krijgen over hoe dat nou in zijn werk gaat, die wetenschap. In heel algemene zin. Want een historicus doet natuurlijk wat anders dan een chemicus, en een econoom wat anders dan een biomedicus. Maar aan het eind van de dag zijn er toch wel de nodige overeenkomsten – al zijn er ongetwijfeld op alles wat ik hieronder schrijf ook uitzonderingen, en pretendeer ik geen volledigheid.

Een vraag – en dan verder

Het begint met een vraag. Iemand wil weten hoe iets zit. Dat kan een wetenschapper zijn, of iemand met een zak geld die een wetenschapper opdracht geeft dat uit te zoeken. Of een aantal wetenschappers – voor het gemak schrijf ik hier in enkelvoud, maar meestal zal het gaan om meerdere mensen, of een heel team. Maar dat terzijde. Er is dus een vraag. Het eerste wat je dan gaat doen is je inlezen, de (wetenschappelijke) literatuur induiken. Wat weten we over dit vraagstuk, zijn er al mogelijke antwoorden, theorieën, soortgelijke vraagstukken in andere contexten die al beantwoord zijn? Eventueel kun je op basis van zo’n eerste studie komen tot hypothesen (‘ik denk dat het zo zit’) die je gaat toetsen. Er zijn mensen die aanhangen dat alleen hypothesetoetsende wetenschap ‘echte’ wetenschap is, maar dat is een vrij nauwe, Angelsaksische invulling van het begrip wetenschap (‘science’). Voor het verschil tussen ´wetenschap´ en het wat beperktere begrip ‘science’, zie hier.

Volgende