1. 22 oktober 2013
Advanced Search Techniques For Systematic Reviews, Health Technology
Assessment and Guideline Development
23 oktober 2013
Trial Registers, Trials Results Registers and Other Research Registers:
Challenges and Opportunities
Web&Z 28 november 2013 – Joost Daams
2. 22 oktober 2013 (1): advanced searching
- “Seen it, (not) done that” (PRESS-EBC, scoping searches)
- Geavanceerde zoekstrategieën, o.a.
* Multi-Stranded Approaches bij DTA’s
* Adverse Events (incl. tools zoals knalij.com en www.quertle.info)
- Info over (zoeken t.b.v.) HTA’s
* Society: Health Technology Assessment International
http://www.htai.org/index.php?id=419
* HTAi Vortal: http://vortal.htai.org/?q=home
- Information audit van de search d.m.v. relative recall
- In het bijzonder: de dekking/volledigheid van de search d.m.v.
capture-mark-recapture
Web&Z 28 november 2013 – Joost Daams
3. 22 oktober 2013 (2): advanced searching
- Text Mining (http://gate.ac.uk/)
- Keyword clouds (om je search te analyseren en verbeteren?)
-
Carrot 2 (http://search.carrot2.org/stable/search)
Web&Z 28 november 2013 – Joost Daams
4. 23 oktober 2013: trials
-Waarom wil je ze vinden?
-Welke info wil je vinden?
Trialregisters
-Data in trialregisters
-Soorten trialregisters
-WHO-ICTRP: zoektips en coverage
Other research registers
-Waarom doorzoeken?
-Welke info kan je vinden?
Web&Z 28 november 2013 – Joost Daams
Editor's Notes
#2: Aanleiding presentatie: is het de moeite waard om deze cursus te volgen?
Waarom heb ik deze cursus gevolgd?
De cursus is in zekere zin een update en uitbreiding (meer in detail) van de Foliage cursus in Utrecht een paar jaar geleden, redenen om toch naar York te gaan:
Wat zijn HTA’s precies en in hoeverre verschilt het zoeken met zoeken voor een SR?
Doorzoeken trial registers in het bijzonder: deed ik niet zoveel mee (wel WHO-ICTRP), wat is de toegevoegde waarde van het doorzoeken voor SR’s en hoe doe je dat dan het beste?
Kan ik nog iets leren van de “internationale top” op het terrein van medische informatiespecialisten (Julie Glanville, Carol Lefebvre, anderen)?
Wat is een HTA? Vrije vertaling van European network for Health Technology Assessment (http://www.eunethta.eu/about-us/faq):
Een multidisciplinair proces waarbij informatie wordt samengevat t.a.v. medische-, sociale, economische- en ethische aspecten gerelateerd aan het gebruik van gezondheidszorgtechnieken op een systematische, transparante, unbiased en robuuste wijze.
Doel is het formuleren van veilig en effectief gezondheidszorgbeleid dat patientgericht is tegen de beste (economische) waarde.
YHEC: onafhankelijk bedrijf, volledig in eigendom van de University of York. YHEC is een adviesorgaan voor de NHS en farmaceutische- en gezondheidszorgindustrie.
Deelnemers zijn werkzaam bij Engelse universiteiten en 1 Franse univeristeit, farmaceutische industrie en adviesbureaux
#3: PRESS-EBC = Evidence Based Checklist for Peer Review of Electronic Search Strategies
Meer info:
http://pressforum.pbworks.com
http://ejournals.library.ualberta.ca/index.php/EBLIP/article/view/7402/6436
Scoping searches:
Doel = verrichten verkennende search voor (benodigde) funding
Wat breng je in kaart: schatting omvang literatuur, beschikbare studietypes, publicatiespreiding, etc.
Tools: Cochrane CENTRAL, PubReminer, GoPubMed, TRIP, DORIS (stroke trials), epistimonikos
Multi-Stranded Approaches: P combineren met verschillende facetten (aandoening met: diagnose als containerbegrip, diagnose uitgedrukt in associatiematen, symptomen, modaliteiten etc.)
Vortal = Vertical Industry Portal is a portal Web site that provides information and resources for a particular industry. Vortals are the Internet's way of catering to consumers' focused-environment preferences.
Vortals typically provide news, research and statistics, discussions, newsletters, online tools, and many other services that educate users about a specific industry.
Information audit = retrospectieve analyse van je zoekstrategie:
Hoe goed presteert je zoekstrategie?
Hoe zinvol is het om bepaalde bronnen te doorzoeken?
Relative recall:
Uitgangspunt is een review met een goede, sensitieve zoekstrategie
Identificeer de geincludeerde studies en stel vast of ze voorkomen in de bron waarin je bent geinteresseerd
Rerun de oorspronkelijke zoekstrategie in de bron en bepaal hoeveel geincludeerde studies worden gevonden
Bereken op basis hiervan de vangst en precisie
Bepaal welke databases unieke studies hebben opgeleverd en in welke mate databases overlappen
Nadelen relatieve recall:
Je weet nog steeds niet wat je mist (want je kijkt alleen naar wat bekend is, geincludeerde records)
Is afhankelijk van de kwaliteit van de oorspronkelijke search
De zoekstrategieën moeten sterk overeenkomen (dus niet een sensitieve Medline search in Google uitvoeren)
Capture-mark-recapture
- Ontleend aan de epidemiologie, waarbij een schatting van de totale onderzoekspopulatie wordt gemaakt
Methode:
maak a priori schatting hoeveel artikelen je search zou moeten vinden (a) en een a priori waardering van een acceptabele sensitiviteit (bijv. 90% of 95%)(a) m.b.v. de maximum likelihood estimator, N= M(n/m). M = positieven Medline, n = positieven handsearching, m = positieven van beiden
Vul de 2x2 tabel (handsearching: found/not found versus bijv. Medline: found/not found)
Bereken de sensitiviteit
Bepalen van de Horizon estimate (= schatting van het aantal bestaande artikelen over een topic), werkwijze:
Step 1 Determine the desired proportion of the literature to be identified-an a priori estimate of completeness. For example, it is important to define
whether to obtain 90%, 95%, or 99% of the projected total or have it fall within the 95% CI of the estimate of the total literature
Step 2 Determine at which point in the process the Horizon should be estimated (e.g., at the level of screening for titles and abstracts, full-text
screening, or on the final list of included articles)
Step 3 Search in two databases for which the research will provide the most items, and count the total number of studies identified at the stages
identified in step 2
Step 4 Determine the Horizon Estimate (note: this would currently need input from statisticians)
Step 5 Compare the retrieval numbers with the Horizon Estimate and the a priori estimation of completeness in Step 1
Step 6 Continue with additional searching if the level of completeness is not met or stop searching with confidence
Step 7 Additional Horizon estimates can be done after searching subsequent resources (note: the sources used in the Horizon Estimate calculation do
not have to be large bibliographic databases such as Medline. For example, a source can be considered as hand searching, searching
bibliographies, the use of the PubMed related articles feature, citation tracking, etc.)
Meer info: http://dx.doi.org/10.1016/j.jclinepi.2008.06.001
#4: Text Mining
Het is Steven Brewer (York) gelukt om ongestructureerde documenten van eenzelfde type (commerciële contracten) te structureren. Interessant voor wetenschappelijke publicaties met een vergelijkbare structuur; helemaal indien deze ooit fulltext beschikbaar zouden komen.
Websummarizer (http://www.websummarizer.com/Pages/Demo.aspx) is een andere leuke keyword cloud tool
#5: Waarom:
Recentheid
Volledigheid (publicatie bias en onderzoek niet dubbel doen)
Update van bestaand onderzoek (bijv. bepalen: wanneer updaten we een SR of een richtlijn?)
Welke info: in- en exclusiecriteria, samenstelling onderzoekspopulatie, recruiting open of gesloten, begin- en einddata (ongoing of completed), primaire- en secundaire uitkomsten
Soorten trialregisters:
regionaal/nationaal/internationaal (bijv. http://www.clinicaltrials.gov)
Onderwerp specifiek (bijv. http://www.cancer.gov/clinicaltrials)
Industry trial registers (bijv. GlaxoSmithKline http://www.gsk-clinicalstudyregister.com)
WHO-ICTRP:
niet gedekt o.a. UK clinical trials gateway, registers van de pharmaceutische industrie
Clinicaltrials.gov: op trialnummer zoeken in pubmed / gedetailleerde records geven ook veel hints voor relevante zoektermen voor bibliografische databases
Other research registers:
Waarom
Welke info?:
Per sponsor (bijv.) / (inter-)nationaal niveau (bijv. PROSPERO – prospectief registreren SR protocollen, aanbevolen door o.a. BMJ en PLoS, http://www.crd.york.ac.uk/Prospero) / specifiek onderwerp (bijv. International Studies on Health Policy and Systems Research, http://www.who.int/alliance-hpsr/resources/en/)
Qol studies/economic evaluations/follow-up studies