Edurep:LOM SearchRetrieve: verschil tussen versies

Uit Kennisnet Developers Documentatie
Naar navigatie springen Naar zoeken springen
(https overstap)
(6 tussenliggende versies door 2 gebruikers niet weergegeven)
Regel 2: Regel 2:
   
 
== Endpoints ==
 
== Endpoints ==
* LOM SRU http://wszoeken.edurep.kennisnet.nl:8000/edurep/sruns
+
* LOM SRU https://wszoeken.edurep.kennisnet.nl/edurep/sruns
* LOM SRW: http://wszoeken.edurep.kennisnet.nl:8000/edurep/srwns
+
* LOM SRW: https://wszoeken.edurep.kennisnet.nl/edurep/srwns
* LOM SRW WSDL: http://wszoeken.edurep.kennisnet.nl:8000/edurep/wsdlns
+
* LOM SRW WSDL: https://wszoeken.edurep.kennisnet.nl/edurep/wsdlns
  +
* LOM SRU PLUS https://wszoeken.edurep.kennisnet.nl/edurep/sruns/plus (als sruns, maar metaplus records ontdubbeld, alleen metaplus)
  +
* LOM SRU ORIGINAL https://wszoeken.edurep.kennisnet.nl/edurep/sruns/original (als sruns, maar metaplus records ontdubbeld, alleen originals)
   
 
== Argumenten ==
 
== Argumenten ==
Regel 27: Regel 29:
 
|1
 
|1
 
|cql query
 
|cql query
|Een zoekopdracht binnen LOM records [[Edurep:LOM_SearchRetrieve/query|Lees meer]].
+
|Een zoekopdracht binnen LOM records [[Standaarden:SRU/Edurep CQL|Lees meer]].
 
|-
 
|-
 
|startRecord
 
|startRecord
 
|0-1
 
|0-1
 
|getal
 
|getal
|De resultatenlijst wordt getoond vanaf dit record, standaard 1. [[Edurep:LOM_SearchRetrieve/startRecord|Lees meer]].
+
|De resultatenlijst wordt getoond vanaf dit record, standaard 1. [[Standaarden:SRU/startRecord|Lees meer]].
 
|-
 
|-
 
|maximumRecords
 
|maximumRecords
 
|0-1
 
|0-1
 
|getal
 
|getal
|Het aantal records in de getoonde resultatenlijst, standaard 10, max 100 [[Edurep:LOM_SearchRetrieve/maximumRecords|Lees meer]].
+
|Het aantal records in de getoonde resultatenlijst, standaard 10, max 100 [[Standaarden:SRU/maximumRecords|Lees meer]].
 
|-
 
|-
 
|recordSchema
 
|recordSchema
Regel 52: Regel 54:
 
|0-1
 
|0-1
 
|tekst
 
|tekst
|Het formaat waarin de resultatenlijst wordt teruggegeven [[Edurep:LOM_SearchRetrieve/recordPacking|Lees meer]].
+
|Het formaat waarin de resultatenlijst wordt teruggegeven [[Standaarden:SRU/recordPacking|Lees meer]].
 
|-
 
|-
 
|x-term-drilldown
 
|x-term-drilldown
Regel 77: Regel 79:
   
 
== Voorbeeld SRU-Verzoek ==
 
== Voorbeeld SRU-Verzoek ==
<nowiki>http://wszoeken.edurep.kennisnet.nl:8000/edurep/sruns?version=1.2&operation=searchRetrieve&query=fiets&startRecord=1&maximumRecords=5&x-api-key=DevWiki</nowiki>
+
<nowiki>https://wszoeken.edurep.kennisnet.nl/edurep/sruns?version=1.2&operation=searchRetrieve&query=fiets&startRecord=1&maximumRecords=5&x-api-key=DevWiki</nowiki>
   
 
== Voorbeeld SRW-Verzoek ==
 
== Voorbeeld SRW-Verzoek ==
  +
<syntaxhighlight lang="xml">
<nowiki>
 
 
<SOAP:Envelope xmlns:SOAP="http://schemas.xmlsoap.org/soap/envelope/">
 
<SOAP:Envelope xmlns:SOAP="http://schemas.xmlsoap.org/soap/envelope/">
 
<SOAP:Body>
 
<SOAP:Body>
Regel 94: Regel 96:
 
</SOAP:Body>
 
</SOAP:Body>
 
</SOAP:Envelope>
 
</SOAP:Envelope>
  +
</syntaxhighlight>
</nowiki>
 
   
 
== Voorbeeld Respons ==
 
== Voorbeeld Respons ==

Versie van 20 jan 2020 14:27

LOM data kan in Edurep worden opgevraagd via een SRU of SRW endpoint, gebruik makend van de CQL query taal. Op deze pagina staat een overzicht van de specifieke implementatie van SRU/SRW voor de LOM endpoints.

Endpoints

Argumenten

Een overzicht van de ondersteunde argumenten:

naam # type omschrijving
operation 1 tekst searchRetrieve
version 1 tekst 1.2
query 1 cql query Een zoekopdracht binnen LOM records Lees meer.
startRecord 0-1 getal De resultatenlijst wordt getoond vanaf dit record, standaard 1. Lees meer.
maximumRecords 0-1 getal Het aantal records in de getoonde resultatenlijst, standaard 10, max 100 Lees meer.
recordSchema 0-1 tekst Het type record wat wordt teruggegeven (lom voor CZP, oai_dc voor DC, LOMv1.0 voor IEEE LOM), standaard lom Lees meer.
x-recordSchema 0-* tekst Een extra type record wat kan worden meegegeven Lees meer.
recordPacking 0-1 tekst Het formaat waarin de resultatenlijst wordt teruggegeven Lees meer.
x-term-drilldown 0-1 edurep zoekveld Het veld waarop een term drilldown wordt gedaan voor de gevonden resultaten Lees meer.
sortKeys 0-1 edurep zoekveld Het veld waarop gesorteerd moeten worden Lees meer.
x-field-drilldown 0-1 tekst De zoekterm voor een field drilldown voor de gevonden resultaten Lees meer.
x-field-drilldown-fields 0-1 lijst De lomvelden waarbinnen de field drilldown gedaan kan worden Lees meer.

Voorbeeld SRU-Verzoek

https://wszoeken.edurep.kennisnet.nl/edurep/sruns?version=1.2&operation=searchRetrieve&query=fiets&startRecord=1&maximumRecords=5&x-api-key=DevWiki

Voorbeeld SRW-Verzoek

<SOAP:Envelope xmlns:SOAP="http://schemas.xmlsoap.org/soap/envelope/">
  <SOAP:Body>
    <SRW:searchRetrieveRequest xmlns:SRW="//www.loc.gov/zing/srw/">
      <SRW:version>1.2</SRW:version>
      <SRW:operation>searchRetrieve</SRW:operation>
      <SRW:query>fiets</SRW:query>
      <SRW:startRecord>1</SRW:startRecord>
      <SRW:maximumRecords>5</SRW:maximumRecords>
      <SRW:recordPacking>xml</SRW:recordPacking>
      <SRW:x-api-key>DevWiki</SRW:x-api-key>
    </SRW:searchRetrieveRequest>
  </SOAP:Body>
</SOAP:Envelope>

Voorbeeld Respons

<srw:searchRetrieveResponse>
  <srw:version>1.2</srw:version>
  <srw:numberOfRecords>1215</srw:numberOfRecords>
  <srw:records>
    <srw:record>
      <srw:recordSchema>lom</srw:recordSchema>
      <srw:recordPacking>xml</srw:recordPacking>
      <srw:recordIdentifier>Teleblik:oai:vp-core.snkn.nl:19026</srw:recordIdentifier>
      <srw:recordData>
        ...
        <!-- Hier staan een gevonden record. -->
        ...
      </srw:recordData>
      <srw:extraRecordData>
        <srw:recordData recordSchema="<schema>">
          ...
          <!-- Hier staat het betreffende recordSchema van het gevonden record. -->
          ...
        </srw:recordData>
        ...
        <!-- En eventueel nog andere recordSchema's. -->
        ...
      </srw:extraRecordData>
    </srw:record>
    ...
    <!-- Hier staan overige gevonden recorddata en extra recorddata. -->
    ...
  </srw:records>
  <srw:nextRecordPosition>11</srw:nextRecordPosition>
  <srw:echoedSearchRetrieveRequest>
    <srw:version>1.2</srw:version>
    <srw:query>fiets</srw:query>
    <srw:startRecord>6</srw:startRecord>
    <srw:recordPacking>string</srw:recordPacking>
    <srw:recordSchema>lom</srw:recordSchema>
    <srw:x-recordSchema>extra</srw:x-recordSchema>
    <srw:x-recordSchema>smo</srw:x-recordSchema>
    <srw:x-recordSchema>smbAggregatedData</srw:x-recordSchema>
  </srw:echoedSearchRetrieveRequest>
</srw:searchRetrieveResponse>

Eigenschappen

Bij het maken van een koppeling op de zoekinterface van Edurep, dient men rekening te houden met een aantal eigenschappen.

Overbelasting

Het kan voorkomen dat Edurep overbelast is door een teveel aan binnenkomende requests. Deze faciliteit is ingebouwd om te voorkomen dat de responstijden teveel oplopen. In dat geval zal Edurep een HTTP 503 statuscode terugsturen. Het is raadzaam bij de implementatie met deze statuscode rekening te houden en het na een korte pauze opnieuw te proberen. Kans is heel groot dat Edurep dan weer een slot beschikbaar heeft. Voor meer informatie over de HTTP 503 melding bekijk de officiële definitie op W3C.

Compressie

De xml responses van Edurep kunnen gecomprimeerd worden verstuurd. Edurep ondersteunt de zogenaamde "deflate" en "gzip" compressie methoden voor content-encoding. De antwoorden van Edurep worden gecomprimeerd (min. 90%), waardoor het transport van alle XML geen vertragende factor meer is. De impact van het in- en uitpakken is nihil, dus de winst maximaal. De meeste browsers ondersteunen dit tegenwoordig standaard maar in backend code moet dit expliciet worden aangezet. Bijvoorbeeld in PHP-cURL gebeurt dit door het zetten van een cURL-optie: curl_setopt($curl, CURLOPT_ENCODING, 'gzip,deflate');.

Relevantie

Edurep bevat drie soorten velden met elk specifieke mogelijkheden voor het zoeken:

  • vrije tekstvelden: voor bepaling relevantie
  • vocabulaire velden: voor het filteren van de resultatenset
  • numerieke velden: voor het sorteren van de resultatenset

Wanneer in de zoekopdracht geen beperkingen worden aangegeven, worden de resultaten in principe in willekeurige volgorde teruggegeven. De plek van een record in deze willekeurige lijst wordt bij het harvesten van het record bepaald.

Het gebruik van filters (bijv. context=PO) heeft geen invloed op de willekeurige volgorde waarmee de records worden teruggegeven. Wanneer meerdere filters in een OR query worden gesteld, zullen de records die aan alle filters voldoen relevanter zijn en dus hoger in de resultatenlijst komen.

De daadwerkelijke relevantiebepaling wordt gedaan aan de hand van de zoekopdrachten in vrije tekstvelden. De relevantie wordt dan bepaald aan de hand van de relatieve voorkomendheid van de zoekwoorden in een record. Er wordt bijvoorbeeld gezocht op "fiets". Een record met 100 trefwoorden (waarvan 1x fiets) zal minder relevant zijn dan een record met 5 trefwoorden (waarvan 1x fiets).

Spiders

Zoekmachines als Google en Yahoo maken gebruik van programma's die geautomatiseerd het internet afzoeken en de gevonden pagina's indexeren. Het kan voorkomen dat deze spiders via de gebouwde zoekapplicatie zoekopdrachten aan Edurep stellen. Dit type zoekopdrachten zorgen voor een oneigenlijk gebruik van Edurep. Het vervuilt niet alleen de statistieken van Edurep maar ook de statistieken van de betreffende zoekapplicatie.

Er zijn verschillende manieren om de toegang voor spiders op de website te beperken, zodanig dat alleen het zoekdeel van de applicatie voor de spiders wordt afgesloten. Een overzicht hiervan is te vinden op Wikipedia.


Foutmeldingen

SRU Foutmeldingen

Een foutmelding vanuit Edurep is te herkennen aan de aanwezigheid van het diagnostics veld. In dit veld zal dan een diagnostic staan die die volgende elementen bevat:

  • een foutcode: in diagnostic/uri
  • een titel: in diagnostic/message
  • een beschrijving: in diagnostic/details

Voorbeeld

<srw:searchRetrieveResponse>
  <srw:version>1.2</srw:version>
  <srw:numberOfRecords>0</srw:numberOfRecords>
  <srw:diagnostics>
    <diagnostic>
      <uri>info://srw/diagnostics/1/48</uri>
      <details>Unexpected token after parsing ([=], CQL_QUERY(SCOPED_CLAUSE(SEARCH_CLAUSE(SEARCH_TERM(TERM('test')))))).</details>
      <message>Query Feature Unsupported</message>
    </diagnostic>
  </srw:diagnostics>
</srw:searchRetrieveResponse>

Foutcodes

foutcode titel/message uitleg
info://srw/diagnostics/1/4 Unsupported Operation Alleen operaties searchRetrieve en explain worden ondersteund.
info://srw/diagnostics/1/5 Unsupported Version Alleen versies 1.1 en 1.2 worden ondersteund. Gebruik 1.2
info://srw/diagnostics/1/6 Unsupported Parameter Value De waarde van een query parameter is ongeldig.
info://srw/diagnostics/1/7 Mandatory Parameter Not Supplied Niet alle verplichte argumenten zijn meegegeven.
info://srw/diagnostics/1/8 Unsupported Parameter Een van de query parameters is ongeldig.
info://srw/diagnostics/1/12 Too many characters in query Het query argument mag maximaal 4096 tekens bevatten.
info://srw/diagnostics/1/48 Query Feature Unsupported De query bevat een fout.


Jsonsearch Foutmeldingen

Een foutmelding uit de jsonsearch is te herkennen aan de "error" key in de response.

Voorbeeld

{
    "error": {
        "message": "Missing required argument: 'query'",
        "type": "MissingArgument"
    },
    "version": "0.1.beta"
}

Foutcodes

type omschrijving
MissingArgument een vereist argument ontbreekt in het verzoek