Le service d'enrichissement OpenAlex par Doi ne fonctionne pas pour tous les documents

Des enrichissements échouent en raison de l'abstract disponible dans la notice Openalex, qui contient des caractères spéciaux. L'abstract est formaté en inverted index ce qui fait des clés contiennent des . ou $ qui ne sont pas acceptés par MongoDB. Quand le ws a été créé Openalex ne fournissait d'abstract sous aucune forme.

[Error]: The dollar ($) prefixed field '$n=10$' in 'openAlex.abstract_inverted_index.$n=10$' is not valid for storage.

Pour interroger l'API depuis Lodex en contournant ce problème, j'avais recréé l'abstract dans le loader via ce script :

path = abstract
value = get("abstract_inverted_index").flatMap((values, key) => {return values.map(value => `${key}:${value}`) }).map(item => item.split(":")).map(([first, second]) => [first, parseInt(second, 10)]).map(item => item.reverse()).sort((a, b) => a[0] - b[0]).map(item => item.slice(1)).flatMap().join(' ')

est-il possible d'ajouter ce script dans le web-service ?

Inist-CNRS / web-services

Le service d'enrichissement OpenAlex par Doi ne fonctionne pas pour tous les documents #175