Données

Conditions de réutilisation

La base de données Open Beauty Facts est disponible sous licence Open Database License.
Les contenus individuels de la base de données sont disponibles sous licence Database Contents License.
Les images des produits sont disponibles sous licence Creative Commons Attribution ShareAlike licence. Les licences sont des licences libres qui autorisent l'utilisation et la reproduction du contenu à toutes fins, y compris l'utilisation commerciale, sous certaines conditions, en particulier l'attribution et le partage sous la même condition d'œuvres dérivées.

Merci de prendre connaissance des Conditions d'utilisation, de contribution et de réutilisation avant de réutiliser les données.

Informez-nous de la manière dont vous utilisez ces données

Nous aimerions savoir comment sont utilisées les données Open Beauty Facts. Ce n'est pas obligatoire mais nous apprécierions grandement si vous pouviez nous évoquer ce que vous en faites afin de le partager avec la communauté Open Beauty Facts. Vous avez aussi la possibilité de remplir ce formulaire pour avoir l'opportunité de voir votre application mise en avant.

Exports de données Open Beauty Facts

Les exports de base de données et fichiers de données sont réalisés quotidiennement, chaque nuit. Notre base de données est énorme, vous pourrez donc trouver diverses façons d'utiliser nos données, selon l'export que vous voulez.

Des informations sur les différents champs des exports MongoDB et CSV sont disponibles sur https://world.openbeautyfacts.org/data/data-fields.txt

Export MongoDB

Les données concernant tous les produits sont disponibles à travers l'export MongoDB.

Lien

https://static.openbeautyfacts.org/data/openbeautyfacts-mongodbdump.gz

sha256sum

https://static.openbeautyfacts.org/data/gz-sha256sum

md5sum

https://static.openbeautyfacts.org/data/gz-md5sum

Export Delta

Des exports delta journaliers sont fournis pour les 14 jours précédents. La liste des fichiers delta actuellement disponibles est trouvable sur https://static.openbeautyfacts.org/data/delta/index.txt.

Chaque ligne représente un fichier disponible à l'adresse https://static.openbeautyfacts.org/data/delta/{filename}.

Le nom du fichier contient le timestamp UNIX du premier et du dernier changement inclus dans le fichier JSON, afin que les fichiers delta puissent être importés (après extraction) avec mongoimport dans un ordre alphabétique.

Veuillez noter qu'en raison de la nature de mongoexport , les fichiers delta ne peuvent pas vous renseigner sur les produits supprimés. Pour supprimer les produits supprimés de votre base de données, vous devrez importer l'intégralité du dump MongoDB.

Export de données JSONL

L'intégralité de notre base de données est aussi disponible au format JSONL (parfois appelé LDJSON ou NDJSON) où chaque ligne est un objet JSON. Ce sont exactement les mêmes données que l'export MongoDB. Ce ficher est compressé avec gzip.

Lien

https://static.openbeautyfacts.org/data/openbeautyfacts-products.jsonl.gz

Un moyen approprié d'exploiter la base de données est d'utiliser DuckDB, un outil analytique intégré conçu pour traiter de grandes quantités de données en une fraction de seconde. Vous pouvez lire notre article de blog dans lequel nous vous expliquons comment explorer et utiliser la base de données Open Beauty Facts avec DuckDB

Parquet Data Export on Hugging Face

Une version simplifiée du dump JSONL est aussi disponible dans le format Parquet. Lors de la conversion, nous avons filtré les colonnes qui contiennent des informations dupliquées, qui sont utilisées pour le débogage interne ou qui ne sont tout simplement pas pertinentes pour les utilisateurs.

Le format Parquet s'est avéré pratique :

• Les données sont organisées par colonne plutôt que par ligne, ce qui permet d'économiser de l'espace de stockage et d'accélérer les requêtes d'analyse, c'est-à-dire que vous pouvez sélectionner uniquement les colonnes qui vous intéressent, optimisant ainsi les performances des requêtes, même sur les ordinateurs d'entrée de gamme.
• Compression et décompression de données hautement efficaces, ce qui le rend idéal pour le stockage et le partage de grands ensembles de données de toute nature,
• Prend en charge les types de données complexes et les structures de données imbriquées avancées.

L'ensemble de données est disponible sur Hugging Face, un écosystème collaboratif d'apprentissage automatique où les développeurs et les chercheurs peuvent partager des modèles et des ensembles de données.

Lien

https://huggingface.co/datasets/openfoodfacts/product-database/resolve/main/beauty.parquet?download=true

Trouvez plus d'informations dans le Wiki, y compris les directives pour la réutilisation des données et des exemples de requêtes pour commencer.

Export CSV

Les données de tous les produits, ou seulement certains, peuvent être téléchargées au format CSV (utilisables dans OpenOffice, Excel et de nombreux logiciels) via le formulaire de recherche avancée.

Liens

https://static.openbeautyfacts.org/data/en.openbeautyfacts.org.products.csv.gz (CSV compressé au format GZIP: ~ 0,9 Go, non compressé : ~ 9 Go)

Le fichier utilise l'encodage Unicode UTF-8. Le caractère de séparation des champs est <tab> (tabulation).

Export RDF

Les données sont également disponibles au format RDF. Vous pouvez lire l'annonce en français.

Lien

https://world.openbeautyfacts.org/data/en.openbeautyfacts.org.products.rdf.gz

Export des images

Les images et les résultats OCR peuvent être récupérés soit à partir de notre serveur, soit via AWS (grâce au programme AWS Open Data). Consultez notre documentation pour en savoir plus sur le téléchargement d'images.

API Live JSON et XML

Une API JSON est également disponible pour accéder aux données d'un produit. Cette API est notamment utilisée au sein des applications Open Beauty Facts Android et iPhone.

Nous améliorons l'API au fil du temps mais nous veillons à conserver une rétrocompatibilité. Veuillez nous contacter si vous l'utilisez, afin que nous puissions vous informer des changements potentiels.

L'URL pour lire les données d'un produit : https://world.openbeautyfacts.org/api/v2/product/[code barre].json

Exemple : https://world.openbeautyfacts.org/api/v2/product/3600550578041.json

Notez que si les résultats sont trop nombreux, vous pouvez les filtrer, comme décrit dans la documentation de l'API.

• API V3 - nouvelle documentation OpenAPI - Travail en cours

Assistance recherchée pour OpenAPI

Nous sommes enthousiastes à l'idée de terminer la documentation de l'API, d'ajouter des cas d'utilisation, et d'automatiser la génération du SDK. Si vous avez des connaissances relatives à OpenAPI, n'hésitez pas à apporter votre aide.

Vous avez parfaitement le droit d'utiliser l'API pour des programmes en production, tant qu'1 appel API = 1 scan par un utilisateur réel. Toute tentative de "scraper" la base de données en utilisant l'API sera très probablement bloquée, car des exports journaliers complets sont disponibles sur cette page.

En outre, l'envoi d'un en-tête HTTP avec votre appel d'API est un moyen efficace pour que l'on puisse vous contacter, en cas de problème.

Si vous n'êtes pas sûr de quelque chose, ou si vous avez une question (il n'y a pas de question bête), n'hésitez pas à la poser sur le canal #api de Slack :-)

API XML expérimental

Vous pouvez également obtenir le résultat en XML en utilisant .xml

Exemple: https://world.openbeautyfacts.org/api/v2/product/737628064502.xml

Cette API n'est pas activement maintenue et n'est pas officiellement documentée.

Wrappers et SDKs

Nous avons probablement un wrapper pour votre langage de programmation préféré. Si nous l'avons, vous pouvez l'utiliser et l'améliorer. Sinon, vous pouvez aider à le créer.

Ils vous permettront de consommer des données et permettront à vos utilisateurs de créer de nouvelles données.

Principes généraux pour satisfaire vos utilisateurs

• Vous pouvez rechercher des informations sur les produits, y compris de nombreuses valeurs calculées utiles.
• Si vous ne pouvez pas obtenir les informations sur un produit spécifique, vous pouvez demander à votre utilisateur d'envoyer des photos et des données, qui seront ensuite traités par Open Beauty Facts IA et ses contributeurs pour obtenir le résultat que vous voulez leur montrer.
• Elixir : GitHub

Si vos utilisateurs attendent un résultat immédiat (par exemple applications de nutrition)

• Envoyer des photos (face/nutrition/ingrédients) : chose la moins pénible pour vos utilisateurs
• L'IA d'Open Beauty Facts - Robotoff - générera des données à partir des photos
• Avec le temps, d'autres applis, ainsi que la communauté Open Beauty Facts, rempliront les données manquantes

Si vos utilisateurs attendent un résultat immédiat (par exemple applications d'allergies)

• Envoyez les ingrédients + la catégorie > obtenez l'analyse des ingrédients, les additifs, les allergènes, les ingrédients normalisés, végétalien, végétarien…
• Envoyez des étiquettes pour obtenir plus d'infos

Application mobile Android et iPhone

La nouvelle application mobile multiplateforme est développée en Flutter/Dart.

L'application permet aux utilisateurs de scanner le code-barres des produits, d'afficher des informations sur les produits, de prendre et d'envoyer des photos et des données sur les produits manquants.

L'application permet aux utilisateurs de scanner le code-barres des produits, d'afficher des informations sur les produits, de prendre et d'envoyer des photos et des données sur les produits manquants.

Vous êtes invités à réutiliser le code (il est open source) et à nous aider à l'améliorer, pour tous, sur toute la planète.

Kits de développement logiciel

• Cordova : GitHub (ancienne application officielle Open Beauty Facts)
• DART : GitHub
• Elixir : GitHub - Canal de discussion
• Go : GitHub - Canal de discussion
• Java : GitHub - Canal de discussion
• Kotlin : GitHub - Canal de discussion
• NodeJS : GitHub - Canal de discussion
• PHP : GitHub - Canal de discussion
• PHP (Laravel) : GitHub - Canal de discussion
• Python : GitHub - Canal de discussion
• React Native : GitHub - Canal de discussion
• Ruby : GitHub - Canal de discussion
• Rust : GitHub - Canal de discussion
• R: GitHub - Canal de discussion
• Swift: GitHub - Canal de discussion
• .NET/C#: GitHub - Canal de discussion

Discuter des données, de l'API et des exports

Vous pouvez consulter les FAQ concernant l'API et les exportations de données ainsi que les questions courantes sur Open Food Facts

Vous pouvez rejoindre le canal de discussion Slack Open Beauty Facts, qui est la manière recommandée de discuter et de poser des questions à propos de l'API. Veuillez poser vos questions dans le canal #api

Vous pouvez ouvrir un fil de discussion sur notre dépôt de documentation API

Pour toute question concernant les données, vous pouvez nous contacter à reuse@openfoodfacts.org