8,230
edits
Difference between revisions of "Tools/fr"
Jump to navigation
Jump to search
→Méthodes de générations
| Line 15: | Line 15: | ||
L'avenir se situe cependant dans le format Zeno : un format tout en un (tout dans un fichier), qui permet à la fois d'avoir des accès rapides ainsi que une compression forte et paramétrable. Zeno est un format créé par [http://www.digitale-bibliothek.de Directmedia] et qui a servi pour publié les [http://www.amazon.de/Wikipedia-2007-2008-Kompakt-DVD-ROM/dp/3866400187/ref=sr_1_1?ie=UTF8&s=software&qid=1232812631&sr=8-1 CD-ROM de Wikipédia en allemand]. Aujourd'hui, le format est abandonné, mais nous sommes plusieurs à vouloir continuer sont développement au sein du projet [http://wiki.openzim.org Openzim]. L'avenir dira si cette initiative sera un succès, mais l'objectif est d'en faire un standard et ainsi simplifier pour chacun la problématique du stockage des ''dumps''. Il est de toute manière quasiment déjà la meilleure solution. | L'avenir se situe cependant dans le format Zeno : un format tout en un (tout dans un fichier), qui permet à la fois d'avoir des accès rapides ainsi que une compression forte et paramétrable. Zeno est un format créé par [http://www.digitale-bibliothek.de Directmedia] et qui a servi pour publié les [http://www.amazon.de/Wikipedia-2007-2008-Kompakt-DVD-ROM/dp/3866400187/ref=sr_1_1?ie=UTF8&s=software&qid=1232812631&sr=8-1 CD-ROM de Wikipédia en allemand]. Aujourd'hui, le format est abandonné, mais nous sommes plusieurs à vouloir continuer sont développement au sein du projet [http://wiki.openzim.org Openzim]. L'avenir dira si cette initiative sera un succès, mais l'objectif est d'en faire un standard et ainsi simplifier pour chacun la problématique du stockage des ''dumps''. Il est de toute manière quasiment déjà la meilleure solution. | ||
== | == Génération == | ||
Pour générer un ''dump'' | |||
* | La question de la méthode pour générer un dump n'est pas une question simple. Pour plusieurs raisons, Kiwix s'est jusqu'à présent concentré sur la manière de générer des dumps offrant une sélection ; même si la publication de ''dumps'' complets de Wikipédia reste clairement un objectif. Les ''Kiwix tools'' sont donc étudiés pour aider à la sélection, aider à répliquer des contenus issus du site en ligne sur un miroir pour ensuite à partir de ce miroir faire un ''dump''. | ||
Mais ce n'est pas la seule méthode pour générer un ''dump'' : on peut s'y prendre théoriquement de différentes manières. Voici une petite liste non exhaustive d'approches différentes : | |||
* Si l'on souhaite produire un ''dump'' complet, on peut : | |||
** prendre un ''dump'' HTML issu du gestionnaire du wiki, la Fondation Wikimédia en fournit [http://static.wikipedia.org/ ici] par exemple. | ** prendre un ''dump'' HTML issu du gestionnaire du wiki, la Fondation Wikimédia en fournit [http://static.wikipedia.org/ ici] par exemple. | ||
** choisir de monter un miroir du wiki, d'uploader les données (le code wiki entre autre) dans la base de données et de ensuite générer un ''dump'' soit-même. On peut trouver de telles données pour la Fondation Wikimedia [http://download.wikimedia.org/backup-index.html ici]. Dans le cas d'une sélection, on peut aussi les récupérer dynamiquement sur le site (puisque un wiki est ''open source''). | ** choisir de monter un miroir du wiki, d'uploader les données (le code wiki entre autre) dans la base de données et de ensuite générer un ''dump'' soit-même. On peut trouver de telles données pour la Fondation Wikimedia [http://download.wikimedia.org/backup-index.html ici]. Dans le cas d'une sélection, on peut aussi les récupérer dynamiquement sur le site (puisque un wiki est ''open source''). | ||
** si l'on souhaite générer directement (en récupérant les pages HTML) un ''dump'' à l'aide du site web avec un logiciel de type ''aspirateur''. | ** si l'on souhaite générer directement (en récupérant les pages HTML) un ''dump'' à l'aide du site web avec un logiciel de type ''aspirateur''. | ||
* Si l'on | * Si l'on souhaite un ''dump'' partiel, il faut faire une sélection des articles, ensuite la problématique est analogue que pour un ''dump'' complet. | ||
Les contraintes sont assez nombreuses, voici celles qu'il faut prendre en compte : | Les contraintes sont assez nombreuses, voici de manière générale celles qu'il faut prendre en compte : | ||
* les ressources matérielles du serveur, | * les ressources matérielles du serveur, | ||
* vos propres ressources matérielles, | * vos propres ressources matérielles, | ||
* l'espace de stockage dont vous disposez pour le résultat final, | * l'espace de stockage dont vous disposez pour le résultat final, | ||
* comment faire la sélection si nécessaire. | * comment faire la sélection si nécessaire. | ||
== Utilisation == | == Utilisation == | ||