Siphonnage flickr - Historique des versions

Nanspoi : /* Utiliser le script */

2024-01-24T11:00:07Z

Utiliser le script

← Version précédente		Version du 24 janvier 2024 à 13:00
Ligne 27 :		Ligne 27 :
	[https://docs.github.com/en/repositories/creating-and-managing-repositories/cloning-a-repository Clonez le repository,] ([https://www.atlassian.com/fr/git/tutorials/install-git installez git au préalable]). Une fois que vous avez le repository, il vous faudra [https://ioflood.com/blog/pip-install-requirements-txt/ installer le contenu du fichier requirements.txt]. Pour celà, vous allez devoir [https://dev.to/shriekdj/how-to-create-and-activate-the-virtual-environment-for-python3-project-3g4l créer et activer/entrer dans un environnement virtuel] (le fichier requirements.txt donne accès aux librairies python dont vous allez avoir besoin afin de faire fonctionner le script)		[https://docs.github.com/en/repositories/creating-and-managing-repositories/cloning-a-repository Clonez le repository,] ([https://www.atlassian.com/fr/git/tutorials/install-git installez git au préalable]). Une fois que vous avez le repository, il vous faudra [https://ioflood.com/blog/pip-install-requirements-txt/ installer le contenu du fichier requirements.txt]. Pour celà, vous allez devoir [https://dev.to/shriekdj/how-to-create-and-activate-the-virtual-environment-for-python3-project-3g4l créer et activer/entrer dans un environnement virtuel] (le fichier requirements.txt donne accès aux librairies python dont vous allez avoir besoin afin de faire fonctionner le script)

	==Utiliser le script==		===Utiliser le script===
	Comme nous l'explique le [https://github.com/antiboredom/flickr-scrape repo], une fois que vous avez installé les librairies requises, il vous faudra créer un fichier json, nommé credentials.json, qui permettra au script de se saisir de votre [https://docs.oracle.com/cd/E65459_01/dev.1112/e65461/content/authn_api_key.html API_KEY et SECRET_KEY] ([https://github.com/antiboredom/flickr-scrape plus d'infos sur le repo]). Maintenant que tout est en place, il vous suffit simplement de lancer le script et de lui passer les paramètres que vous souhaitez. En l'occurence, tapez dans votre terminal:		Comme nous l'explique le [https://github.com/antiboredom/flickr-scrape repo], une fois que vous avez installé les librairies requises, il vous faudra créer un fichier json, nommé credentials.json, qui permettra au script de se saisir de votre [https://docs.oracle.com/cd/E65459_01/dev.1112/e65461/content/authn_api_key.html API_KEY et SECRET_KEY] ([https://github.com/antiboredom/flickr-scrape plus d'infos sur le repo]). Maintenant que tout est en place, il vous suffit simplement de lancer le script et de lui passer les paramètres que vous souhaitez. En l'occurence, tapez dans votre terminal:

Nanspoi : /* Se procurer le script */

2024-01-24T10:59:55Z

Se procurer le script

← Version précédente		Version du 24 janvier 2024 à 12:59
Ligne 21 :		Ligne 21 :
	Bien heureusement, il se trouve qu'un.e internaute s'est trouvé.e dans une situation assez similaire, ce qui nous a permis de faire ce travail en un rien de temps :		Bien heureusement, il se trouve qu'un.e internaute s'est trouvé.e dans une situation assez similaire, ce qui nous a permis de faire ce travail en un rien de temps :

	==Se procurer le script==		===Se procurer le script===

	[https://github.com/antiboredom/flickr-scrape Le repository]		[https://github.com/antiboredom/flickr-scrape Le repository]

Nanspoi : /* Comment fonctionne une API ?: */

2024-01-24T10:59:44Z

Comment fonctionne une API ?:

← Version précédente		Version du 24 janvier 2024 à 12:59
Ligne 5 :		Ligne 5 :
	Premièrement, l'API semblait être une solution viable, malheureusement, pour des questions de propriété intellectuelle et autre(...), l'API Flickr ne permet pas vraiment d'extraire chacune des images d'un groupe. Ceci dit il était possible récupérer des données sur les photos en questions : [https://www.flickr.com/services/api/ FlickrAPI(Apllication Programming Interface]		Premièrement, l'API semblait être une solution viable, malheureusement, pour des questions de propriété intellectuelle et autre(...), l'API Flickr ne permet pas vraiment d'extraire chacune des images d'un groupe. Ceci dit il était possible récupérer des données sur les photos en questions : [https://www.flickr.com/services/api/ FlickrAPI(Apllication Programming Interface]

	==Comment fonctionne une API ?:==		===Comment fonctionne une API ?:===
	Il existe plusieurs façons d'utiliser une API, mais les trois méthodes principales sont :		Il existe plusieurs façons d'utiliser une API, mais les trois méthodes principales sont :

Nanspoi : /* Se procurer le script */

2024-01-24T10:56:31Z

Se procurer le script

← Version précédente		Version du 24 janvier 2024 à 12:56
Ligne 25 :		Ligne 25 :
	[https://github.com/antiboredom/flickr-scrape Le repository]		[https://github.com/antiboredom/flickr-scrape Le repository]

	[https://docs.github.com/en/repositories/creating-and-managing-repositories/cloning-a-repository Clonez le repository,] ([https://www.atlassian.com/fr/git/tutorials/install-git installez git au préalable]). Une fois que vous avez le repository, il vous faudra [https://ioflood.com/blog/pip-install-requirements-txt/ installer le contenu du fichier requirements.txt] (le fichier requirements.txt donne accès aux librairies python dont vous allez avoir besoin afin de faire fonctionner le script)		[https://docs.github.com/en/repositories/creating-and-managing-repositories/cloning-a-repository Clonez le repository,] ([https://www.atlassian.com/fr/git/tutorials/install-git installez git au préalable]). Une fois que vous avez le repository, il vous faudra [https://ioflood.com/blog/pip-install-requirements-txt/ installer le contenu du fichier requirements.txt]. Pour celà, vous allez devoir [https://dev.to/shriekdj/how-to-create-and-activate-the-virtual-environment-for-python3-project-3g4l créer et activer/entrer dans un environnement virtuel] (le fichier requirements.txt donne accès aux librairies python dont vous allez avoir besoin afin de faire fonctionner le script)

	==Utiliser le script==		==Utiliser le script==

Nanspoi : /* Se procurer le script */

2024-01-24T10:53:10Z

Se procurer le script

← Version précédente		Version du 24 janvier 2024 à 12:53
Ligne 25 :		Ligne 25 :
	[https://github.com/antiboredom/flickr-scrape Le repository]		[https://github.com/antiboredom/flickr-scrape Le repository]

	[https://docs.github.com/en/repositories/creating-and-managing-repositories/cloning-a-repository Clonez le repository,] ([https://www.atlassian.com/fr/git/tutorials/install-git installez git au préalable]). Une fois que vous avez le repository, il vous faudra [https://ioflood.com/blog/pip-install-requirements-txt/ installer ~~les~~ requirements.txt] (~~les~~ librairies python dont vous allez avoir besoin afin de faire fonctionner le script)		[https://docs.github.com/en/repositories/creating-and-managing-repositories/cloning-a-repository Clonez le repository,] ([https://www.atlassian.com/fr/git/tutorials/install-git installez git au préalable]). Une fois que vous avez le repository, il vous faudra [https://ioflood.com/blog/pip-install-requirements-txt/ installer le contenu du fichier requirements.txt] (le fichier requirements.txt donne accès aux librairies python dont vous allez avoir besoin afin de faire fonctionner le script)

	==Utiliser le script==		==Utiliser le script==

Nanspoi : /* Se procurer le script */

2024-01-24T10:52:00Z

Se procurer le script

← Version précédente		Version du 24 janvier 2024 à 12:52
Ligne 23 :		Ligne 23 :
	==Se procurer le script==		==Se procurer le script==

	[https://github.com/antiboredom/flickr-scrape ~~github~~]		[https://github.com/antiboredom/flickr-scrape Le repository]

	[https://docs.github.com/en/repositories/creating-and-managing-repositories/cloning-a-repository Clonez le repository,] ([https://www.atlassian.com/fr/git/tutorials/install-git installez git au préalable]). Une fois que vous avez le repository, il vous faudra [https://ioflood.com/blog/pip-install-requirements-txt/ installer les requirements.txt] (les librairies python dont vous allez avoir besoin afin de faire fonctionner le script)		[https://docs.github.com/en/repositories/creating-and-managing-repositories/cloning-a-repository Clonez le repository,] ([https://www.atlassian.com/fr/git/tutorials/install-git installez git au préalable]). Une fois que vous avez le repository, il vous faudra [https://ioflood.com/blog/pip-install-requirements-txt/ installer les requirements.txt] (les librairies python dont vous allez avoir besoin afin de faire fonctionner le script)

Nanspoi : /* Table des matières */

2024-01-24T10:50:43Z

Table des matières

← Version précédente		Version du 24 janvier 2024 à 12:50
Ligne 5 :		Ligne 5 :
	Premièrement, l'API semblait être une solution viable, malheureusement, pour des questions de propriété intellectuelle et autre(...), l'API Flickr ne permet pas vraiment d'extraire chacune des images d'un groupe. Ceci dit il était possible récupérer des données sur les photos en questions : [https://www.flickr.com/services/api/ FlickrAPI(Apllication Programming Interface]		Premièrement, l'API semblait être une solution viable, malheureusement, pour des questions de propriété intellectuelle et autre(...), l'API Flickr ne permet pas vraiment d'extraire chacune des images d'un groupe. Ceci dit il était possible récupérer des données sur les photos en questions : [https://www.flickr.com/services/api/ FlickrAPI(Apllication Programming Interface]

	Comment fonctionne une API ?:		==Comment fonctionne une API ?:==
	Il existe plusieurs façons d'utiliser une API, mais les trois méthodes principales sont :		Il existe plusieurs façons d'utiliser une API, mais les trois méthodes principales sont :

Ligne 19 :		Ligne 19 :
	Alors, de nombreuses données sont extraites, (description, url, user_id, group_id...) seulement, nous n'avons pas les photos, ou du moins si nous obtenons les urls, il ne s'agit que des thumbnails.		Alors, de nombreuses données sont extraites, (description, url, user_id, group_id...) seulement, nous n'avons pas les photos, ou du moins si nous obtenons les urls, il ne s'agit que des thumbnails.

	Bien heureusement, il se trouve qu'un.e internaute s'est trouvé.e dans une situation assez similaire, ce qui nous a permis de faire ce travail en un rien de temps :		Bien heureusement, il se trouve qu'un.e internaute s'est trouvé.e dans une situation assez similaire, ce qui nous a permis de faire ce travail en un rien de temps :

	==Se procurer le script==		==Se procurer le script==

Nanspoi : /* Utiliser le script */

2024-01-24T10:50:17Z

Utiliser le script

← Version précédente		Version du 24 janvier 2024 à 12:50
Ligne 27 :		Ligne 27 :

	==Utiliser le script==		==Utiliser le script==
	Comme nous l'explique le [https://github.com/antiboredom/flickr-scrape repo], une fois que vous avez installé les librairies requises, il vous faudra créer un fichier json, nommé credentials.json, qui permettra au script de se saisir de votre [https://docs.oracle.com/cd/E65459_01/dev.1112/e65461/content/authn_api_key.html API_KEY et SECRET_KEY] ([https://github.com/antiboredom/flickr-scrape plus d'infos sur le repo]. Maintenant que tout est en place, il vous suffit simplement de lancer le script et de lui passer les paramètres que vous souhaitez. En l'occurence, tapez dans votre terminal:		Comme nous l'explique le [https://github.com/antiboredom/flickr-scrape repo], une fois que vous avez installé les librairies requises, il vous faudra créer un fichier json, nommé credentials.json, qui permettra au script de se saisir de votre [https://docs.oracle.com/cd/E65459_01/dev.1112/e65461/content/authn_api_key.html API_KEY et SECRET_KEY] ([https://github.com/antiboredom/flickr-scrape plus d'infos sur le repo]). Maintenant que tout est en place, il vous suffit simplement de lancer le script et de lui passer les paramètres que vous souhaitez. En l'occurence, tapez dans votre terminal:

	python scraper.py --group https://www.flickr.com/groups/erg_brussells		python scraper.py --group https://www.flickr.com/groups/erg_brussells

Nanspoi : /* Utiliser le script */

2024-01-24T10:49:52Z

Utiliser le script

← Version précédente		Version du 24 janvier 2024 à 12:49
Ligne 37 :		Ligne 37 :
	[https://www.knowledgehut.com/blog/programming/run-python-scripts Pour plus d'infos sur comment lancer un script python]		[https://www.knowledgehut.com/blog/programming/run-python-scripts Pour plus d'infos sur comment lancer un script python]

	En théorie, les pages contenant les images sont "siphonnées", nous avons ~~avec ce script les~~ métadonnées qui nous intéressent, mais rien ne nous empêche d'en rajouter, ce dans la méthode get_photos (ligne 41 du script).		En théorie, les pages contenant les images sont "siphonnées", nous avons également accès aux métadonnées des images qui nous intéressent, mais rien ne nous empêche d'en rajouter, ce dans la méthode get_photos (ligne 41 du script).

Nanspoi : /* Se procurer le script */

2024-01-24T10:49:07Z

Se procurer le script

← Version précédente		Version du 24 janvier 2024 à 12:49
Ligne 25 :		Ligne 25 :
	[https://github.com/antiboredom/flickr-scrape github]		[https://github.com/antiboredom/flickr-scrape github]
	[https://docs.github.com/en/repositories/creating-and-managing-repositories/cloning-a-repository Clonez le repository,] ([https://www.atlassian.com/fr/git/tutorials/install-git installez git au préalable]). Une fois que vous avez le repository, il vous faudra [https://ioflood.com/blog/pip-install-requirements-txt/ installer les requirements.txt] (les librairies python dont vous allez avoir besoin afin de faire fonctionner le script)		[https://docs.github.com/en/repositories/creating-and-managing-repositories/cloning-a-repository Clonez le repository,] ([https://www.atlassian.com/fr/git/tutorials/install-git installez git au préalable]). Une fois que vous avez le repository, il vous faudra [https://ioflood.com/blog/pip-install-requirements-txt/ installer les requirements.txt] (les librairies python dont vous allez avoir besoin afin de faire fonctionner le script)

			==Utiliser le script==
			Comme nous l'explique le [https://github.com/antiboredom/flickr-scrape repo], une fois que vous avez installé les librairies requises, il vous faudra créer un fichier json, nommé credentials.json, qui permettra au script de se saisir de votre [https://docs.oracle.com/cd/E65459_01/dev.1112/e65461/content/authn_api_key.html API_KEY et SECRET_KEY] ([https://github.com/antiboredom/flickr-scrape plus d'infos sur le repo]. Maintenant que tout est en place, il vous suffit simplement de lancer le script et de lui passer les paramètres que vous souhaitez. En l'occurence, tapez dans votre terminal:

			python scraper.py --group https://www.flickr.com/groups/erg_brussells
			^^^^^^^^^^^^^^^^^ ^^^^^^^ ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
			Lancer le script passer le l'url du groupe en question.
			paramètre
			"group"

			[https://www.knowledgehut.com/blog/programming/run-python-scripts Pour plus d'infos sur comment lancer un script python]

			En théorie, les pages contenant les images sont "siphonnées", nous avons avec ce script les métadonnées qui nous intéressent, mais rien ne nous empêche d'en rajouter, ce dans la méthode get_photos (ligne 41 du script).

Siphonnage flickr - Historique des versions

Nanspoi : /* Utiliser le script */

Nanspoi : /* Se procurer le script */

Nanspoi : /* Comment fonctionne une API ?: */

Nanspoi : /* Se procurer le script */

Nanspoi : /* Se procurer le script */

Nanspoi : /* Se procurer le script */

Nanspoi : /* Table des matières */

Nanspoi : /* Utiliser le script */

Nanspoi : /* Utiliser le script */

Nanspoi : /* Se procurer le script */

Nanspoi : /* Utiliser le script */

Nanspoi : /* Se procurer le script */

Nanspoi : /* Comment fonctionne une API ?: */

Nanspoi : /* Se procurer le script */

Nanspoi : /* Se procurer le script */

Nanspoi : /* Se procurer le script */

Nanspoi : /* Table des matières */

Nanspoi : /* Utiliser le script */

Nanspoi : /* Utiliser le script */

Nanspoi : /* Se procurer le script */