Post

CM3 Methodes

Télécharger le CM3 Methodes en pdf

Pages : 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109

Page 1 : Introduction aux SHS-Séance 2 –Quelles méthodes pour les SHS ?20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg1Page de titre de la première édition du Discours de la méthode de Descartes Source : Wikipédia

page 1

Page 2 : 1 La démarche générale en SHS2 L’état de l’art : la recherche des sources3 La comparaison des méthodes4 Les méthodes quantitatives 5 Les méthodes qualitatives 6 Ce que change le numérique7 Les données et la théorie8 Bibliographie20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS2

page 2

Page 3 : 1 La démarche générale en SHS2 L’état de l’art : la recherche des sources3 La comparaison des méthodes4 Les méthodes quantitatives 5 Les méthodes qualitatives 6 Ce que change le numérique7 Les données et la théorie8 Bibliographie20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg3

page 3

Page 4 : • La recherche en science humaines et sociales, comme toute recherche scientifique, a ses méthodes.• Il existe de nombreux guides à la recherche en sciences sociales, ainsi que des manuels présentant des aspects plus spécifiques, comme « l’analyse quantitative des données » ou « les méthodes d’observation en sciences sociales ».• En une heure et demie, l’objectif est :- de vous faire prendre la mesure de la diversité de ces méthodes ;- de vous sensibiliser à certains enjeux méthodologiques.20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg4

page 4

Page 5 : Construire un projet de recherche et une problématique20/10/2024Pole Humanités Design – Département des Relations Humaines5Comment s’y prend-on ???Quelles sont les grandes étapes ??Des aides en ligne : http://www.infosphere.uqam.ca/

page 5

Page 6 : 20/10/2024Pole Humanités Design – Département des Relations Humaines6Marquet Jacques, Van Campenhoudt Luc, Quivy Raymond, Manuel de recherche en sciences sociales, Paris, Armand Colin, 6ème éd., 2022.Etape 1 La question de départ / la demande / les objectifsEtape 2 L’explorationLes lectures / Les entretiens exploratoiresEtape 3 La problématiqueEtape 4 La construction du modèle d’analyse, échantillonnage et modalités de recueilEtape 5 L’observation / le recueil de l’informationEtape 6 L’analyse des informationsEtape 7 La conclusion

page 6

Page 7 : 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg7Que constate-t-on dans le schéma précédent ?A quel moment intervient la collecte des données ??

page 7

Page 8 : 20/10/2024Pole Humanités Design – Département des Relations Humaines8Marquet Jacques, Van Campenhoudt Luc, Quivy Raymond, Manuel de recherche en sciences sociales, Paris, Armand Colin, 6ème éd., 2022.Etape 1 La question de départ / la demande / les objectifsEtape 2 L’explorationLes lectures / Les entretiens exploratoiresEtape 3 La problématiqueEtape 4 La construction du modèle d’analyse, échantillonnage et modalités de recueilEtape 5 L’observation / le recueil de l’informationEtape 6 L’analyse des informationsEtape 7 La conclusionPhase préparatoire indispensable pour poser les bases de son enquête en sciences sociales

page 8

Page 9 : 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg9Plus précisément, qu’est-ce la problématique?Comment la traduit-on scientifiquement ??

page 9

Page 10 : 20/10/2024Pole Humanités Design – Département des Relations Humaines Introduction aux SHS10Marquet Jacques, Van Campenhoudt Luc, Quivy Raymond, Manuel de recherche en sciences sociales, Paris, Armand Colin, 6ème éd., 2022.Etape 1 La question de départ / la demande / les objectifsEtape 2 L’explorationLes lectures / Les entretiens exploratoiresEtape 3 La problématiqueEtape 4 La construction du modèle d’analyse , échantillonnage et modalités de recueilEtape 5 L’observation / le recueil de l’informationEtape 6 L’analyse des informationsEtape 7 La conclusionQuels facteurs ont un effet sur tel phénomène ?

page 10

Page 11 : 20/10/2024Pole Humanités Design – Département des Relations Humaines11Etape 3 La problématiqueQuels facteurs ont un effet sur tel phénomène ?Emettre des hypothèses formulées de manière claire, plausible, afin de les tester.Si le projet d’enquête se fait en réponse à la demande d’un tiers un client, par exemple, il est indispensable de bien comprendre ses objectifs.

page 11

Page 12 : • Ce qui suppose de se donner des « indicateurs » mesurables ou au moins testables.Département Humanités & Design - Introduction aux SHS 12

page 12

Page 13 : 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg13Prenons un exemple.« Quels liens les adolescents ont-ils avec les réseaux sociaux ? »Voici la question de départ, comment la problématiser plus précisément ??

page 13

Page 14 : 1 La démarche générale en SHS2 L’état de l’art : la recherche des sources3 La comparaison des méthodes4 Les méthodes quantitatives 5 Les méthodes qualitatives 6 Ce que change le numérique7 Les données et la théorie8 Bibliographie20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS14

page 14

Page 15 : Identifier les sources • Avant toute recherche, il faut savoir ce qui a été fait et dit sur le sujet.• Un certain nombre de travaux de recherche sont aujourd’hui en accès libre sur différentes plateformes.• Il est indispensable d’entrer en dialogue avec ces travaux, de manière à préciser sa propre problématique et l’apport nouveau de cette recherche.20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg15

page 15

Page 16 : Une lecture active et critique• De très nombreuses sources possibles :- D’abord les travaux classiques reconnus dans le domaine, évidemment et tous les ouvrages et articles écrits par des chercheurs professionnels,- mais également des « sources primaires » à savoir des sources de première main, qui n’ont pas été réélaborées par un chercheur, comme une conversation Facebook, un post de forum, etc.• Importance de la diversité des points de vue, de se mettre à la place de l’autre20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS16

page 16

Page 17 : Pôle Humanités Design - Département des Relations Humaines17Conseils pour la recherche documentaire et la rédaction d’articles

page 17

Page 18 : Pôle Humanités Design - Département des Relations Humaines18I – Les ressources documentaires en ligne

page 18

Page 19 : Exercer une veille en sciences humaines et socialesUn espace d’archivage des thèses et des mémoires : https://hal.science/ 20/10/2024Département Relations Humaines CYTECH19

page 19

Page 20 : Exercer une veille en sciences humaines et socialesPrincipalement deux sources généralistes en français, pour se tenir au courant des publications dans le domaine des essais :• https://www.nonfiction.fr/ • https://laviedesidees.fr/ Voir aussi :• https://www.franceculture.fr/philosophie• https://www.philomag.com/ abonnement payant, mais contenu gratuit• https://www.scienceshumaines.com/ abonnement payant, mais contenu gratuit20/10/2024Département Relations Humaines CYTECH20

page 20

Page 21 :

page 21

Page 22 :

page 22

Page 23 : Approfondir une problématique : les articles de recherche et ouvrages en ligne 1/3Les plateformes généralistes de revues dans différentes disciplines :• En français :• https://www.cairn.info/ • https://www.openedition.org/catalogue-journals • https://www.erudit.org/fr/ • https://www.persee.fr/ • En anglais : https://www.jstor.org/ 20/10/2024Département Relations Humaines CYTECH23

page 23

Page 24 : Approfondir une problématique : les articles de recherche et ouvrages en ligne 2/3Les ouvrages libres d’accès• Des ouvrages universitaires en libre accès : https://books.openedition.org/ • Des classiques des sciences sociales tombés dans le domaine public au Québec : http://classiques.uqac.ca/ • Une maison d’édition en éthique et sciences sociales, dont certains ouvrages en ligne sont en libre accès : https://www.eclm.fr/nouveautes/ 20/10/2024Département Relations Humaines CYTECH24

page 24

Page 25 : Identifiez-vous à travers votre compte universitaire pour accéder à plus de ressources gratuitement

page 25

Page 26 :

page 26

Page 27 : Quelques ressources plus spécialisées :• En français :• https://www.implications-philosophiques.org/ une plateforme importante en philosophie• https://www.fabula.org/ la plateforme de référence pour la recherche en littérature • http://www.actu-philosophia.com/ • Pour la philosophie, en anglais plus technique• https://philpapers.org/ • https://plato.stanford.edu/entries/ une encyclopédie philosophique en ligne de référence• Sur la question des nouvelles technologies : https://www.implications-philosophiques.org/category/semaines-thematiques/philosophie-et-numerique/ un dossier de qualité20/10/2024Département Relations Humaines CYTECH27Approfondir une problématique : les articles de recherche et ouvrages en ligne 3/3

page 27

Page 28 :

page 28

Page 29 : Quelques autres ressources : partage des savoirs et vulgarisationIl existe également de nombreuses ressources de vulgarisation de qualité, sous la forme de conférences ou de cours en ligne :Grandes institutionsDeux institutions de référence, dont les plateformes de diffusion sont riches :• ENS : https://savoirs.ens.fr/ • Collège de France : https://www.college-de-france.fr/site/savoirs/ • Canal-U : https://www.canal-u.tv/ Voir aussi :BNF : https://www.bnf.fr/fr/mediatheque/toute-la-mediatheque?firstRub=non

page 29

Page 30 : Quelques autres ressources : partage des savoirs et vulgarisationLa chaîne Arte Campus, à laquelle vous avez normalement accès via l’université

page 30

Page 31 :

page 31

Page 32 : Quelques autres ressources : partage des savoirs et vulgarisationUniversités françaisesToutes les universités françaises ont une activité de « diffusion des savoirs ». Voir sur le site Internet, la rubrique consacrée.Universités américainesToutes les grandes universités américaines ont une chaîne sur YouTube, avec des cours en ligne très intéressants, dans différentes disciplines voir exemple en page suivante.Chaînes en ligne de vulgarisation :Par exemple, pour la philosophie, « Monsieur Phi » https://www.youtube.com/c/MonsieurPhi/featured

page 32

Page 33 :

page 33

Page 34 : Les sources d’information sur la sociétéD’autres ressources clés sur la sociétéLe site : https://www.data.gouv.fr/fr/ Le site de l’INSEE : https://www.insee.fr/fr/accueil, riche source d’informations sociologiques et méthodologiques.Le site de l’INED : https://www.ined.fr/ Le site du CREDOC : https://www.credoc.fr/ Le catalogue des données en sciences sociales et humaines : https://data.progedo.fr/ La banque de données du CDSP de Sciences Po : https://data.sciencespo.fr/dataverse/cdsp Les études publiées par les principaux instituts de sondage, consultables sur les sites de : IFOP, Ipsos, Sofres, Kantar, etc..

page 34

Page 35 : Département Humanités & Design - Introduction aux SHS 35

page 35

Page 36 : Département Humanités & Design - Introduction aux SHS 36

page 36

Page 37 : Des sources d’information sur les ODD et sur le croisement avec l’ingénierieUn site remarquable pour se familiariser avec les ODD de la fondation UVED : https://www.uved.fr/menu-ressources/odd

page 37

Page 38 : 1 La démarche générale en SHS2 L’état de l’art : la recherche des sources3 La comparaison des méthodes4 Les méthodes quantitatives 5 Les méthodes qualitatives 6 Ce que change le numérique7 Les données et la théorie8 Bibliographie20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg38

page 38

Page 39 : 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg39A votre avis, quels sont les objectifs et atouts respectifsdes méthodes quantitativesetdes méthodes qualitatives ??

page 39

Page 40 : MéthodesObjectifs Méthodesquantitatives-Approche extensive,-grand nombre d’enquêtés,-standardisation des questions suppose qu’on sache quelles questions poser,-recherche de la fréquence, de la mesure, de la détermination, de la liaisonMéthodesqualitatives-Approche intensive,-petit nombre d’enquêtés,-ouverture du questionnement,-recherche du sens, exploration, saturation de l’information20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS40

page 40

Page 41 : 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg41Quelles complémentarités peut-on envisager entre méthodes quantitatives et méthodes qualitatives ??

page 41

Page 42 : Méthodes quantitatives vs. méthodes qualitatives,dans les études de marché20/10/2024Pole Humanités Design – Département des Relations Humaines42Source : Frisch, Françoise dir., Etudes Marketing et Opinion, Dunod, 2007, p. 24.

page 42

Page 43 : 1 La démarche générale en SHS2 L’état de l’art : la recherche des sources3 La comparaison des méthodes4 Les méthodes qualitatives 5 Les méthodes quantitatives 6 Ce que change le numérique7 Les données et la théorie8 Bibliographie20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg43

page 43

Page 44 : Il existe plusieurs méthodes de collecte de données dites « qualitatives »• L’entretien individuel directif, semi-dirigé ou ouvert• Le focus group ou entretien de groupe• L’examen de documents divers et d’artefacts, sur site ou constitués en fonds aussi appelé « étude documentaire »• L’observation20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg44Les méthodes qualitatives ne visent pas le même degré de représentativité que les méthodes quantitatives, les échantillons sont beaucoup plus réduits,mais les données sont recueillies bien plus en profondeur

page 44

Page 45 : Chaque discipline va privilégier certaines méthodes :• la sociologie les utilise toutes, en articulant souvent le qualitatif et le quantitatif.• l’ethnologie se fonde surtout sur des méthodes d’observation, mais comprend également des entretiens. • L’histoire privilégie le travail à partir de sources diverses archives diverses, épigraphie pour l’histoire antique, etc.. Certains courants de la science historique, comme l’Ecole des Annales qui privilégie la longue durée, a recours à l’étude des statistiques.20/10/2024Pole Humanités Design – Département des Relations Humaines45

page 45

Page 46 : • L’étude documentaire, nécessaire à la « science historique » mais également utile dans d’autres démarches, peut recourir à de nombreux types de documents : documents officiels, archives, articles de presse, annuaires, œuvres littéraires, documents statistiques, archives sonores ou vidéos, monuments et objets, etc.• Ces documents peuvent donner lieu à des traitements qualitatifs mais aussi quantitatifs.Département Humanités & Design - Introduction aux SHS 46L’étude documentaire

page 46

Page 47 : L’entretienL’entretien peut-être « ouvert », « semi-directif » ou « directif ».• L’entretien « ouvert » ou « exploratoire » part d’un thème général, sans questions précises. Il est utile pour défricher un thème.20/10/2024Pole Humanités Design – Département des Relations Humaines47

page 47

Page 48 : • L’entretien semi-directif est le plus souvent utilisé en sciences sociales →voir le module « Ecoute et conduite d’entretiens » suivi en ING 2 à CY Tech, entièrement dédié à ce type d’entretien.• Il suppose la réalisation préalable d’un « guide d’entretien » et se fonde surtout sur des questions ouvertes.• Il permet d’explorer un certain champ dont les grands thèmes sont fixés à l’avance par le chercheur, tout en laissant une grande place à l’expression libre de l’interviewé.e.20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS48

page 48

Page 49 : L’entretien de groupe• L’entretien de groupe ou « focus group », dans les études de marché consiste à rassembler plusieurs personnes, pour discuter d’un thème.• Le focus group est animé par l’enquêteur. Il suppose, comme l’entretien semi-directif, la réalisation préalable d’un guide d’animation qui servira de base.• Il est très largement utilisé dans les études de marché, où il permet de s’appuyer sur la « dynamique de groupe » et les interactions positives entre participants.• Mais il peut également être utilisé dans d’autres domaines, où les participants partagent un champ d’expérience pratique d’un sport, parcours de santé, migration, etc.20/10/2024Pole Humanités Design – Département des Relations Humaines49

page 49

Page 50 : Les méthodes d’observation• L’observation permet d’observer les comportements en situation et d’accéder à une part de la communication non-verbale, souvent négligée alors qu’elle est décisive voir le module « Communication et Expression : le fondamentaux CEF en Pré-ING1 à CY Tech.• Par ailleurs, certains sujets de recherche ne se prêtent pas bien au « déclaratif ».• Plutôt que de demander à quelqu’un comment il prend le métro, comment il se sert d’un produit, comment il navigue sur tel site Internet, etc., on l’observe le faire.20/10/2024Pole Humanités Design – Département des Relations Humaines50

page 50

Page 51 : • Ces méthodes sont largement utilisées par les ethnologues qui étudient des cultures différentes de la leur, mais pas seulement.• Elles requièrent l’élaboration de plans et grilles d’observation.« Par exemple, une grille d'observation en situation pédagogique rappellera qu'il faut observer et noter la disposition physique de la salle et son équipement, la place occupée par chaque élève, la relation entre l'ordre d'entrée dans la salle et la place occupée, la présence ou l'absence de conversations et la nature des activités avant l'ouverture du cours propre ment dit, les changements induits ou non par la première prise de parole de l'enseignant, le contenu des interventions en fonction de l'émetteur et du récepteur, etc. Elle se traduira par des croquis ou plans de la salle, par l'élaboration de codes commodes pour identifier rapidement les inter- venants et leurs attitudes, par l'indication systématique de la durée de chaque séquence, etc. Appliquer la même grille à plusieurs situations pédagogiques est la condition d'une comparaison systématique et renforce sa validation. » Combessie, 2007, p. 22.20/10/2024Pole Humanités Design – Département des Relations Humaines51

page 51

Page 52 : Cette observation est dite « participante », quand le chercheur participe à la situation qu’il observe.• Par exemple, un ethnologue qui passe plusieurs mois sur un terrain d’enquête, en partageant la vie des personnes.• L’avantage de l’observation participante est la richesse de l’interaction. L’ethnologue peut chercher à avoir des précisions ou explications.• Le risque est d’influer par sa présence et son comportement sur le terrain d’étude, en biaisant les comportements observés inhibition des personnes observées, postures flatteuses, etc..20/10/2024Pole Humanités Design – Département des Relations Humaines52

page 52

Page 53 : 1 La démarche générale en SHS2 L’état de l’art : la recherche des sources3 La comparaison des méthodes4 Les méthodes qualitatives5 Les méthodes quantitatives 6 Ce que change le numérique7 Les données et la théorie8 Bibliographie20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg53

page 53

Page 54 : • Dans les cas suivants, est-il judicieux de prévoir une enquête par questionnaire ?1. Un étudiant veut consacrer son mémoire aux phénomènes de mode dans le choix des prénoms, dans sa région d’origine.2. Une grande entreprise voudrait conduire une enquête à propos de la santé de ses travailleurs, et notamment des risques cardio-vasculaires.3. On veut étudier la façon dont les élèves interviennent dans la classe en relation avec les caractéristiques personnelles des élèves.Département Humanités & Design - Introduction aux SHS 54Source : Nicole Berthier 2023, p. 19.

page 54

Page 55 : • Dans les cas suivants, est-il judicieux de prévoir une enquête par questionnaire ?1. Un étudiant veut consacrer son mémoire aux phénomènes de mode dans le choix des prénoms, dans sa région d’origine.On aura d’abord intérêt à penser à l’étude de documents officiels comme les registres de naissances pour étudier l’évolution des prénoms pendant une certaine période.Département Humanités & Design - Introduction aux SHS 55Source : Nicole Berthier 2023, p. 19.

page 55

Page 56 : • Dans les cas suivants, est-il judicieux de prévoir une enquête par questionnaire ?2. Une grande entreprise voudrait conduire une enquête à propos de la santé de ses travailleurs, et notamment des risques cardio-vasculaires.Des difficultés pour les sujets à répondre à des questions médicales spécialisées.Département Humanités & Design - Introduction aux SHS 56Source : Nicole Berthier 2023, p. 19.

page 56

Page 57 : • Dans les cas suivants, est-il judicieux de prévoir une enquête par questionnaire ?3. On veut étudier la façon dont les élèves interviennent dans la classe en relation avec les caractéristiques personnelles des élèves.L’observation est ici la méthode la plus adaptée.Département Humanités & Design - Introduction aux SHS 57Source : Nicole Berthier 2023, p. 19.

page 57

Page 58 : Enquête transversale :• Décrire l’état d’une population à un moment donné, type d’enquête le plus répanduDépartement Humanités & Design - Introduction aux SHS 58Quelques modèles de « plan d’observation »

page 58

Page 59 : Comparer des groupes • Quasi-expérimentation : cela consiste à comparer deux groupes semblables au départ, dont l’un a participé à une action et l’autre non, pour tester les effets de cette action.• Enquête cas témoin : cette démarche consiste à sélectionner des individus qui ont la condition étudiée et les comparer à des individus comparables n’ayant pas cette condition• Plan type expérimental vrai : un groupe expérimental est spécialement créé pour être comparé à un groupe contrôleDépartement Humanités & Design - Introduction aux SHS 59

page 59

Page 60 : Comparer dans le temps : étude longitudinale• Etude à série chronologique : un même groupe est interrogé à deux reprises, avant et après la modification d’un facteur• Etude de tendance : faire une série d’études transversales dans la population à intervalles répétées• Etude de cohorte : Une cohorte est une population spécifique ayant vécu un même événement dans laquelle on sélectionne périodiquement des échantillons pour étudier les évolutions, par exemple les anciens diplômés d’un master.• Interview répétée ou panel : Un panel est un échantillon de sujets dont la composition reste invariable au cours d’études successives.Département Humanités & Design - Introduction aux SHS 60

page 60

Page 61 : • Le questionnaire quantitatif est constitué d’une suite de questions fermées surtout mais aussi ouvertes.• Les questions fermées peuvent appeler deux réponses OUI/NON ou plusieurs par exemple, une échelle de satisfaction dite en « en 5 points » : Très satisfaite / Plutôt satisfaite / Ni satisfaite ni insatisfaite / Plutôt insatisfaite / Très insatisfaite.• Ces questions doivent être les mêmes pour chaque répondant, le questionnaire est dit standardisé.Département Humanités & Design - Introduction aux SHS 61Le questionnaire, les questions

page 61

Page 62 : 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS62Quels avantages et inconvénients des questions fermées / ouvertes ??

page 62

Page 63 : • On pose souvent les questions dites « signalétiques » en fin de questionnaire : ce sont les questions indiquant qui est le répondant : âge, sexe, profession, statut matrimonial, niveau d’instruction, etc.• Ces questions offrent des possibilités de variables explicatives.• Pour la « Profession et Catégorie socioprofessionnelle » PCS, on utilise la nomenclature de l’INSEE https://www.insee.fr/fr/metadonnees/pcs2020/groupeSocioprofessionnel/1?champRecherche=true Département Humanités & Design - Introduction aux SHS 63

page 63

Page 64 : • Il faut savoir que l’étude quantitative, du fait qu’elle pose des questions fermées, suppose pertinentes ces questions pour les répondants. D’où l’intérêt de déjà bien connaître le public visé, avant de mener une démarche de recueil de données quantitatives.• Ce point rejoint une critique qu’on adresse souvent aux sondages d’opinion : ils contribuent à créer la réalité qu’ils sont censés uniquement étudier • C’est là une limite irréductible des études quantitatives. 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS64

page 64

Page 65 : • On construit le questionnaire en allant du général au particulier, du simple au complexe. Attention à l’effet du contexte sur la place d’une question dans le questionnaire.• On peut utiliser des « questions filtres » pour s’assurer qu’un répondant est bien concerné par la question. Par exemple, une question filtre écartera les non-possesseurs de voitures pour les questions qui ne les concernent pas.• Un questionnaire doit toujours être testé.Département Humanités & Design - Introduction aux SHS 65

page 65

Page 66 : 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg66A quels biais doit-on être attentif dans la formulation des questions??

page 66

Page 67 : Quelques tendances psychologiques à prendre en compte dans la rédaction du questionnaire :• Tendance à l’acquiescement des répondants • Résistance au terme « changement »• Effet d’ordre de présentation des réponses variable selon passation écrite ou oraleDépartement Humanités & Design - Introduction aux SHS 67

page 67

Page 68 : Un exemple éloquent.En 1976, la question :- « Pensez-vous que les Etats-Unis devraient interdire les discours publics contre la démocratie? » recueille 21 d’accord.- « Pensez-vous que les Etats-Unis devraient autoriser les discours publics contre la démocratie ? » recueille 48 d’accord.Département Humanités & Design - Introduction aux SHS 68Que remarquez-vous ? Quels enseignements en retirez-vous ? Quelle solution ici pour gagner en neutralité ??

page 68

Page 69 : « Toute réponse dépend de la formulation de la question ; pour éviter les biais liés à une mauvaise compréhension, une question correctement formulée doit respecter les six critères suivants :– pertinence, la question suscite des réponses qui contiennent l'information recherchée, et non une autre ;– clarté lexicale, le vocabulaire utilisé appartient à celui de la population interrogée ; éviter les termes peu familiers, le jargon technique, etc. ;– clarté syntaxique, la construction de la question doit rester simple pour éviter les incompréhensions ; éviter par exemple les phrases trop longues vingt mots au maximum, les doubles négations, les propositions emboîtées ;– précision, la question doit posséder la même signification pour tous les répondants ; il faut donc éliminer les termes vagues, imprécis, ambigus « souvent », « beaucoup » ;– réalisme, la question ne fait pas d'hypothèses déraisonnables sur la « capacité mémoire » du répondant, ni sur sa fiabilité ;– neutralité, la question n'est pas biaisée, elle n'exprime pas une attente de la part de l'enquêteur, elle n'exclut pas a priori une possibilité de réponse. »Jean-Philippe FAIVRE, Yves KRIEF, « MARKETING ÉTUDES ou ÉTUDES DE MARCHÉ », Encyclopædia Universalis en ligne, consulté le 10 septembre 2022. URL : http://www.universalis-edu.com/encyclopedie/marketing-etudes-de-marche/20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS69

page 69

Page 70 : Considérons ces questions :• Lisez-vous régulièrement Le Monde ?• Pensez-vous que la violence dans les programmes télévisés puisse engendrer la violence dans la vie quotidienne ?• Pensez-vous que la municipalité doive créer des voies radiantes plus nombreuses et plus larges ?• Etes-vous préoccupé par votre santé ?• La compétence technique vous paraît-elle une qualité essentielle pour un bon agent de maîtrise ?Département Humanités & Design - Introduction aux SHS 70Qu’est-ce qui ne va pas dans la formulation de ces questions ?Comment les améliorer ??Source : Berthier, 2023, p. 131-132

page 70

Page 71 : L’échantillonnage , la représentativité• Dans certains cas, on interroge tout un groupe donné : les salariés de telle PME. Dans d’autres cas, choisir un échantillon est nécessaire.• Pour mener une étude quantitative, l’enquêteur peut sélectionner avec précision un « échantillon représentatif » de la population étudiée.• Dans une étude quantitative, l’échantillon doit être suffisamment important pour que les statistiques aient une marge d’erreur raisonnablement faible.20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS71

page 71

Page 72 : « Pour les présidentielles américaines de 1936, une revue à fort tirage, le Literary Digest, organise une enquête gigantesque: dix millions de cartes sont envoyées dans tous les états à ses abonnés ou aux abonnés du téléphone. La revue, forte de plus de deux millions de réponses recueillies, affirme que Landon doit largement l'emporter. Dans le même temps, Georges Gallup, Archibald Crossley, Elmo Roper procèdent à des sondages d'opinion auprès d’échantillons de quelques milliers de personnes en appliquant les techniques mises au point dans le cadre de la psychologie sociale et des études de marché : ils donnent Roosevelt gagnant. C'est Roosevelt qui est élu. La taille considérable de l'échantillon du Literay Digest n'a pu remédier au manque de méthode dans le choix des enquêtés. » Berthier, 2023, p. 123Département Humanités & Design - Introduction aux SHS 72

page 72

Page 73 : Deux principales méthodes pour viser la « représentativité » :• On utilise généralement la « technique des quotas ».• Pour un sondage sur l’élection présidentielle, l’échantillonnage se fait à partir de critères socio-démographiques : Homme/Femme, Age, Profession, lieu d’habitation taille de la ville, etc.• Il est également possible de recourir à des « échantillons probabilistes ou aléatoires », éventuellement après « stratification », voire aussi « par grappes ».• La méthode probabiliste est meilleure pour de gros échantillons.• Mais il faut disposer d’une base de sondage fiable, par exemple, le fichier des clients d’une banque, ce qui est rarement possible en sociologie.20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS73

page 73

Page 74 : 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS74Reportage sur « Médiamétrie »

page 74

Page 75 : 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS75Qu’avez-vous retenu de cette vidéo ??

page 75

Page 76 : 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg76

page 76

Page 77 : La précision d’un sondage probabiliste dépend de la taille de l’échantillon. On parle de niveau de confiance et d’intervalle de confiance.Pour une question ayant obtenu 50 d’accord, dans 95 des cas le niveau de confiance, la valeur sera connue à : ± 10 l’intervalle de confiance si on a interrogé 100 personnes ± 1 l’intervalle de confiance si on a interrogé 10 000 personnesLe nombre de personnes à interroger dépend donc de la taille minimale du sous-groupe le plus petit de l’échantillon, afin de garantir un intervalle de confiance restreint, avec un niveau de confiance élevé.Département Humanités & Design - Introduction aux SHS 77PIntervalle de confianceNiveau de confiance =Probabilité que la valeur réelle se trouve dans l’intervalle de confiance

page 77

Page 78 : Le lien entre le nombre d'individus de l'échantillon n, la valeur constatée p, l'intervalle de confiance et le niveau de confiance repose sur des concepts de probabilité et d'estimation statistique. Voici comment ces éléments sont reliés :1. Nombre d'individus de l'échantillon n :Plus l'échantillon est grand, plus l'estimation de la proportion p sera précise. Un grand échantillon réduit l'incertitude et resserre l'intervalle de confiance.2. Valeur constatée p :La proportion p observée dans l'échantillon représente l'estimation ponctuelle de la proportion dans la population totale. C'est un pourcentage ou une probabilité entre 0 et 1.3. Intervalle de confiance :L'intervalle de confiance représente la plage dans laquelle on estime que la vraie proportion de la population se situe, avec un certain niveau de certitude. Il est calculé comme suit pour une proportion :IC=p±Z×p1p/nOù :p est la proportion observée.Z est le score Z correspondant au niveau de confiance souhaité.n est la taille de l'échantillon.𝑝1 𝑝/n est l'écart type de la distribution d'échantillonnage. Département Humanités & Design - Introduction aux SHS 78

page 78

Page 79 : 4. Niveau de confiance :Le niveau de confiance indique la probabilité que l'intervalle de confiance contienne la vraie proportion de la population. Des niveaux communs sont 90 , 95 , et 99 . Plus le niveau de confiance est élevé, plus l'intervalle de confiance est large, car on veut être plus sûr que la vraie proportion est incluse dans cet intervalle.Le score Z dépend du niveau de confiance choisi :Pour un niveau de confiance de 95 , Z1.96Pour un niveau de confiance de 99 , Z2.576Pour un niveau de confiance de 90 , Z1.645Relation générale :Si la taille de l'échantillon n augmente, l'intervalle de confiance se réduit, car l'incertitude diminue.Si la proportion p est proche de 0.5, l'incertitude est plus élevée, car les fluctuations autour de 0.5 sont maximales.Un niveau de confiance plus élevé par exemple 99 au lieu de 95 élargit l'intervalle, car il exige plus de marge pour inclure la vraie valeur avec certitude.Département Humanités & Design - Introduction aux SHS 79

page 79

Page 80 : 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg80Quels biais faut-il éviter dans la manière de poser les questions d’un questionnaire ??

page 80

Page 81 : Le canal utilisé• L’administration du questionnaire peut se faire :• En face-à-face• Par téléphone• Il peut aussi être auto-administré c’est le répondant qui remplit le questionnaire, après avoir été adressé par voie postale ou par Internet.20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS81

page 81

Page 82 : • Dans les études de marché, il y a évidemment des enjeux de coût. Le recueil en ligne sera bien meilleur marché, mais attention aux biais.• Exemple : Il ne sera peut-être pas facile d’administrer un questionnaire en ligne à un échantillon représentatif des personnes âgées en France, du fait de la surreprésentation des usagers des technologies numériques dans les répondants, minoritaires dans la population française de cet âge.20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg82

page 82

Page 83 : • En cas de questionnaire distribué auto-administré, il faudra analyser les non-retours,• de même qu’il faut analyser les non-réponses dans les questionnaires recueillis.Département Humanités & Design - Introduction aux SHS 83

page 83

Page 84 : L’analyse et les traitements statistiques• Les données recueillies peuvent être soumise à tout un ensemble de traitements statistiques, de manière à les « faire parler ».• Par exemple, des tris selon les variables, des tris croisés, etc., afin d’analyser la relation entre deux ou plusieurs « variables ». Sont-elles indépendantes ? Fortement ou moyennement corrélées ?• Par exemple, quelles sont toutes les variables socio-démographiques corrélées avec un certain vote ? Et l’on croise deux variables par exemple l’âge et le lieu de résidence, est-ce que cela une incidence statistiquement significative sur le résultat ?• Il existe des logiciels pour automatiser certaines analyses statistiques.• Bien entendu, l’analyse comme telle n’est intéressante que si elle peut ensuite être interprétée.20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg84

page 84

Page 85 : « Quand on est malade, il ne faut surtout pas aller à l’hôpital : la probabilité de mourir dans un lit d’hôpital est 10 fois plus grande que dans son lit à la maison » Coluche.20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg85Quel enseignement tirer de cette boutade de l’humoriste Coluche, dans le domaine des statistiques ??

page 85

Page 86 : • Pour les amateurs, voir le site http://www.tylervigen.com/spurious-correlations qui affiche des corrélations loufoques entre des variables n’ayant rien aucun rapport de causalité. Un exemple :20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS86

page 86

Page 87 : Corrélation ne vaut pas causalité• Attention aux biais et aux erreurs d’interprétation.• Ce n’est pas parce que vous avez une forte corrélation entre deux variables qu’il y a nécessairement un lieu de causalité sous-jacent.• On parle d’ « effet cigogne », aussi appelé en latin « Cum hoc ergo propter hoc » avec ceci, donc à cause de ceci• A noter qu’il existe des traitements statistiques plus complexes qui permettent d’analyser plus finement la présence d’une possible relation de causalité entre des variables.20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg87

page 87

Page 88 : « Par exemple, dans les communes qui abritent des cigognes, le taux de natalité est plus élevé que dans l’ensemble du pays. Conclusion : les cigognes apportent les bébés ! Voici une explication plus probable : les cigognes nichent de préférence dans les villages plutôt que dans les grandes agglomérations, et il se trouve que la natalité est plus forte en milieu rural que dans les villes. »Kévin Polisano, Cours de Statistiques niveau L1-L2, Licence, France. 2018, ffcel-01787365Département Humanités & Design - Introduction aux SHS 88

page 88

Page 89 : 20/10/202489YouTube, La finance pour tous IEFP, « Corrélation n'est pas causalité - L'instant maths », 25 juin 2021, URL : https://www.youtube.com/watch?v=I9q4DEppGbo dernière consultation : 07/09/2022Corrélation et causalité

page 89

Page 90 : Un autre exemple de biais statistique plus subtil :le paradoxe de Simpson« Considérons deux contributeurs de Wikipédia : Lisa et Bart. La première semaine, Lisa améliore 60 des articles qu'elle modifie alors que Bart améliore 90 des articles qu'il modifie. La deuxième semaine, Lisa n'améliore que 10 des articles et Bart s'en tient à un score de 30 . Les deux fois, Bart obtient un meilleur score que Lisa. » Source : WikipédiaAjoutons que Bart et Lisa regardent chacun 110 articles au total. 20/10/2024Pôle Humanités Design90Qui a amélioré le plus d’articles, Bart ou Lisa ??

page 90

Page 91 : « Le résultat au bout des deux semaines ne peut être déduit des seuls quatre premiers pourcentages car il dépend du nombre de pages modifiées par chaque contributeur. Il faut donc disposer de ces nombres pour élucider ce paradoxe :La première semaine, Lisa modifie 100 articles. Elle améliore donc 60 articles. Pendant ce temps, Bart s'occupe de 10 articles et en améliore ainsi 9. La deuxième semaine, Lisa ne modifie que 10 articles et n'améliore qu'une seule page. Bart modifie 100 articles et en améliore 30. Quand le résultat à la fin des deux semaines est combiné, on constate que les deux contributeurs ont modifié le même nombre d'articles 110 mais que Lisa en a amélioré 61 alors que Bart n'en a amélioré que 39. »20/10/2024Pôle Humanités Design91

page 91

Page 92 : • La Distinction. Critique sociale du jugement Editions de minuit, 1979• Notions de « capital économique » et « capital culturel »• L’Analyse Factorielle des Correspondances AFC, popularisée par Pierre Bourdieu.« L'analyse factorielle des correspondances AFC est une méthode statistique d'analyse des données qui permet d'analyser et de hiérarchiser les informations contenues dans un tableau rectangulaire de données et qui est aujourd'hui particulièrement utilisée pour étudier le lien entre deux variables qualitatives ou catégorielles. Elle a été mise au point à partir des années 1960 par Jean-Paul Benzécri et son équipe, d'abord à la faculté des sciences de Rennes2, puis à celle de Jussieu à Paris au sein du laboratoire de statistique multidimensionnelle. » Wikipédia20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg92L’Analyse Factorielle des Correspondances: un exemple de méthode en sciences sociales

page 92

Page 93 : 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg93« Capital économique », « capital culturel » et logiques de « distinction », selon Pierre Bourdieucf. séance mise en ligne.

page 93

Page 94 : 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg94

page 94

Page 95 : 20/10/2024Pole Humanités Design – Département des Relations Humaines95

page 95

Page 96 : • Naissance des sondages aux Etats-Unis, rapidement importés en France par Jean Stœtzel avec la création de l'IFOP 1938,- relative efficacité de la méthode de l’échantillonnage- en 1936, la prédiction de la réélection de Roosevelt aux Etats-Unis avec un échantillonnage de 5000 personnes vs l’erreur d’un questionnaire adressé à plusieurs millions de personnes• Différence entre photographie et prédiction. Les résultats d’un sondage électoral proposent une photographie de l’état des préférences de l’opinion à un instant « t ».20/10/2024Pole Humanités Design – Département des Relations Humaines96Regard sur les sondages d’opinion

page 96

Page 97 : Les sondages participeraient à la « fabrication » de l’opinion publique autant qu’à sa consultation- Sincérité des répondants ?- Surestimation de l’intérêt des personnes interrogées à l’égard du sujet.- Imposition d’une problématique par la formulation des questions, réponses identiques renvoyant à des manières de penser possiblement très différentes.- Caractère artificiel de l’agrégation des réponses.- Une influence sur l’opinion publique elle-même, une possible instrumentalisation des sondages.- Multiplication des sondages : une logique de séduction de l’opinion publique vs une logique de convictionMAIS, malgré tout, importance des sondages dans la vie démocratique voir cet article de synthèse : http://ses.ens-lyon.fr/articles/connaitre-et-mesurer-lopinion-publique-utilite-et-limites-des-sondages :20/10/2024Pole Humanités Design – Département des Relations Humaines97

page 97

Page 98 : • La fiabilité des sondages d’opinion tendrait à diminuer, selon certains.• Est-ce dû à la versatilité croissante de l’opinion publique ? A la variabilité croissante de l’offre politique ? A la représentativité devenue défaillante des échantillons ?• Explorer ce problème suppose un engament théorique plus important du chercheur, qui doit dès lors s’interroger sur ses propres outils.→ Sur cette question, voir l’article suivant : «Présidentielle 2022 : les sondages se sont-ils "plantés à toutes les dernières élections", comme l’affirme Yannick Jadot ? »20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg98

page 98

Page 99 : 20/10/2024Pole Humanités Design – Département des Relations Humaines9910 questions que l'on se pose tous sur les sondagesBrice Teinturier, directeur général délégué d'Ipsos, explique comment sont fabriqués les sondages.https://www.youtube.com/watch?v=FwcN0KrRjDo

page 99

Page 100 : Les statistiques et les sciences sociales aujourd’hui• Importance du recueil des données et des statistiques pour la gouvernance des Etats modernes.• Nait ce qu’Alain Desrosières nomme une « politique des grands nombres » et ce qu’Alain Supiot appelle une « gouvernance par les nombres ». • Le rôle de l’INSEE en France.• L'usage des statistiques dans les sondages et études d’opinion omniprésentes : utilité démocratique et critiques• Les enjeux du Big data, qui viennent bousculer la répartition traditionnelle des méthodes et apporter une source nouvelle d’informations quantitatives.20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg100

page 100

Page 101 : 1 La démarche générale en SHS2 L’état de l’art : la recherche des sources3 La comparaison des méthodes4 Les méthodes quantitatives 5 Les méthodes qualitatives 6 Ce que change le numérique7 Les données et la théorie8 Bibliographie20/10/2024Pole Humanités Design – Département des Relations Humaines101

page 101

Page 102 : • Les Big data offrent une masse considérable de données, qui peuvent être analysées, notamment via l’IA.• Une concurrence rude pour les études de marché et un terrain très riche pour les chercheurs en sciences sociales.• Des enjeux méthodologiques neufs et complexes, pour conserver une rigueur scientifique.20/10/2024Pole Humanités Design – Département des Relations Humaines102

page 102

Page 103 : Quatrième de couverture du libre de Baptiste Kotras, Les voix du web 2018« Chaque jour, des millions de publications sont postées sur les réseaux sociaux, à propos de tout et n’importe quoi : mode, sport, cuisine, politique, showbiz. En plus de leur abondance et de leur accessibilité, ces opinions du web sont produites en l’absence de toute sollicitation extérieure : elles semblent donner un accès direct à nos pensées. Depuis les années 2000, un ensemble de start-ups et d’agences ont investi ce matériau inédit : leurs algorithmes permettent de capter et d’analyser nos opinions, afin de les monnayer auprès des grandes marques ou des partis politiques. Ces instruments mettent en œuvre une « sismographie » d’Internet, dessinant un nouveau régime de connaissance et de gouvernement. Un livre fondamental pour comprendre ce qu’il advient de nos traces numériques, c’est-à-dire la façon dont est réinventée l’opinion publique en ligne. »20/10/2024Pole Humanités Design – Département des Relations Humaines103

page 103

Page 104 : 1 La démarche générale en SHS2 L’état de l’art : la recherche des sources3 Les méthodes quantitatives 4 Les méthodes qualitatives 5 Ce que change le numérique6 Les données et la théorie7 Bibliographie20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg104

page 104

Page 105 : 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg105Reprenons maintenant notre exemple du début.Comment préciser la problématique ?Quelles méthodes utiliser pour connaître et comprendre les usages des « jeunes » sur Internet ?Qualitatives ? Quantitatives ? Lesquelles, plus précisément ??

page 105

Page 106 : • Deux écueils en symétrie inverse à éviter :20/10/2024Pole Humanités Design – Département des Relations Humaines106Le « positivisme » naïfConsidérer qu’on peut accéder aux faits bruts sans le moindre point de vue théorique, en négligeant les biais méthodologiques et axiologiquesLe « constructivisme » écheveléEcraser le matériau de collecte empirique sous une théorie qui surinterprète, déforme, etc., les faits

page 106

Page 107 : 20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg107• D’où la nécessité d’une réflexion épistémologique sur l’articulation entre les données et la théorie : en amont de la collecte et en aval dans l’interprétation.• Cette réflexion est le lot commun des chercheurs en sciences sociales.

page 107

Page 108 : 1 La démarche générale en SHS2 L’état de l’art : la recherche des sources3 La comparaison des méthodes4 Les méthodes quantitatives 5 Les méthodes qualitatives 6 Ce que change le numérique7 Les données et la théorie8 Quelques références bibliographiques20/10/2024Pole Humanités Design – Département des Relations Humaines – Introduction aux SHS – Séance 2 – Alexis Weinberg108

page 108

Page 109 : • BERTHIER Nicole, Les Techniques d’enquête en sciences sociales, Malakoff, Armand Colin, 2023.• COMBESSIE Jean-Claude, La méthode en sociologie, Paris, La Découverte, 2007.• FRISCH Françoise dir., Etudes Marketing et Opinion, Paris, Dunod, 2007.• MARQUET Jacques, VAN CAMPENHOUDT Luc, QUIVY Raymond, Manuel de recherche en sciences sociales, Paris, Armand Colin, 6ème éd., 2022.• MARTIN Olivier, L’analyse quantitative de données, 5ème éd., Paris, Armand Colin, 2020.• PIRON Florence et ARSENAULT Élisabeth, dir. Guide décolonisé et pluriversel de formation à la recherche en sciences sociales et humaines, Québec : Éditions science et bien commun, en ligne url : https://scienceetbiencommun.pressbooks.pub/projetthese/ dernière consultation : 06/09/2022 20/10/2024Pole Humanités Design – Département des Relations Humaines 109

page 109

Pages : 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109

Le contenu de cet article est la propriété exclusive de son auteur.