Démarrer l'essai gratuit
Tendances Nouveau Genres Auteurs
EnglishEnglish
EspañolSpanish
简体中文Chinese
繁體中文Chinese (Traditional)
FrançaisFrench
DeutschGerman
日本語Japanese
PortuguêsPortuguese
ItalianoItalian
한국어Korean
РусскийRussian
NederlandsDutch
العربيةArabic
PolskiPolish
हिन्दीHindi
Tiếng ViệtVietnamese
SvenskaSwedish
ΕλληνικάGreek
TürkçeTurkish
ไทยThai
ČeštinaCzech
RomânăRomanian
MagyarHungarian
УкраїнськаUkrainian
IndonesiaIndonesian
DanskDanish
SuomiFinnish
БългарскиBulgarian
עבריתHebrew
NorskNorwegian
HrvatskiCroatian
CatalàCatalan
SlovenčinaSlovak
LietuviųLithuanian
SlovenščinaSlovenian
СрпскиSerbian
EestiEstonian
LatviešuLatvian
فارسیPersian
മലയാളംMalayalam
தமிழ்Tamil
اردوUrdu
Recherche en cours...
SoBrief
Analyse de données avec Python

Analyse de données avec Python

Titre original: Python for Data Analysis
Transformez des fichiers désordonnés en données prêtes à être analysées, et sachez quels choix peuvent modifier vos conclusions.
par Wes McKinney 2011 579 pages
4.17
2 000+ évaluations
Écouter
Immersif
V2.3
Amazon Kindle Audible
Essayez l'accès complet pendant 3 jours
Débloquez l'écoute et bien plus !
Continuer

Points clés

Considérer la préparation des données comme l’analyse, et non comme une corvée préliminaire

Le travail qui précède la modélisation compte. McKinney s’intéresse à la programmation nécessaire pour manipuler, nettoyer et préparer les données, plutôt qu’à la théorie statistique. Les analystes disent souvent consacrer 80 % ou plus de leur temps à ces tâches; l’ouvrage les considère donc comme un travail analytique essentiel, et non comme une corvée administrative.

Un outil est né d’une difficulté. En travaillant dans la finance quantitative, McKinney a constaté qu’aucun outil ne gérait à lui seul de façon satisfaisante les données étiquetées, les séries chronologiques, les valeurs manquantes et les jointures de type base de données. Il a commencé à développer pandas pour réunir ces fonctionnalités dans Python. L’ouvrage suit cette démarche pratique: mettre les données sous une forme exploitable, les examiner, les restructurer, puis seulement appliquer des analyses ou des modèles.

Analyse

Ce qui frappe, c’est que l’ouvrage rend visible la préparation des données comme source de jugement analytique. Les décisions sur ce qui est considéré comme manquant, sur les enregistrements retenus et sur l’alignement des tableaux peuvent modifier un résultat avant même qu’un modèle statistique n’entre en jeu. Cela rejoint la théorie de la mesure : les données ne sont pas simplement trouvées, elles sont opérationnalisées au gré de choix. L’accent mis sur ces tâches est précieux précisément parce qu’il résiste au prestige de la modélisation. Une préparation minutieuse ne peut toutefois pas corriger une collecte biaisée ni garantir qu’une variable mesure ce que son libellé prétend mesurer. Un code propre et des données probantes valides sont liés, mais ne se confondent pas.

Mettre en place une boucle interactive qui transforme des fichiers inconnus en tableaux examinables

Explorer au fil du travail. IPython et Jupyter permettent de suivre un processus consistant à exécuter, examiner et réviser. La complétion par tabulation aide à découvrir les méthodes disponibles, l’introspection donne accès à la documentation des fonctions, et les notebooks associent code, texte et résultats. C’est particulièrement utile lorsqu’un jeu de données est inconnu et qu’il faut vérifier chaque transformation.

Aller chercher les données là où elles se trouvent. pandas peut lire des tableaux depuis des fichiers CSV, Excel, JSON, HTML et XML, des bases de données SQL et d’autres formats. Les fichiers réels peuvent présenter des délimiteurs irréguliers, des marqueurs de valeurs manquantes incohérents ou des dates réparties sur plusieurs colonnes; leur chargement nécessite donc souvent des options choisies avec soin. Pour les gros fichiers CSV, `chunksize` permet de traiter les lignes par lots au lieu de tout charger en une fois. Le chapitre de mise en place recommande aussi des environnements de paquets isolés afin de réduire les conflits entre projets.

Analyse

Le calcul interactif fonctionne comme un carnet de laboratoire : chaque opération laisse une trace visible qui peut faciliter le débogage et l’explication. Cela rejoint la recherche reproductible, où un résultat inspire davantage confiance lorsque les étapes de transformation peuvent être examinées. Cette même commodité peut devenir un piège si un notebook contient un état caché, des résultats obsolètes ou des cellules exécutées dans le désordre. Le critère utile n’est pas simplement que l’analyse soit interactive, mais qu’une autre personne puisse la relancer à partir d’un point de départ connu et obtenir le même tableau.

Vectoriser les calculs coûteux, tout en sachant quand un tableau n’est qu’une vue

Sortir les calculs répétés des boucles Python. Un `ndarray` de NumPy est un tableau multidimensionnel typé qui contient des valeurs d’un seul type de données. La vectorisation consiste à appliquer une opération à un tableau entier plutôt qu’à parcourir ses éléments dans une boucle Python. Dans l’exemple de l’ouvrage, multiplier un million d’entiers par deux prend environ 715 microsecondes avec NumPy, contre environ 48,8 millisecondes avec une compréhension de liste Python.

Surveiller ce qui est copié. Les tranches NumPy simples sont généralement des vues du tableau d’origine; modifier une tranche peut donc modifier sa source. L’indexation booléenne et l’indexation avancée produisent, elles, des copies. Utilisez `.copy()` lorsqu’un résultat indépendant est nécessaire. Les tableaux sont efficaces en partie parce que leurs valeurs sont stockées de façon compacte et traitées par du code de plus bas niveau, mais un calcul vectorisé de grande ampleur peut tout de même nécessiter beaucoup de mémoire.

Analyse

La vectorisation est à la fois une technique d’optimisation des performances et une manière d’exprimer clairement un calcul. Elle permet au programmeur de décrire l’opération à effectuer sur le jeu de données plutôt que les mécanismes nécessaires pour parcourir chaque élément. Le modèle mémoire sous-jacent mérite autant d’attention : une vue économise du temps et de l’espace, tandis qu’une modification inattendue peut compromettre les étapes suivantes. C’est un compromis classique en conception de systèmes, où efficacité et isolation tirent dans des directions opposées. La rapidité de NumPy est bien réelle, mais une expression vectorisée n’est pas automatiquement plus sûre ou plus économe en mémoire qu’une boucle.

Laisser les étiquettes de lignes et de colonnes révéler les discordances au lieu de les deviner silencieusement

Les noms ont un sens. Une série pandas (`Series`) contient une séquence étiquetée; un `DataFrame` contient un tableau dont les colonnes peuvent être de types différents et dont les lignes comme les colonnes portent des étiquettes. Les opérations arithmétiques alignent les objets en fonction de ces étiquettes. Si une série contient Ohio, Texas et Utah et qu’une autre ne contient pas Utah, leur addition produit une valeur manquante pour Utah, au lieu d’associer les valeurs par leur position.

Choisir explicitement le type de sélection. Utilisez `.loc` pour les étiquettes et `.iloc` pour les positions entières. Cela évite toute ambiguïté lorsque l’index contient lui-même des nombres entiers. Pour l’affectation, privilégiez une expression unique telle que `df.loc[mask, "value"] = 0`: une sélection chaînée peut viser un objet temporaire et déclencher un avertissement au lieu de modifier le tableau d’origine.

Analyse

Les étiquettes servent de contrôles d’intégrité légers. Elles rendent plus difficile l’addition de valeurs qui occupent la même position mais se rapportent à des entités différentes, un risque courant lorsque les jeux de données proviennent de sources distinctes. Cette protection n’est toutefois pas une garantie de vérité. Une étiquette peut être mal orthographiée, dupliquée ou associée au mauvais enregistrement, et l’alignement automatique peut créer des valeurs manquantes que l’on ne remarque pas. La meilleure pratique consiste à considérer les valeurs manquantes inattendues comme des questions sur la jointure des jeux de données, et non comme de simples désagréments à combler.

Traiter les valeurs manquantes, les doublons et les catégories répétées comme des problèmes distincts

Se demander ce que signifie l’absence. pandas peut détecter les valeurs manquantes, supprimer des lignes ou des colonnes avec `dropna`, ou combler les lacunes par une constante, une valeur propre à chaque colonne ou une propagation vers l’avant. Ce sont des décisions différentes: la suppression peut éliminer des enregistrements utiles, tandis que le remplissage peut laisser croire à une information qui n’a jamais été observée. Une valeur comme `-999` peut également servir de marqueur pour les données manquantes et doit être convertie de manière réfléchie.

Réduire les répétitions lorsque c’est utile. `drop duplicates` peut repérer les lignes répétées en s’appuyant sur toutes les colonnes ou sur un sous-ensemble choisi. Les données catégorielles stockent les libellés répétés sous forme de codes entiers accompagnés d’une liste de catégories. Dans l’exemple de l’ouvrage, qui porte sur dix millions de libellés, la conversion de quatre chaînes répétées en représentation catégorielle fait passer la mémoire indiquée d’environ 600 mégaoctets à environ 10 mégaoctets, et le calcul des fréquences passe d’environ 840 millisecondes à 30 millisecondes.

Analyse

La distinction essentielle est celle qui sépare un défaut des données d’un fait observé. Un doublon peut être une répétition accidentelle ou représenter un événement répété légitime. Une valeur manquante peut signifier « inconnu », « sans objet » ou « non recueilli » ; il ne faut pas confondre ces sens à la légère. Les types catégoriels montrent comment une représentation peut améliorer les performances sans changer les valeurs conceptuelles. L’exemple de la mémoire est convaincant, mais la conversion a un coût et est surtout avantageuse lorsque de nombreuses lignes réutilisent un petit ensemble de libellés. L’optimisation doit découler de la compréhension des données, et non s’y substituer.

Effectuer des jointures par clés, concaténer selon la direction et remodeler les données en fonction de la question

Choisir l’opération adaptée à la relation. `merge` relie des lignes au moyen de clés communes, à la manière d’une jointure dans une base de données relationnelle. Une jointure interne ne conserve que les clés correspondantes, tandis que les jointures gauche, droite et externe conservent différents ensembles de lignes sans correspondance. Lorsque des clés dupliquées apparaissent des deux côtés, une jointure plusieurs-à-plusieurs crée toutes les paires correspondantes; il faut donc vérifier que le nombre de lignes obtenu est cohérent. `concat` empile des objets par lignes ou par colonnes; `combine first` comble les lacunes d’un objet étiqueté à l’aide d’un autre.

Modifier délibérément la forme du tableau. Le format long place chaque mesure sur sa propre ligne, tandis que le format large répartit les catégories entre les colonnes. Dans l’exemple de séries chronologiques économiques de l’ouvrage, `stack` transforme des mesures comme l’inflation et le chômage en lignes, et `pivot` les répartit à nouveau en colonnes. La meilleure disposition dépend de l’opération qui suit.

Analyse

Ces opérations encodent différentes hypothèses sur l’identité. Une jointure suppose que les clés correspondantes renvoient à des observations liées ; une concaténation suppose que des blocs distincts doivent être placés côte à côte. Confondre les deux peut produire des tableaux plausibles en apparence, mais invalides. Les formats long et large répondent eux aussi à des besoins différents : les tableaux longs se prêtent facilement au regroupement, tandis que les tableaux larges peuvent être plus simples à examiner ou à transmettre à certains algorithmes. Un processus fiable vérifie l’unicité des clés, le nombre de lignes et les valeurs manquantes après le remodelage, au lieu de considérer qu’un appel de fonction réussi prouve que le résultat est correct.

Séparer les groupes pour obtenir des réponses, les transformer lorsque chaque ligne doit être conservée

Regrouper, calculer, recombiner. L’ouvrage emploie l’expression « séparer-appliquer-combiner » (`split-apply-combine`) pour désigner le processus qui consiste à répartir les données selon des clés, à appliquer un calcul à chaque groupe, puis à réunir les résultats. Pour les pourboires au restaurant, un regroupement par jour et selon que les clients fument ou non permet de comparer les pourcentages moyens de pourboire. Les calculs récapitulatifs intégrés, comme la moyenne et le décompte, sont généralement plus rapides que les fonctions personnalisées transmises à `apply`.

Faire correspondre l’opération au résultat souhaité. Utilisez l’agrégation lorsque chaque groupe doit produire un résumé, par exemple une moyenne. Utilisez `transform` lorsque le résultat doit fournir une valeur pour chaque ligne d’origine, comme la moyenne du groupe ou le rang de chaque ligne au sein de son groupe. `apply` est plus souple pour des tâches telles que la sélection des cinq plus gros pourboires dans chaque groupe, mais cette souplesse a souvent un coût en vitesse.

Analyse

Le regroupement transforme un tableau en un ensemble de comparaisons pertinentes. Le choix analytique essentiel porte sur la clé de regroupement : une moyenne par jour peut répondre à une question différente d’une moyenne par jour et par repas. La distinction entre agrégation et transformation constitue également un modèle mental utile dans différents systèmes de programmation : réduire les groupes pour les résumer, en préserver la forme pour ajouter du contexte à chaque observation. Les fonctions personnalisées avec apply restent utiles pour les tâches inhabituelles, mais les utiliser par défaut peut masquer des opérations plus simples et plus rapides, et rendre le code plus difficile à vérifier.

Préciser la fréquence, le calendrier et le fuseau horaire des horodatages

Une date n’est pas toujours un instant. Un horodatage identifie un instant; une période représente un intervalle, comme un mois ou un trimestre fiscal. pandas peut analyser les horodatages, générer des plages de dates régulières et sélectionner des plages chronologiques même lorsque les dates exactes des bornes ne figurent pas dans les données. Pour des données commerciales trimestrielles, une année fiscale qui se termine en janvier répartit les trimestres différemment d’une année civile qui se termine en décembre.

Le rééchantillonnage change l’unité d’analyse. La réduction de fréquence regroupe des observations, par exemple en additionnant des mesures prises chaque minute pour obtenir des intervalles de cinq minutes. L’augmentation de fréquence crée de nouveaux points temporels et peut laisser des lacunes ou les combler à partir d’observations voisines. Les calculs glissants résument des fenêtres mobiles, tandis que les calculs à pondération exponentielle accordent davantage de poids aux observations récentes. Les fuseaux horaires et les changements d’heure comptent aussi: la localisation attribue un fuseau à des horodatages naïfs, tandis que la conversion modifie la façon dont le même instant est affiché.

Analyse

Les outils de séries chronologiques sont puissants parce qu’ils rendent les calendriers calculables, mais leurs valeurs par défaut encodent des choix relatifs aux limites et aux étiquettes des intervalles. Un total sur cinq minutes étiqueté au début d’un intervalle peut être interprété différemment du même total étiqueté à la fin. Les périodes évitent également une erreur conceptuelle fréquente : traiter un trimestre comme un instant unique. L’attention accordée aux fuseaux horaires dans l’ouvrage est particulièrement utile en pratique, car les règles de changement d’heure peuvent faire sauter ou répéter certaines heures locales. Des conventions claires de fréquence et de fuseau sont indispensables dès que les enregistrements traversent des frontières calendaires ou géographiques.

Utiliser les graphiques pour examiner les tendances, puis transmettre des variables propres aux modèles

Rendre les tendances visibles. matplotlib offre un contrôle détaillé sur les figures, les axes, les étiquettes, les légendes et les annotations. pandas produit des graphiques courants à partir d’une série pandas (`Series`) ou d’un `DataFrame`, tandis que seaborn simplifie la création de graphiques statistiques, comme les distributions, les comparaisons entre groupes et les nuages de points. Dans l’exemple du restaurant, un graphique empilé compare la taille des groupes de clients selon le jour; un graphique à barres seaborn compare les pourcentages moyens de pourboire et affiche des intervalles d’incertitude.

Rendre explicite le passage au modèle. Les tableaux pandas sont souvent convertis en tableaux NumPy avant d’être transmis à une bibliothèque de modélisation. statsmodels met l’accent sur l’inférence statistique, notamment les estimations d’incertitude et les tests; scikit-learn met l’accent sur la prédiction, le prétraitement et l’évaluation des modèles. L’exemple du Titanic remplace les âges manquants par la médiane de l’ensemble d’entraînement, encode le sexe comme variable numérique et utilise la validation croisée pour évaluer un modèle de régression logistique.

Analyse

La visualisation est utile avant la rédaction d’un rapport final, car elle peut révéler une asymétrie, des points inhabituels et des différences entre groupes qu’une statistique récapitulative ne montre pas. Pourtant, un graphique soigné peut aussi donner à des éléments peu probants une apparence de certitude. Les barres d’erreur, le choix des axes et le dénominateur utilisé pour calculer un pourcentage doivent être visibles et interprétables. Le passage au modèle soulève une question similaire : la conversion en tableaux peut faire disparaître les étiquettes qui aident à suivre les variables. Conserver les noms des variables et documenter le prétraitement permet de maintenir le lien entre les entrées d’un modèle et les quantités réelles qu’elles représentent.

Considérer les seuils et les dénominateurs comme des éléments de toute conclusion fondée sur les données

Un résultat dépend des règles choisies. Les exemples de l’ouvrage transforment des fichiers bruts en questions: un échantillon Bitly dénombre les fuseaux horaires, MovieLens compare les évaluations entre groupes démographiques, et les dossiers de la Commission électorale fédérale comparent les dons selon le candidat, la profession, le montant et l’État. Chaque analyse exige des choix concernant les enregistrements manquants, les observations répétées et les catégories à comparer.

L’analyse des prénoms rend ces choix visibles. Les fichiers contiennent les prénoms attribués à au moins cinq nouveau-nés par an, et le chapitre limite souvent l’analyse aux 1 000 prénoms les plus fréquents. Parmi les garçons de ce sous-ensemble, le nombre de prénoms nécessaires pour représenter la moitié des naissances passe de 25 en 1900 à 117 en 2010. Cela étaye une affirmation précise sur la diversification des prénoms dans les données et selon le seuil retenus, mais ne permet pas d’affirmer que les fichiers recensent tous les prénoms ni d’expliquer pourquoi les préférences ont changé.

Analyse

La leçon la plus transposable des exemples est qu’une statistique hérite des limites de son jeu de données. Une analyse des 1 000 prénoms les plus fréquents peut révéler des changements parmi les prénoms courants tout en excluant les plus rares ; le total des dons peut dépendre de la manière dont les professions sont normalisées ou les remboursements traités. Cela ne constitue pas un défaut de l’analyse exploratoire, à condition que les règles soient énoncées. Cela le devient lorsqu’un indicateur commode est pris pour le phénomène dans son ensemble. Un bon travail sur les données intègre le dénominateur, le seuil et les exclusions à l’explication.

Analyse

L’argument le plus profond de l’ouvrage n’est pas que pandas rend l’analyse facile. Il est que la compétence analytique dépend de la représentation des données sous une forme qui en préserve le sens tout en rendant les opérations réalisables. NumPy apporte de la rapidité grâce aux tableaux homogènes et aux opérations vectorisées. pandas y ajoute des étiquettes, des colonnes hétérogènes, la gestion des valeurs manquantes et des outils relationnels. Python interactif relie les deux aux fichiers, aux bases de données, aux modèles et aux visualisations. Il en résulte un pont pratique entre la réflexion exploratoire et le calcul reproductible.

C’est aussi sur ce pont que se situent les principaux risques relevés par l’ouvrage. Les étiquettes peuvent empêcher les discordances de position, mais l’alignement peut élargir silencieusement un index et créer des valeurs manquantes. Un nettoyage souple peut rendre un jeu de données exploitable, mais l’imputation peut dissimuler des schémas de non-réponse porteurs d’information. Les résumés par groupe sont pratiques, mais une autre clé ou un autre dénominateur peut inverser l’impression qui se dégage. Les opérations techniques ne sont donc pas de simples tuyauteries neutres. Elles font partie de la mesure et doivent être documentées comme telles.

L’ouvrage est particulièrement convaincant lorsqu’il associe un outil à une tâche analytique concrète: concilier des séries dont les index diffèrent, remodeler des indicateurs économiques, analyser un million d’évaluations MovieLens ou repérer l’évolution de la diversité des prénoms. Ces exemples enseignent des opérations réutilisables sans prétendre qu’une bibliothèque peut remplacer la conception d’une recherche. Sa portée est volontairement fondamentale; il ne prétend pas traiter de manière exhaustive les statistiques, l’apprentissage automatique, les systèmes distribués ou la théorie de la visualisation. Cette retenue est utile: pandas est présenté comme une préparation au travail propre à un domaine, et non comme un substitut.

Le lecteur d’aujourd’hui doit également distinguer les idées durables des API qui changent selon les versions. Les étiquettes, la vectorisation, la représentation explicite des valeurs manquantes et la prudence dans les jointures sont des concepts pérennes. Les détails d’installation et les interfaces des bibliothèques évoluent. La compétence la plus durable ne consiste pas à mémoriser le nom d’une méthode, mais à reconnaître la nature du problème, à vérifier les hypothèses de l’opération et à s’assurer que le résultat répond toujours à la question initiale.

Résumé en 30 secondes
La préparation des données est un travail analytique : les analystes peuvent consacrer 80 % ou plus de leur temps à nettoyer et à remodeler les données. NumPy accélère les calculs répétitifs grâce aux tableaux vectorisés, tandis que pandas utilise des étiquettes pour aligner les valeurs et faire ressortir les incohérences. Les valeurs manquantes, les jointures et les résumés par groupe exigent des choix réfléchis, car ils peuvent modifier les résultats. Les catégories répétées peuvent réduire la mémoire utilisée, et le rééchantillonnage tenant compte du temps aide à révéler des tendances. Vérifiez les seuils et les dénominateurs avant de tirer des conclusions.
Contient des spoilers

Dernière mise à jour:

Signaler un problème

Résumé des avis

4.17 sur 5
Moyenne de 2 000+ évaluations de Goodreads et Amazon.

Analyse de données avec Python reçoit dans l’ensemble des critiques positives pour sa présentation complète de pandas et de la manipulation des données en Python. Les lecteurs apprécient ses exemples pratiques et ses explications claires, notamment ceux qui viennent d’autres langages. Certains lui reprochent de privilégier pandas au détriment de concepts plus généraux de l’analyse des données et d’utiliser des jeux de données aléatoires. Le livre est considéré comme utile pour apprendre à préparer les données, mais peut sembler trop détaillé aux utilisateurs expérimentés. Dans l’ensemble, il est perçu comme une ressource utile pour maîtriser pandas et l’analyse de données avec Python.

Votre note :
4.56
331 évaluations
Envie de lire le livre complet ?

Glossaire

ndarray

Tableau multidimensionnel typé

L’objet tableau central de NumPy, qui contient des valeurs d’un même type de données réparties sur une ou plusieurs dimensions. Sa forme décrit la taille de chaque dimension, et son dtype décrit la représentation des valeurs. Les opérations NumPy peuvent traiter efficacement des tableaux entiers, tandis que le découpage crée souvent des vues sur les mêmes données sous-jacentes.

Series

Données unidimensionnelles étiquetées

Un objet pandas contenant une séquence unidimensionnelle de valeurs et un index associé composé d’étiquettes. Ces étiquettes permettent de sélectionner des observations et d’aligner des opérations arithmétiques entre différentes séries. Une série pandas (Series) ressemble à un dictionnaire ordonné associant les valeurs de l’index aux valeurs des données et constitue un élément de base d’un DataFrame.

DataFrame

Données tabulaires étiquetées

Un objet pandas représentant des lignes et des colonnes nommées, avec des étiquettes sur les deux axes. Chaque colonne peut avoir un type de données différent, ce qui rend cette structure adaptée aux données de type tableur ou relationnelles. Les DataFrame prennent en charge la sélection, l’alignement, l’agrégation, les jointures, le remodelage et la conversion en tableaux NumPy.

vectorization

Calcul sur un tableau entier

Consiste à exprimer une opération sur un tableau entier plutôt qu’à écrire une boucle Python qui traite chaque élément individuellement. Les opérations compilées de NumPy peuvent rendre cette approche nettement plus rapide pour les calculs numériques. La vectorisation peut aussi rendre le code plus concis, mais ne garantit ni une faible consommation de mémoire ni l’absence de modifications accidentelles.

data alignment

Faire correspondre les valeurs par étiquette

Comportement de pandas qui consiste à faire correspondre les valeurs en fonction des étiquettes de leur index ou de leurs colonnes lors d’opérations arithmétiques et d’autres opérations. Lorsque les étiquettes ne se recoupent pas, le résultat peut contenir des valeurs manquantes ; lorsqu’elles diffèrent, le résultat peut utiliser leur union. L’alignement des données aide à préserver l’identité des observations, mais ses conséquences doivent être vérifiées.

split-apply-combine

Flux de travail sur des données groupées

Une façon de décrire les opérations par groupe : diviser un jeu de données à l’aide d’une ou plusieurs clés, appliquer un calcul ou une transformation à chaque groupe, puis assembler les résultats des groupes. Dans pandas, groupby fournit la structure de regroupement, tandis que l’agrégation, la transformation ou apply détermine le résultat.

Categorical

Codes pour les valeurs répétées

Un type de données pandas qui représente les valeurs à l’aide de codes entiers renvoyant à une liste distincte de catégories. Il est utile lorsqu’une colonne répète un ensemble relativement restreint de valeurs, en particulier des chaînes de caractères, car il peut réduire la mémoire utilisée et accélérer certaines opérations. Les catégories peuvent également être ordonnées explicitement.

resampling

Modifier la fréquence d’une série chronologique

Convertir une série chronologique d’une fréquence à une autre. Le sous-échantillonnage regroupe des observations plus fréquentes en intervalles et les agrège, tandis que le suréchantillonnage crée un index temporel plus dense et peut introduire des lacunes ou les remplir. Les limites des intervalles et les étiquettes de sortie influent sur l’interprétation des résultats du rééchantillonnage.

Period

Un intervalle de temps calendaire

Une représentation pandas d’un intervalle de temps à une fréquence donnée, par exemple un mois, une année ou un trimestre fiscal. Contrairement à un horodatage, qui désigne un instant, une période (Period) représente un intervalle. Les périodes peuvent être décalées par calcul ou converties en d’autres fréquences compatibles.

Patsy formula syntax

Spécification de modèle sous forme de texte

Un langage de formules utilisé par Patsy pour décrire les entrées et les sorties de modèles statistiques, souvent pour des modèles linéaires. Une formule telle que y ~ x0 + x1 décrit les termes utilisés pour construire des matrices de conception, plutôt qu’une addition arithmétique ordinaire. Patsy peut encoder les variables catégorielles et appliquer des transformations tout en préservant les noms des caractéristiques.

FAQ

De quoi parle Analyse de données avec Python ?

  • L’accent sur la manipulation des données : Le livre est consacré à la manipulation, au traitement, au nettoyage et à l’analyse des données avec Python. Il propose un guide complet du langage de programmation Python et de son écosystème de bibliothèques orientées données.
  • Outils et bibliothèques : Il met l’accent sur des bibliothèques essentielles comme pandas, NumPy et Jupyter, indispensables aux tâches d’analyse des données. Ces outils sont fondamentaux pour quiconque souhaite devenir un analyste de données efficace.
  • Approche pratique : Le livre se veut pratique et propose des exemples concrets et des extraits de code que les lecteurs peuvent appliquer directement à leurs projets d’analyse de données.

Pourquoi lire Analyse de données avec Python ?

  • Une ressource complète : Le livre est une référence importante pour les cours universitaires et les professionnels ; il présente les outils et techniques essentiels à l’analyse des données en Python.
  • Une source faisant autorité : Écrit par Wes McKinney, le créateur de pandas, il offre les éclairages d’un expert et constitue une ressource précieuse.
  • Un contenu actualisé : La troisième édition a été mise à jour pour intégrer les versions actuelles de Python, NumPy et pandas, afin que les lecteurs découvrent les pratiques les plus pertinentes.

Quels sont les principaux enseignements d’Analyse de données avec Python ?

  • Compétences de préparation des données : Les lecteurs apprendront à manipuler et à nettoyer efficacement les données avec pandas, en mettant l’accent sur le remodelage, la fusion et l’agrégation des données.
  • Comprendre NumPy : Le livre fournit de solides bases sur NumPy, essentiel au calcul numérique en Python, et renforce ainsi les capacités d’analyse des données.
  • Techniques de visualisation : Il présente les bases de la visualisation des données avec matplotlib, afin que les lecteurs puissent présenter efficacement les résultats de leurs analyses.

Quelles sont les meilleures citations d’Analyse de données avec Python et que signifient-elles ?

  • « Python est devenu un langage populaire et très répandu pour l’analyse des données. » : Cette citation souligne l’importance croissante de Python dans la science des données et indique sa valeur pour les perspectives de carrière à venir.
  • « Il est judicieux de se familiariser avec la documentation des différents frameworks de statistiques ou d’apprentissage automatique. » : Elle insiste sur l’importance de se tenir au courant des outils et bibliothèques les plus récents dans le domaine en constante évolution de la science des données.
  • « Les compétences en programmation que vous avez acquises ici resteront pertinentes pendant longtemps. » : Elle rassure les lecteurs sur le fait que les compétences acquises resteront applicables et que cet effort en vaut la peine.

Comment Analyse de données avec Python aborde-t-il la préparation des données ?

  • Des conseils étape par étape : Le livre propose une démarche structurée de préparation des données, en commençant par leur chargement et leur nettoyage, ce qui facilite le suivi.
  • Utilisation de jeux de données réels : Grâce à l’emploi de jeux de données réels, les lecteurs peuvent s’exercer aux techniques de préparation dans un contexte réaliste, ce qui renforce leur compréhension des concepts.
  • L’accent sur pandas : Le livre présente en détail les fonctionnalités de pandas pour la manipulation des données, essentielles à une préparation efficace des données en Python.

Quelles sont les bibliothèques Python essentielles présentées dans Analyse de données avec Python ?

  • NumPy : Fondamental pour le calcul numérique, il prend en charge les tableaux multidimensionnels et les fonctions mathématiques, indispensables à une manipulation efficace des données.
  • pandas : Mis en avant pour la manipulation et l’analyse des données, en particulier pour le travail sur des données structurées, il présente des structures de données essentielles comme les séries pandas (Series) et les DataFrame.
  • matplotlib : Utilisé pour créer des visualisations, il fait l’objet de conseils permettant de représenter efficacement les données.

Comment Analyse de données avec Python aide-t-il à nettoyer les données ?

  • Techniques de préparation des données : Le livre présente des techniques de nettoyage et de préparation des données, notamment la gestion des valeurs manquantes, le filtrage et la transformation des données.
  • Nettoyer avec pandas : Il propose des exemples pratiques d’utilisation de pandas pour nettoyer les données, par exemple en supprimant les doublons et en complétant les valeurs manquantes.
  • Exemples concrets : Il comprend des jeux de données et des situations tirés du monde réel, qui permettent aux lecteurs de voir comment le nettoyage des données est mis en pratique.

Quelle est l’importance du DataFrame dans Analyse de données avec Python ?

  • Structure de données tabulaires : Un DataFrame est une structure de données tabulaire à deux dimensions, de taille modifiable, potentiellement hétérogène et dotée d’axes étiquetés.
  • Manipulation des données : Il facilite la manipulation des données, notamment le filtrage, le regroupement et l’agrégation, comme l’illustrent de nombreux exemples.
  • Intégration avec d’autres bibliothèques : Il s’intègre bien à d’autres bibliothèques comme NumPy et matplotlib, facilitant les tâches complexes d’analyse des données.

Comment Analyse de données avec Python traite-t-il les données manquantes ?

  • Repérer les valeurs manquantes : Le livre présente des méthodes pour repérer et gérer les données manquantes, et souligne l’importance de reconnaître les valeurs absentes.
  • Remplir ou supprimer : Il présente des techniques pour remplacer les valeurs manquantes et supprimer les lignes ou les colonnes qui en contiennent, en permettant d’adapter l’approche au jeu de données.
  • Utiliser les fonctions pandas : Il montre comment employer efficacement des fonctions pandas comme isna() et fillna() pour gérer les données manquantes.

Qu’est-ce que la méthode groupby de pandas, telle qu’elle est présentée dans Analyse de données avec Python ?

  • Agrégation des données : La méthode groupby sert à répartir les données en groupes selon certains critères, ce qui permet de les agréger et de les transformer.
  • Regroupement flexible : Elle prend en charge le regroupement selon une ou plusieurs colonnes et propose différentes fonctions d’agrégation, comme la moyenne, la somme et le décompte.
  • Exemple d’utilisation : Par exemple, df.groupby("key").mean() calcule la moyenne de chaque groupe défini par les valeurs uniques de la colonne « key ».

Comment créer un tableau croisé dynamique avec pandas, comme l’explique Analyse de données avec Python ?

  • Utiliser pivot_table : Cette fonction permet de résumer les données selon une ou plusieurs clés et de les organiser sous forme rectangulaire.
  • Fonctions d’agrégation : Indiquez des fonctions d’agrégation, comme la moyenne, la somme ou le décompte, pour calculer les statistiques du tableau croisé dynamique.
  • Exemple : df.pivot_table(index="day", columns="smoker", values="tip_pct", aggfunc="mean") crée un tableau croisé dynamique présentant les pourcentages moyens de pourboire selon le jour et le statut de fumeur.

Comment visualiser les données avec pandas, selon Analyse de données avec Python ?

  • Tracé intégré : pandas possède des fonctions de tracé intégrées, accessibles par l’attribut plot, qui simplifient la création de visualisations directement à partir des DataFrame et des séries pandas (Series).
  • Intégration avec Matplotlib : pandas s’intègre bien à matplotlib, ce qui permet de personnaliser les graphiques grâce aux nombreuses fonctionnalités de cette bibliothèque.
  • Exemple : df.plot(kind="bar") crée un diagramme en barres à partir du DataFrame et montre la simplicité de la visualisation avec pandas.

À propos de l'auteur

Wes McKinney est une figure marquante de la communauté Python en science des données, surtout connu comme le créateur de la bibliothèque pandas. Son expertise en analyse et en manipulation des données se manifeste dans ses écrits, qui allient connaissances théoriques et conseils pratiques. Son expérience de développeur logiciel et de scientifique des données guide son approche de l’enseignement de l’analyse de données avec Python. Son livre est salué pour la clarté de ses explications et l’étendue de sa présentation des fonctionnalités de pandas. Les travaux de McKinney ont largement contribué à l’écosystème Python consacré à l’analyse des données, rendant les tâches complexes de manipulation des données plus accessibles aux programmeurs comme aux analystes.

Télécharger le PDF

Pour garder le résumé de Analyse de données avec Python pour plus tard, téléchargez gratuitement le PDF. Vous pouvez l’imprimer ou le lire hors ligne quand vous le souhaitez.
Download PDF

Télécharger l'EPUB

Pour lire le résumé de Analyse de données avec Python sur votre liseuse ou dans une application de lecture, téléchargez gratuitement l’EPUB. Le format numérique .epub est idéal pour lire des livres numériques sur téléphone, tablette ou liseuse.
Download EPUB
Envie de lire le livre complet ?
Suivre
Écouter
Accueil
Swipe
Biblio
Appli
Essayez l'accès complet pendant 3 jours
Écoutez, enregistrez, et plus encore
Comparer les fonctionnalités Gratuit Pro
📖 Lire les résumés
Lisez des résumés illimités. Les utilisateurs gratuits en reçoivent 3 par mois
🎧 Écouter les résumés
Écoutez des résumés illimités dans 40 langues
—
❤️ Favoris illimités
Limité à 4 pour les utilisateurs gratuits
—
📜 Historique illimité
Limité à 4 pour les utilisateurs gratuits
—
📥 Téléchargements illimités
Limité à 1 pour les utilisateurs gratuits
—
Calendrier sans engagement
Aujourd'hui : Accès immédiat
Écoutez les résumés complets de plus de 26 000 livres. Soit plus de 12 000 heures d'audio !
Jour 2 : Rappel d'essai
Nous vous enverrons une notification pour vous informer que votre essai se termine bientôt.
Jour 3 : Votre abonnement commence
Vous serez débité le 24 nov.,
annulez à tout moment avant.
Consume 2.8× More Books
2.8× livres de plus Écoute Lecture
Nos utilisateurs nous adorent
600,000+ lecteurs
Trustpilot Rating
TrustPilot
4.6 Excellent
Ce site change tout. Je n'ai jamais lu autant de résumés aussi rapidement. Je recommande vivement.
— Dave G
Ça vaut vraiment le coup en temps et en argent, et c'est très bien fait. Je n'ai jamais vu cette qualité de résumés ailleurs. Très utile !
— Em
Hautement recommandé !! Service fantastique. Parfait pour ceux qui veulent plus qu'un aperçu sans tous les détails d'un livre audio complet.
— Greg M
Économisez 62 %
Annuel
$119.88 $44.99/an/an
$3.75/mois
Mensuel
$9.99/mois
Démarrer un essai gratuit de 3 jours
3 jours gratuits, puis $44.99/an. Annulez à tout moment.
Unlock a world of fiction & nonfiction books
Plus de 26 000 livres pour le prix de 2 livres
Lisez n'importe quel livre en 10 minutes
Découvrez de nouveaux livres comme sur Tinder
Demandez n'importe quel livre s'il n'est pas encore résumé
Lisez plus de livres que quiconque
L'appli n°1 pour les amateurs de livres
Lifelike & immersive summaries
Garantie satisfait ou remboursé 30 jours
Téléchargez les résumés en EPUB ou PDF
Annulez à tout moment en quelques clics

Pourquoi un seul résumé ?

Scanner
Trouvez un code-barres à scanner

⭐
⭐
⭐
Nous avons un cadeau spécial pour vous
Ouvrir
38 % de réduction
RÉDUCTION POUR VOUS
⭐
⭐
⭐
$79.99
$49.99/an
Seulement $4.16 par mois
Continuer
2 touches pour commencer, résiliation ultra simple
Paramètres
Général
Widget
Chargement...