Python, les Pandas : seules les lignes qui ont des valeurs manquantes

Tout en travaillant dans les Pandas en Python...

Je travaille avec un ensemble de données qui contient des valeurs manquantes, et j'aimerais revenir un dataframe qui contient uniquement les lignes qui ont des données manquantes. Est-il un bon moyen de faire cela?

(Ma méthode pour ce faire est inefficace "attendons de voir ce que l'index n'est pas dans le dataframe sans les valeurs manquantes, puis faire un df de ces indices.")

InformationsquelleAutor | 2015-05-25
  1. 69

    Vous pouvez utiliser tout axis=1 à vérifier pour le moins un True par ligne, puis filtrer avec boolean indexation:

    null_data = df[df.isnull().any(axis=1)]
    • df.isnull() retourne DataFrame après 0.23. Utilisation df.isnull().values.any(axis=1) est un peu plus rapide.
    InformationsquelleAutor metersk
  2. 0

    Similaire à metersk réponse,

    null_data = df[np.logical_or.reduce(df.isnull().values, axis=1)]

    Test

    n = 2
df = pd.DataFrame({'a':np.tile([0,1,2,3,4,np.nan],n),
                   'b':np.tile([0,1,2,3,np.nan,5],n)})

x = df[np.logical_or.reduce(df.isnull().values,axis=1)]
y = df[df.isnull().any(axis=1)]
x.equals(y)
    • il sera utile si vous spécifiez la valeur que votre réponse est d'ajouter à l'existant
    • il est plus rapide pour n grand. Mais je n'utilise que mertersk de la méthode dans mes codes, parce que c'est tellement plus pratique.
    InformationsquelleAutor user3226167