を使用せずにgroupby、どのようにデータをフィルタリングするのでしょうかNaN?
顧客が記入するマトリックス'N/A','n/a'またはそのバリエーションがあり、他の顧客は空白のままにしておくとします。
import pandas as pd
import numpy as np
df = pd.DataFrame({'movie': ['thg', 'thg', 'mol', 'mol', 'lob', 'lob'],
'rating': [3., 4., 5., np.nan, np.nan, np.nan],
'name': ['John', np.nan, 'N/A', 'Graham', np.nan, np.nan]})
nbs = df['name'].str.extract('^(N/A|NA|na|n/a)')
nms=df[(df['name'] != nbs) ]
出力：
>>> nms
movie name rating
0 thg John 3
1 thg NaN 4
3 mol Graham NaN
4 lob NaN NaN
5 lob NaN NaN
NaN次のように結果を取得できるように値をフィルタリングするにはどうすればよいでしょうか。
movie name rating
0 thg John 3
3 mol Graham NaN
のようなものが必要なのではないかと思います~np.isnanが、チルダは文字列では機能しません。
ベストアンサー1
最もシンプルな解決策:
filtered_df = df[df['name'].notnull()]
したがって、「name」列に NaN 値を持たない行のみがフィルター処理されます。
複数の列の場合:
filtered_df = df[df[['name', 'country', 'region']].notnull().all(1)]