3

この投稿に似たデータがあります: pandas: Filling missing values within a group

つまり、私は多くの観察セッションのデータを持っており、各セッションには焦点となる個人がいます。その焦点個人は 1 回だけ記録されますが、そのセッション中に各行の焦点 ID データを入力したいと考えています。したがって、データは次のようになります。

     Focal    Session
0    NaN      1
1    50101    1
2    NaN      1
3    NaN      2
4    50408    2
5    NaN      2

上記のリンクの投稿に基づいて、次のコードを使用していました。

g = data.groupby('Session')

g['Focal'].transform(lambda s: s.loc[s.first_valid_index()])

しかし、これは KeyError (具体的には KeyError:None) を返します。.loc のドキュメントによると、データが見つからない場合に KeyErrors が発生する可能性があります。そのため、確認したところ、152 個のセッションがありましたが、Focal 列には null 以外のデータ ポイントが 150 個しかありませんでした。Focal ID が欠落しているセッションを手動で検索する前に、次の 2 つの質問があります。

  1. 私はとても初心者です。これは、KeyError が発生する理由の合理的な説明ですか?

  2. 合理的である場合、Focal ID データが欠落しているセッションを特定する方法はありますか?

ここに出力:

---------------------------------------------------------------------------
KeyError                                  Traceback (most recent call last)
<ipython-input-330-0e4f27aa7e14> in <module>()
----> 1 data['Focal'] = g['Focal'].transform(lambda s: s.loc[s.first_valid_index()])
      2 g['Focal'].transform(lambda s: s.loc[s.first_valid_index()])

//anaconda/lib/python2.7/site-packages/pandas/core/groupby.pyc in transform(self, func,     *args, **kwargs)
   1540         for name, group in self:
   1541             object.__setattr__(group, 'name', name)
-> 1542             res = wrapper(group)
   1543             # result[group.index] = res
   1544             indexer = self.obj.index.get_indexer(group.index)

//anaconda/lib/python2.7/site-packages/pandas/core/groupby.pyc in <lambda>(x)
   1536             wrapper = lambda x: getattr(x, func)(*args, **kwargs)
   1537         else:
-> 1538             wrapper = lambda x: func(x, *args, **kwargs)
   1539 
   1540         for name, group in self:

<ipython-input-330-0e4f27aa7e14> in <lambda>(s)
----> 1 data['Focal'] = g['Focal'].transform(lambda s: s.loc[s.first_valid_index()])
      2 g['Focal'].transform(lambda s: s.loc[s.first_valid_index()])

//anaconda/lib/python2.7/site-packages/pandas/core/indexing.pyc in __getitem__(self, key)
    669             return self._getitem_tuple(key)
    670         else:
--> 671             return self._getitem_axis(key, axis=0)
    672 
    673     def _getitem_axis(self, key, axis=0):

//anaconda/lib/python2.7/site-packages/pandas/core/indexing.pyc in _getitem_axis(self, key, axis)
    756             return self._getitem_iterable(key, axis=axis)
    757         else:
--> 758             return self._get_label(key, axis=axis)
    759 
    760 class _iLocIndexer(_LocationIndexer):

//anaconda/lib/python2.7/site-packages/pandas/core/indexing.pyc in _get_label(self, label, axis)
     58             return self.obj._xs(label, axis=axis, copy=False)
     59         except Exception:
---> 60             return self.obj._xs(label, axis=axis, copy=True)
     61 
     62     def _get_loc(self, key, axis=0):

//anaconda/lib/python2.7/site-packages/pandas/core/series.pyc in _xs(self, key, axis, level, copy)
    570 
    571     def _xs(self, key, axis=0, level=None, copy=True):
--> 572         return self.__getitem__(key)
    573 
    574     def _ixs(self, i, axis=0):

//anaconda/lib/python2.7/site-packages/pandas/core/series.pyc in __getitem__(self, key)
    611     def __getitem__(self, key):
    612         try:
--> 613             return self.index.get_value(self, key)
    614         except InvalidIndexError:
    615             pass

//anaconda/lib/python2.7/site-packages/pandas/core/index.pyc in get_value(self, series, key)
    761         """
    762         try:
--> 763             return self._engine.get_value(series, key)
    764         except KeyError, e1:
    765             if len(self) > 0 and self.inferred_type == 'integer':

//anaconda/lib/python2.7/site-packages/pandas/index.so in pandas.index.IndexEngine.get_value (pandas/index.c:2565)()

//anaconda/lib/python2.7/site-packages/pandas/index.so in pandas.index.IndexEngine.get_value (pandas/index.c:2380)()

//anaconda/lib/python2.7/site-packages/pandas/index.so in pandas.index.IndexEngine.get_loc (pandas/index.c:3166)()

KeyError: None
4

2 に答える 2

1

問題は、first_valid_index有効な値がない場合に None を返すことです (DataFrame の一部のグループはすべて NaN です)。

In [1]: s = pd.Series([np.nan])

In [2]: s.first_valid_index() # None

locインデックスがないため、エラーがスローされますNone

In [3]: s.loc[s.first_valid_index()]
KeyError: None

この特定のケースでコードに何をさせたいですか? ...
NaN にしたい場合は、バックフィルしてから最初の要素を取得できます。

g['Focal'].transform(lambda s: s.bfill().iloc[0])
于 2013-09-24T06:01:29.047 に答える