1. ホーム
  2. python

[解決済み】Pandasのunstackの問題。ValueError: Index contains duplicate entries, cannot reshape.

2022-02-23 07:17:01

質問

pandasでマルチインデックスをアンスタックしようとしているのですが、何度もエラーが発生します。

ValueError: Index contains duplicate entries, cannot reshape

4つの列を持つデータセットが与えられた。

  • id (文字列)
  • 日付 (文字列)
  • 場所 (文字列)
  • 値 (フロート)

まず3レベルのマルチインデックスを設定しました。

In [37]: e.set_index(['id', 'date', 'location'], inplace=True)

In [38]: e
Out[38]: 
                                    value
id           date       location       
id1          2014-12-12 loc1        16.86
             2014-12-11 loc1        17.18
             2014-12-10 loc1        17.03
             2014-12-09 loc1        17.28

そして、ロケーションをアンスタックしてみる。

In [39]: e.unstack('location')
---------------------------------------------------------------------------
ValueError                                Traceback (most recent call last)
<ipython-input-39-bc1e237a0ed7> in <module>()
----> 1 e.unstack('location')
...
C:\Anaconda\envs\sandbox\lib\site-packages\pandas\core\reshape.pyc in _make_selectors(self)
    143 
    144         if mask.sum() < len(self.index):
--> 145             raise ValueError('Index contains duplicate entries, '
    146                              'cannot reshape')
    147 

ValueError: Index contains duplicate entries, cannot reshape

どうなっているのでしょうか?

解決方法は?

これは、同じインデックスを持つ重複した値を持つデータフレームの例です。問題は、これらを集約するのか、それとも複数行として保持するのか、ということです。

In [11]: df
Out[11]:
   0  1  2      3
0  1  2  a  16.86
1  1  2  a  17.18
2  1  4  a  17.03
3  2  5  b  17.28

In [12]: df.pivot_table(values=3, index=[0, 1], columns=2, aggfunc='mean')  # desired?
Out[12]:
2        a      b
0 1
1 2  17.02    NaN
  4  17.03    NaN
2 5    NaN  17.28

In [13]: df1 = df.set_index([0, 1, 2])

In [14]: df1
Out[14]:
           3
0 1 2
1 2 a  16.86
    a  17.18
  4 a  17.03
2 5 b  17.28

In [15]: df1.unstack(2)
ValueError: Index contains duplicate entries, cannot reshape


一つの解決策として reset_index (に戻る)。 df を使用します。 pivot_table .

In [16]: df1.reset_index().pivot_table(values=3, index=[0, 1], columns=2, aggfunc='mean')
Out[16]:
2        a      b
0 1
1 2  17.02    NaN
  4  17.03    NaN
2 5    NaN  17.28

もう一つの方法は(集約したくない場合)、ダミーレベルを追加して、それをアンスタックし、ダミーレベルをドロップすることです...。