Я получаю ValueError: не может переиндексировать от повторяющихся оси
, когда я пытаюсь установить указатель на определенное значение. Я попытался воспроизвести это на простом примере, но я не мог этого сделать.
Вот мои сессии внутри след ipdb все
. У меня есть таблицы данных с индексами строк и число столбцов, значений с плавающей точкой. Однако, когда я пытаюсь создать индекс сумма
на сумму всех столбцов, я получаю `ValueError: не может переиндексировать от ошибок дубликат оси. Я создал небольшую таблицу данных с теми же характеристиками, но не смог воспроизвести проблему, что я могу потерять?
Я не't действительно понять, что `ValueError: не может переиндексировать от дубликата оси мха, что означает это сообщение об ошибке означает? Может быть, это поможет мне диагностировать проблему, а это самое отдуваться часть моего вопроса.
ipdb> type(affinity_matrix)
<class 'pandas.core.frame.DataFrame'>
ipdb> affinity_matrix.shape
(333, 10)
ipdb> affinity_matrix.columns
Int64Index([9315684, 9315597, 9316591, 9320520, 9321163, 9320615, 9321187, 9319487, 9319467, 9320484], dtype='int64')
ipdb> affinity_matrix.index
Index([u'001', u'002', u'003', u'004', u'005', u'008', u'009', u'010', u'011', u'014', u'015', u'016', u'018', u'020', u'021', u'022', u'024', u'025', u'026', u'027', u'028', u'029', u'030', u'032', u'033', u'034', u'035', u'036', u'039', u'040', u'041', u'042', u'043', u'044', u'045', u'047', u'047', u'048', u'050', u'053', u'054', u'055', u'056', u'057', u'058', u'059', u'060', u'061', u'062', u'063', u'065', u'067', u'068', u'069', u'070', u'071', u'072', u'073', u'074', u'075', u'076', u'077', u'078', u'080', u'082', u'083', u'084', u'085', u'086', u'089', u'090', u'091', u'092', u'093', u'094', u'095', u'096', u'097', u'098', u'100', u'101', u'103', u'104', u'105', u'106', u'107', u'108', u'109', u'110', u'111', u'112', u'113', u'114', u'115', u'116', u'117', u'118', u'119', u'121', u'122', ...], dtype='object')
ipdb> affinity_matrix.values.dtype
dtype('float64')
ipdb> 'sums' in affinity_matrix.index
False
Здесь ошибка:
ipdb> affinity_matrix.loc['sums'] = affinity_matrix.sum(axis=0)
*** ValueError: cannot reindex from a duplicate axis
Я попытался воспроизвести это на простом примере, но я не
In [32]: import pandas as pd
In [33]: import numpy as np
In [34]: a = np.arange(35).reshape(5,7)
In [35]: df = pd.DataFrame(a, ['x', 'y', 'u', 'z', 'w'], range(10, 17))
In [36]: df.values.dtype
Out[36]: dtype('int64')
In [37]: df.loc['sums'] = df.sum(axis=0)
In [38]: df
Out[38]:
10 11 12 13 14 15 16
x 0 1 2 3 4 5 6
y 7 8 9 10 11 12 13
u 14 15 16 17 18 19 20
z 21 22 23 24 25 26 27
w 28 29 30 31 32 33 34
sums 70 75 80 85 90 95 100
Эта ошибка обычно повышается, когда вы присоединитесь к / присвоить столбцу, когда индекс повторяющиеся значения. Поскольку вы присваиваете строку, я подозреваю, что есть повторяющиеся значения в affinity_matrix.колонн, возможно, не показали в своем вопросе.
Индексы с повторяющимися значениями часто возникают при создании таблицы данных путем объединения других таблиц данных. Если вы Don'т заботятся о сохранении значения Индекса, и вы хотите, чтобы они были уникальные значения, когда вы объединить ignore_index данных, комплект =ложь
.
Кроме того, чтобы заменить ваш текущий индекс на новый, вместо того, чтобы использовать `ДФ.переиндексировать (), установить:
df.index = new_index
Для людей, которые все еще борются с этой ошибки, она также может произойти, если вы случайно создать дубликат столбца с тем же именем. Удалить дубликаты столбцов следующим образом:
df = df.loc[:,~df.columns.duplicated()]
Я пришел сегодня на эту ошибку, когда я хотел, чтобы добавить новый столбец такой
df_temp['REMARK_TYPE'] = df.REMARK.apply(lambda v: 1 if str(v)!='nan' else 0)
Я хотел, чтобы процесс столбец реплика
в df_temp
возвращать 1 или 0. Однако я ввел неправильную переменную ДФ
. И он вернулся об ошибке вроде этого:
----> 1 df_temp['REMARK_TYPE'] = df.REMARK.apply(lambda v: 1 if str(v)!='nan' else 0)
/usr/lib64/python2.7/site-packages/pandas/core/frame.pyc in __setitem__(self, key, value)
2417 else:
2418 # set column
-> 2419 self._set_item(key, value)
2420
2421 def _setitem_slice(self, key, value):
/usr/lib64/python2.7/site-packages/pandas/core/frame.pyc in _set_item(self, key, value)
2483
2484 self._ensure_valid_index(value)
-> 2485 value = self._sanitize_column(key, value)
2486 NDFrame._set_item(self, key, value)
2487
/usr/lib64/python2.7/site-packages/pandas/core/frame.pyc in _sanitize_column(self, key, value, broadcast)
2633
2634 if isinstance(value, Series):
-> 2635 value = reindexer(value)
2636
2637 elif isinstance(value, DataFrame):
/usr/lib64/python2.7/site-packages/pandas/core/frame.pyc in reindexer(value)
2625 # duplicate axis
2626 if not value.index.is_unique:
-> 2627 raise e
2628
2629 # other
ValueError: cannot reindex from a duplicate axis
Как видите, правильный код должен быть
df_temp['REMARK_TYPE'] = df_temp.REMARK.apply(lambda v: 1 if str(v)!='nan' else 0)
Потому что ДФ
и df_temp
иметь разное количество строк. Поэтому он вернулся `ValueError: не может переиндексировать от повторяющихся оси.
Надеюсь, вы можете понять это и мой ответ может помочь другим людям, чтобы отладить свой код.
Просто используйте `.значения в конце.
affinity_matrix.loc['sums'] = affinity_matrix.sum(axis=0).values
В моем случае эта ошибка выскочила не из-за повторяющихся значений, а потому, что я пыталась вступить в более короткий ряд в таблице данных: один и тот же индекс, но в серии было меньше строк (отсутствует верхний). Следующие работал для моих целей:
df.head()
SensA
date
2018-04-03 13:54:47.274 -0.45
2018-04-03 13:55:46.484 -0.42
2018-04-03 13:56:56.235 -0.37
2018-04-03 13:57:57.207 -0.34
2018-04-03 13:59:34.636 -0.33
series.head()
date
2018-04-03 14:09:36.577 62.2
2018-04-03 14:10:28.138 63.5
2018-04-03 14:11:27.400 63.1
2018-04-03 14:12:39.623 62.6
2018-04-03 14:13:27.310 62.5
Name: SensA_rrT, dtype: float64
df = series.to_frame().combine_first(df)
df.head(10)
SensA SensA_rrT
date
2018-04-03 13:54:47.274 -0.45 NaN
2018-04-03 13:55:46.484 -0.42 NaN
2018-04-03 13:56:56.235 -0.37 NaN
2018-04-03 13:57:57.207 -0.34 NaN
2018-04-03 13:59:34.636 -0.33 NaN
2018-04-03 14:00:34.565 -0.33 NaN
2018-04-03 14:01:19.994 -0.37 NaN
2018-04-03 14:02:29.636 -0.34 NaN
2018-04-03 14:03:31.599 -0.32 NaN
2018-04-03 14:04:30.779 -0.33 NaN
2018-04-03 14:05:31.733 -0.35 NaN
2018-04-03 14:06:33.290 -0.38 NaN
2018-04-03 14:07:37.459 -0.39 NaN
2018-04-03 14:08:36.361 -0.36 NaN
2018-04-03 14:09:36.577 -0.37 62.2
Я потратил пару часов на тот же вопрос. В моем случае, мне пришлось reset_index() из таблицы данных перед использованием применить функцию. Перед тем как сливать, или, глядя с другой индексированный набор данных, нужно сбросить индекс, как 1 набор данных может иметь только 1 показатель.