Squeak.ru - шаблоны программирования

Pandas concat переворачивает все мои значения в DataFrame

У меня есть фрейм данных под названием «running_tally».

        list   jan_to  jan_from
0         LA    True      False
1         NY   False       True

Я пытаюсь добавить к нему новые данные в виде кадра данных с одним столбцом, который называется «new_data».

        list   
0        HOU
1         LA

Я объединяю эти два dfs на основе их столбца «список» для дальнейшей обработки, но сразу после того, как я это делаю, все логические значения неожиданно переворачиваются.

running_tally = pd.concat([running_tally,new_data]).groupby('list',as_index=False).first()

приведенный выше оператор будет производить:

        list   jan_to  jan_from
0         LA    False      True
1         NY     True     False
2        HOU     NaN        NaN

Для новой строки ожидаются значения NaN, но я не знаю, почему все логические значения переворачиваются. Что может быть причиной этого? Код логически имеет смысл для меня, поэтому я не уверен, где я ошибаюсь. Спасибо

РЕДАКТИРОВАТЬ: я внес изменения в «new_data», чтобы включить повтор с LA. Окончательный вывод не должен иметь повторов, которые мой код в настоящее время обрабатывает правильно, просто имеет логическое переключение

РЕДАКТИРОВАТЬ 2: Оказывается, при объединении столбцы будут переворачиваться, чтобы я поверил, что логические значения перевернуты. Все еще открытый вопрос однако

python pandas dataframe boolean concat
30.06.2020

  • Я не переворачиваю логические значения с вашим кодом ... Может быть, вы делаете что-то еще? 30.06.2020
  • @QuangHoang логические значения остаются прежними для вашего предложения, но df1 не включает строку для HOU 30.06.2020
  • @MrNobody33 MrNobody33 Я делаю другие вещи до и после, но я сузил проблему до этого конкретного фрагмента кода concat, так как я печатаю running_tally до и после. Печать до объединения, все логические значения верны, печать после добавления HOU, но все логические значения перевернуты 30.06.2020
  • Я не могу воспроизвести это. Кажется, вы удалили что-то критическое для этой проблемы 30.06.2020
  • Я тоже не могу воспроизвести переключение bool, но в какой-то момент я подумал, что у меня получилось, потому что порядок столбцов изменился. Просто чтобы быть уверенным, что это не то, что происходит с вами? 30.06.2020
  • Я сделаю набросок в другой среде, чтобы посмотреть, смогу ли я воспроизвести, и опубликую полный код. 30.06.2020
  • Оказывается, использование concat изменило бы порядок столбцов, потому что он автоматически сортировался. Я ищу решение сейчас. stackoverflow.com/questions/62682582/ 01.07.2020

Ответы:


1

Я не уверен, почему вы хотите использовать groupby в этом случае... при использовании concat нет необходимости указывать, какие столбцы вы хотите использовать, если их имена идентичны. Простая конкатенация, подобная этой, должна делать:

running_tally = pd.concat([running_tally,new_data], ignore_index=True, sort=False)

EDIT, чтобы принять во внимание редактирование вопроса: это должно выполнять ту же работу, без дубликатов.

running_tally = running_tally.merge(new_data, on="list", how="outer")
30.06.2020

2

Я не переворачиваю логические значения, как вы, но вы тоже можете попробовать это:

running_tally=running_tally.append(new_data,ignore_index=True)
print(running_tally)

Выход:

  list jan_to jan_from
0   LA   True    False
1   NY  False     True
2  HOU    NaN      NaN

EDIT: поскольку вопрос был отредактирован, вы можете попробовать:

running_tally=running_tally.append(new_data,ignore_index=True).groupby('list',as_index=False).first()
30.06.2020

3

Фактический порядок строк менялся при использовании concat для pandas 0.20.1.

Как объединить кадры данных pandas без изменения порядка столбцов в Pandas 0.20.1?

01.07.2020
Новые материалы
Угловая структура архитектуры
Обратите внимание, что эта статья устарела, я решил создать новую с лучшей структурой и с учетом автономных компонентов: https://medium.com/@marekpanti/angular-standalone-architecture-b645edd0d54a..
«Данные, которые большинство людей используют для обучения своих моделей искусственного интеллекта, поставляются со встроенным…
Первоначально опубликовано HalkTalks: https://hacktown.com.br/blog/blog/os-dados-que-a-maioria-das-pessoas-usa-para-treinar-seus-modelos-de-inteligencia-artificial- ja-vem-com-um-vies-embutido/..
Сильный ИИ против слабого ИИ: различия парадигм искусственного интеллекта
В последние годы изучению и развитию искусственного интеллекта (ИИ) уделяется большое внимание и прогресс. Сильный ИИ и Слабый ИИ — две основные парадигмы в области искусственного интеллекта...
Правильный способ добавить Firebase в ваш проект React с помощью React Hooks
React + Firebase - это мощная комбинация для быстрого и безопасного создания приложений, от проверки концепции до массового производства. Раньше (знаете, несколько месяцев назад) добавление..
Создайте API с помощью Python FastAPI
Создание API с помощью Python становится очень простым при использовании пакета FastAPI. После установки и импорта вы можете создать приложение FastAPI и указать несколько конечных точек. Каждой..
Веселье с прокси-сервером JavaScript
Прокси-серверы JavaScript — это чистый сахар, если вы хотите создать некоторую общую логику в своих приложениях, чтобы облегчить себе жизнь. Вот один пример: Связь клиент-сервер Мы..
Получить бесплатный хостинг для разработчиков | Разместите свой сайт за несколько шагов 🔥
Статические веб-сайты — это веб-страницы с фиксированным содержанием и его постоянным содержанием. Но теперь статические сайты также обрабатывают динамические данные с помощью API и запросов...