получить все строки за последнюю минуту в пандах

Question

получить все строки за последнюю минуту в пандах

1

Как я могу получить все строки, добавленные в последнюю минуту в пандах. ЕСЛИ есть какое-либо значение даты в течение последней минуты, я должен получить его еще не.

Я использую приведенный ниже код, и он не дает мне никаких ошибок, но возвращает ожидаемое значение.

import datetime
created_time = datetime.datetime.now() - datetime.timedelta(minutes=1)
old_objects = data[data['Date'] > created_time]

Я получаю значения ниже

но я должен получить только следующее: -

ak333 17 окт. 2018, в 17:29

Источник

0

Вы можете print(created_time) ? Что ты видишь?
jpp 17 окт. 2018, в 15:58
0

Я получаю текущее значение времени, например эту метку времени ('2018-10-17 11: 57: 37.214967')
user10177566 17 окт. 2018, в 15:59
0

Вы получаете текущее время, а не время минус 1 минуту?
jpp 17 окт. 2018, в 15:59
0

извините да я получаю -1 значение datetime.datetime (2018, 10, 17, 11, 59, 47, 462484)
user10177566 17 окт. 2018, в 16:01
0

я получаю, что время твиттера в другой зоне, а у другой, и поэтому оно происходит.
user10177566 17 окт. 2018, в 16:03

Показать ещё 3 комментария

Теги:

python

pandas

dataframe

python-3.x

datetime

3 ответа

1

Попытайтесь ограничить диапазон дат, используя:

old_objects = data[(data['Date'] > created_time) & (data['Date'] < datetime.datetime.now())]

Я переделал ваши тесты, и здесь он работал правильно.

andre.brito 17 окт. 2018, в 14:34

0

это вы получаете данные за последние 60 секунд ... верно?
user10177566 17 окт. 2018, в 15:55
0

Да, как ты и просил. Также обратите внимание на часовой пояс, как уже упоминалось @jpp.
andre.brito 17 окт. 2018, в 18:20
0

спасибо, я понял это
user10177566 17 окт. 2018, в 18:33

Показать ещё 1 комментарий

1

Вы должны использовать согласованные часовые пояса. И вы должны использовать объекты Pandas datetime с данными Pandas. Вы можете обеспечить согласованность, используя pd.to_datetime с tz_convert и pd.Timestamp.utcnow: -

Поэтому попробуйте следующее:

created_time = pd.Timestamp.utcnow() - pd.DateOffset(minutes=1)
data['Date'] = pd.to_datetime(data['Date']).tz_convert('UTC')

jpp 17 окт. 2018, в 13:37

0

Большое спасибо, но я получаю ошибку, так как индекс не является действительным DatetimeIndex или PeriodIndex ... это означает, что я должен сделать столбец Date в качестве индекса
user10177566 17 окт. 2018, в 16:18
0

@ ak333, это, вероятно, означает, что у вас pd.to_datetime(data['Date'], errors='coerce').tz_convert('UTC') данные, например, попробуйте pd.to_datetime(data['Date'], errors='coerce').tz_convert('UTC')
jpp 17 окт. 2018, в 16:19
0

та же ошибка .. я проверил dtype и его дату datetime64 [нс]
user10177566 17 окт. 2018, в 16:21
0

@ ak333, в этом случае я могу только предложить вам привести минимальный воспроизводимый пример . Конечно, я не могу скопировать и вставить ваши изображения, чтобы повторить вашу ошибку.
jpp 17 окт. 2018, в 16:30

Показать ещё 2 комментария

Ещё вопросы

Вы можете print(created_time) ? Что ты видишь?
Я получаю текущее значение времени, например эту метку времени ('2018-10-17 11: 57: 37.214967')
Вы получаете текущее время, а не время минус 1 минуту?
извините да я получаю -1 значение datetime.datetime (2018, 10, 17, 11, 59, 47, 462484)
я получаю, что время твиттера в другой зоне, а у другой, и поэтому оно происходит.
это вы получаете данные за последние 60 секунд ... верно?
Да, как ты и просил. Также обратите внимание на часовой пояс, как уже упоминалось @jpp.
Большое спасибо, но я получаю ошибку, так как индекс не является действительным DatetimeIndex или PeriodIndex ... это означает, что я должен сделать столбец Date в качестве индекса
@ ak333, это, вероятно, означает, что у вас pd.to_datetime(data['Date'], errors='coerce').tz_convert('UTC') данные, например, попробуйте pd.to_datetime(data['Date'], errors='coerce').tz_convert('UTC')
та же ошибка .. я проверил dtype и его дату datetime64 [нс]
@ ak333, в этом случае я могу только предложить вам привести минимальный воспроизводимый пример . Конечно, я не могу скопировать и вставить ваши изображения, чтобы повторить вашу ошибку.

ak3191 · Accepted Answer · 2018-10-18T16-43-00.000Z

created_time = datetime.datetime.utcnow() - datetime.timedelta(minutes=1)

data = data[(data['Date'] > created_time) & (data['Date'] <datetime.datetime.utcnow())]