Понять is.na в классе столбца SparkR
У меня есть вопрос относительно is.na
поведение в SparkR. Проблема, которую я имею, я хочу отфильтровать данные, основанные на том, есть ли какой-либо NA в одном столбце. Однако, если я использую any(is.na(data$col1))
это выдаст предупреждение is.na() applied to non-(list or vector) of type 'S4'
но если я просто использую верхние строки в фрейме данных и делаю то же самое, ошибки не возникает и дает правильный ответany(is.na(head(data)$col1))
, Ниже приведен скриншот моего кода: