Как удалить столбцы в numpy.array

Я хотел бы удалить выбранные столбцы в numpy.array . Это то, что я делаю:

n [397]: a = array([[ NaN,   2.,   3., NaN],
   .....:        [  1.,   2.,   3., 9]])

In [398]: print a
[[ NaN   2.   3.  NaN]
 [  1.   2.   3.   9.]]

In [399]: z = any(isnan(a), axis=0)

In [400]: print z
[ True False False  True]

In [401]: delete(a, z, axis = 1)
Out[401]:
 array([[  3.,  NaN],
       [  3.,   9.]])

В этом примере моя цель — удалить все столбцы, содержащие NaN. Я ожидаю, что последняя команда приведет к:

array([[2., 3.],
       [2., 3.]])

Как я могу это сделать?


person Boris Gorelik    schedule 29.10.2009    source источник


Ответы (7)


Учитывая его название, я думаю, что стандартный способ должен быть delete:

import numpy as np

A = np.delete(A, 1, 0)  # delete second row of A
B = np.delete(B, 2, 0)  # delete third row of B
C = np.delete(C, 1, 1)  # delete second column of C

Согласно странице документации numpy, параметры для numpy.delete следующие:

numpy.delete(arr, obj, axis=None)

  • arr относится к входному массиву,
  • obj указывает, какие подмассивы (например, номер столбца/строки или часть массива) и
  • axis относится к операции удаления по столбцу (axis = 1) или по строке (axis = 0).
person Steve Tjoa    schedule 17.02.2011
comment
Я считаю, что вы должны ссылаться на numpy, а не на scipy. docs.scipy.org/doc/numpy/reference/generated/ numpy.delete.html - person hlin117; 26.03.2015
comment
просто добавьте объяснение: массив, индекс и ось в качестве параметров - person maximus; 23.06.2018

Пример из документации numpy:

>>> a = numpy.array([[ 0,  1,  2,  3],
               [ 4,  5,  6,  7],
               [ 8,  9, 10, 11],
               [12, 13, 14, 15]])

>>> numpy.delete(a, numpy.s_[1:3], axis=0)                       # remove rows 1 and 2

array([[ 0,  1,  2,  3],
       [12, 13, 14, 15]])

>>> numpy.delete(a, numpy.s_[1:3], axis=1)                       # remove columns 1 and 2

array([[ 0,  3],
       [ 4,  7],
       [ 8, 11],
       [12, 15]])
person Nikolay Frick    schedule 05.07.2011
comment
@alvas вот хорошо организованное объяснение! stackoverflow.com/questions/32682754/ - person Daeyoung Lim; 17.09.2016
comment
@Alvas, s_ это: A nicer way to build up index tuples for arrays.: docs.scipy.org/ doc/numpy/reference/generated/numpy.s_.html - person user_007; 16.07.2019

Другой способ - использовать маскированные массивы:

import numpy as np
a = np.array([[ np.nan,   2.,   3., np.nan], [  1.,   2.,   3., 9]])
print(a)
# [[ NaN   2.   3.  NaN]
#  [  1.   2.   3.   9.]]

Метод np.ma.masked_invalid возвращает замаскированный массив с замаскированными nans и infs:

print(np.ma.masked_invalid(a))
[[-- 2.0 3.0 --]
 [1.0 2.0 3.0 9.0]]

Метод np.ma.compress_cols возвращает двумерный массив с любым столбцом, содержащим скрытое значение:

a=np.ma.compress_cols(np.ma.masked_invalid(a))
print(a)
# [[ 2.  3.]
#  [ 2.  3.]]

См. манипулирование-a-maskedarray.

person unutbu    schedule 29.10.2009

Это создает другой массив без этих столбцов:

  b = a.compress(logical_not(z), axis=1)
person Paul    schedule 29.10.2009
comment
Круто. Я бы хотел, чтобы здесь работал синтаксис Matlab: a(:,z) = [] намного проще - person Boris Gorelik; 29.10.2009
comment
@bpowah: действительно. более общий способ был бы b = a[:,z]. Возможно, вы захотите обновить свой ответ соответственно - person Boris Gorelik; 29.10.2009

Из документации Numpy.

np.delete(arr, obj, axis=None) Возвращает новый массив с подмассивами вдоль удаленной оси.

>>> arr
array([[ 1,  2,  3,  4],
       [ 5,  6,  7,  8],
       [ 9, 10, 11, 12]])
>>> np.delete(arr, 1, 0)
array([[ 1,  2,  3,  4],
       [ 9, 10, 11, 12]])

>>> np.delete(arr, np.s_[::2], 1)
array([[ 2,  4],
       [ 6,  8],
       [10, 12]])
>>> np.delete(arr, [1,3,5], None)
array([ 1,  3,  5,  7,  8,  9, 10, 11, 12])
person Parag Gupta    schedule 10.11.2013

В вашей ситуации вы можете извлечь нужные данные с помощью:

a[:, -z]

"-z" является логическим отрицанием логического массива "z". Это то же самое, что:

a[:, logical_not(z)]
person Olivier    schedule 16.10.2011

Удаление столбцов Matrix, содержащих NaN. Это длинный ответ, но, надеюсь, его легко понять.

def column_to_vector(matrix, i):
    return [row[i] for row in matrix]
import numpy
def remove_NaN_columns(matrix):
    import scipy
    import math
    from numpy import column_stack, vstack

    columns = A.shape[1]
    #print("columns", columns)
    result = []
    skip_column = True
    for column in range(0, columns):
        vector = column_to_vector(A, column)
        skip_column = False
        for value in vector:
            # print(column, vector, value, math.isnan(value) )
            if math.isnan(value):
                skip_column = True
        if skip_column == False:
            result.append(vector)
    return column_stack(result)

### test it
A = vstack(([ float('NaN'), 2., 3., float('NaN')], [ 1., 2., 3., 9]))
print("A shape", A.shape, "\n", A)
B = remove_NaN_columns(A)
print("B shape", B.shape, "\n", B)

A shape (2, 4) 
 [[ nan   2.   3.  nan]
 [  1.   2.   3.   9.]]
B shape (2, 2) 
 [[ 2.  3.]
 [ 2.  3.]]
person Uki D. Lucas    schedule 13.11.2016
comment
Я на самом деле не слежу за тобой. Как работает этот код? - person RamenChef; 14.11.2016