Me di cuenta de que instalar Pandas y Numpy (su dependencia) en un contenedor Docker usando el sistema operativo base Alpine vs. CentOS o Debian lleva mucho más tiempo. Creé una pequeña prueba a continuación para demostrar la diferencia horaria. Aparte de los pocos segundos que Alpine tarda en...
Estoy enfrentando un problema con la asignación de matrices enormes en numpy en Ubuntu 18 mientras no enfrento el mismo problema en MacOS. Estoy tratando de asignar memoria para una matriz numpy con forma (156816, 36, 53806) con np.zeros((156816, 36, 53806), dtype='uint8') y mientras recibo...
Supongamos que tengo; LIST = [[array([1, 2, 3, 4, 5]), array([1, 2, 3, 4, 5],[1,2,3,4,5])] # inner lists are numpy arrays Trato de convertir; array([[1, 2, 3, 4, 5], [1, 2, 3, 4, 5], [1, 2, 3, 4, 5]) Lo estoy resolviendo iterando en vstack en este momento, pero es realmente lento para...
Estoy tratando de entender qué es la máquina épsilon. Según Wikipedia, se puede calcular de la siguiente manera: def machineEpsilon(func=float): machine_epsilon = func(1) while func(1)+func(machine_epsilon) != func(1): machine_epsilon_last = machine_epsilon machine_epsilon =...
Por ejemplo, si tenemos una numpymatriz Ay queremos una numpymatriz Bcon los mismos elementos. ¿Cuál es la diferencia entre los siguientes métodos (ver más abajo)? ¿Cuándo se asigna memoria adicional y cuándo no? B = A B[:] = A(igual que B[:]=A[:]?) numpy.copy(B,
Tengo dos matrices a = np.matrix([[1,2], [3,4]]) b = np.matrix([[5,6], [7,8]]) y quiero obtener el producto por elementos [[1*5,2*6], [3*7,4*8]], igual [[5,12], [21,32]] Yo he tratado print(np.dot(a,b)) y print(a*b) pero ambos dan el resultado [[19 22], [43 50]] que es el producto de...
Me enfrento a un problema aquí, en mi paquete de python he instalado numpy, pero todavía tengo este error El objeto 'DataFrame' no tiene atributo 'sort' Cualquiera puede darme una idea ... Este es mi codigo: final.loc[-1] =['', 'P','Actual'] final.index = final.index + 1 # shifting index final =...
En el manual numpy sobre la función reshape (), dice >>> a = np.zeros((10, 2)) # A transpose make the array non-contiguous >>> b = a.T # Taking a view makes it possible to modify the shape without modifying the # initial object. >>> c = b.view() >>> c.shape =...
Mis matrices numpy se utilizan np.nanpara designar valores faltantes. A medida que repito el conjunto de datos, necesito detectar esos valores faltantes y manejarlos de formas especiales. Usé ingenuamente numpy.isnan(val), que funciona bien a menos valque no esté entre el subconjunto de tipos...
Estoy tratando de realizar una división inteligente de elementos en Python, pero si se encuentra un cero, necesito que el cociente sea cero. Por ejemplo: array1 = np.array([0, 1, 2]) array2 = np.array([0, 1, 1]) array1 / array2 # should be np.array([0, 1, 2]) Siempre podría usar un bucle for a...
Tengo una matriz de números y me gustaría crear otra matriz que represente el rango de cada elemento en la primera matriz. Estoy usando Python y NumPy. Por ejemplo: array = [4,2,7,1] ranks = [2,1,3,0] Este es el mejor método que se me ocurrió: array = numpy.array([4,2,7,1]) temp =...
Si tengo una mesa como esta: df = pd.DataFrame({ 'hID': [101, 102, 103, 101, 102, 104, 105, 101], 'dID': [10, 11, 12, 10, 11, 10, 12, 10], 'uID': ['James', 'Henry', 'Abe', 'James', 'Henry', 'Brian', 'Claude', 'James'], 'mID': ['A', 'B', 'A', 'B', 'A', 'A', 'A', 'C'] }) Puedo hacer...
Tengo una matriz de flotadores (algunos números normales, algunos nans) que salen de una aplicación en un marco de datos de pandas. Por alguna razón, numpy.isnan está fallando en esta matriz, sin embargo, como se muestra a continuación, cada elemento es un flotante, numpy.isnan se ejecuta...
¿Existe un numpy incorporado para hacer algo como lo siguiente? Es decir, tome una lista dy devuelva una lista filtered_dcon los elementos periféricos eliminados en función de una distribución supuesta de los puntos en d. import numpy as np def reject_outliers(data): m = 2 u = np.mean(data) s...
¿Cómo se puede determinar de manera confiable si un objeto tiene un tipo numérico? Me doy cuenta de que esta pregunta va en contra de la filosofía de la escritura de pato, pero la idea es asegurarse de que una función (que usa scipy y numpy) nunca devuelva un tipo numpy a menos que se llame con un...
Tengo un código Python cuya salida es una matriz de tamaño, cuyas entradas son todas del tipo float. Si lo guardo con la extensión, .datel tamaño del archivo es del orden de 500 MB. Leí que el uso h5pyreduce considerablemente el tamaño del archivo. Entonces, digamos que tengo la matriz numpy 2D...
Estoy buscando una función en Numpy o Scipy (o cualquier biblioteca Python rigurosa) que me dé la función de distribución normal acumulativa en
Estoy tratando de obtener los índices del elemento máximo en una matriz Numpy. Esto se puede hacer usando numpy.argmax. Mi problema es que me gustaría encontrar el elemento más grande en toda la matriz y obtener los índices de eso. numpy.argmax se puede aplicar a lo largo de un eje, que no es...
Estoy usando Pandas 0.19.1en Python 3. Recibo una advertencia sobre estas líneas de código. Estoy tratando de obtener una lista que contenga todos los números de fila donde la cadena Peterestá presente en la columna Unnamed: 5. df = pd.read_excel(xls_path) myRows = df[df['Unnamed: 5'] ==...
Tengo una columna de marco de datos con valores numéricos: df['percentage'].head() 46.5 44.2 100.0 42.12 Quiero ver la columna como bin cuenta: bins = [0, 1, 5, 10, 25, 50, 100] ¿Cómo puedo obtener el resultado como contenedores con ellos value counts? [0, 1] bin amount [1, 5] etc [5, 10] etc...