Operación de resta de lista de Python

227

Quiero hacer algo similar a esto:

>>> x = [1,2,3,4,5,6,7,8,9,0]  
>>> x  
[1, 2, 3, 4, 5, 6, 7, 8, 9, 0]  
>>> y = [1,3,5,7,9]  
>>> y  
[1, 3, 5, 7, 9]  
>>> y - x   # (should return [2,4,6,8,0])

Pero esto no es compatible con las listas de Python. ¿Cuál es la mejor manera de hacerlo?

soñador
fuente
@ezdazuzena esto no es resta. Esta es la diferencia entre dos listas. Su intercambio no es una duplicación de esta pregunta.
Celik
1
¿Qué debería devolver [2, 2] - [2]? []? [2]?
McKay
@McKay [2,2] - [2] debería devolver [2]. [2,2] - [1,2,2,3] debería regresar []
Robino
Esta pregunta trata sobre la resta de la lista, pero la respuesta aceptada está más cerca de establecer la resta.
Robino
2
¿Qué debería devolver [2, 1, 2, 3, 2, 4, 2] - [2, 3, 2] y por qué? ¿Debería encontrar el 232 en el medio y devolver 2142? ¿O debería encontrar el primero cada vez y devolver 1242? ¿O algo mas? Lo que digo es que estas no son respuestas obvias y dependen de la necesidad.
McKay

Respuestas:

330

Use una lista de comprensión:

[item for item in x if item not in y]

Si desea utilizar la -sintaxis infija, simplemente puede hacer:

class MyList(list):
    def __init__(self, *args):
        super(MyList, self).__init__(args)

    def __sub__(self, other):
        return self.__class__(*[item for item in self if item not in other])

entonces puedes usarlo como:

x = MyList(1, 2, 3, 4)
y = MyList(2, 5, 2)
z = x - y   

Pero si no necesita absolutamente las propiedades de la lista (por ejemplo, ordenar), simplemente use conjuntos como recomiendan las otras respuestas.

aaronasterling
fuente
10
@admica, no use listpara nombres de variables ya que sombrea al listconstructor. Si utiliza 'lista', preceda con un guión bajo. Además, al *
soltarlo
19
Si lo hace [1,1,2,2] - [1,2], obtendrá una lista vacía. [1,1,2,2] - [2]da [1,1]Por lo tanto, en realidad no se trata de la resta de la lista, es más como "Lista de la Lista X sin elementos del conjunto Y " .
Alfred Zien
@AlfredZien lo que dijo
RetroCode
El método de comprensión de la lista es mucho más lento (en mi ejemplo) que el método de establecer diferencias.
redfiloux
1
@BarnabasSzabolcs: Eso no ahorrará nada, ya que se convertirá yen un setantes de cada cheque (que es un costo similar al trabajo original). Tendría que hacer yset = set(y)fuera de la lista de compilación, luego probar if item not in yset, o como un hack atroz, hacer lo [item for yset in [set(y)] for item in x if item not in yset]que abusa de las listas de compilación anidadas para almacenar en caché ysetcomo una sola línea. Una solución un poco menos fea de un solo trazo que funcione adecuadamente sería usar list(itertools.filterfalse(set(y).__contains__, x))porque el argumento filterfalsesolo se construye una vez.
ShadowRanger
259

Usar diferencia de conjunto

>>> z = list(set(x) - set(y))
>>> z
[0, 8, 2, 4, 6]

O puede que solo se establezcan x e y para que no tenga que hacer ninguna conversión.

quantumSoup
fuente
50
esto perderá cualquier pedido. Eso puede o no importar dependiendo del contexto.
aaronasterling
63
Esto también perderá cualquier posible duplicado que pueda necesitar / querer mantener.
Opal
ObtengoTypeError: unhashable type: 'dict'
Havnar
Esto es mucho más rápido en los casos en que las listas que se comparan son grandes
JqueryToAddNumbers
2
Si el pedido y los duplicados de elementos en la lista no son importantes para el contexto, esta es una gran respuesta y además es muy legible.
Watt Iamsuri
37

Esa es una operación de "resta de conjuntos". Use la estructura de datos establecida para eso.

En Python 2.7:

x = {1,2,3,4,5,6,7,8,9,0}
y = {1,3,5,7,9}
print x - y

Salida:

>>> print x - y
set([0, 8, 2, 4, 6])
Papa Noel
fuente
1
list (set ([1,2,3,4,5]) - set ([1,2,3])) = [4, 5] así que eso enumera cada uno para establecer primero, luego restar (o diferencia unidireccional ) y volver a la lista.
gseattle
2
No es bueno si desea mantener el orden original de los elementos del conjunto x.
Zahran
34

Si los artículos duplicados y pedidos son un problema:

[i for i in a if not i in b or b.remove(i)]

a = [1,2,3,3,3,3,4]
b = [1,3]
result: [2, 3, 3, 3, 4]
revs nguyên
fuente
2
Esto funciona, aunque es O(m * n)tiempo de ejecución (y me avergüenzo cada vez que un listcomp incluye efectos secundarios); puedes mejorarlo usandocollections.Counter para obtener O(m + n)tiempo de ejecución.
ShadowRanger
Me está costando entender esto, ¿alguien puede explicarlo?
anushka
20

Para muchos casos de uso, la respuesta que desea es:

ys = set(y)
[item for item in x if item not in ys]

Este es un híbrido entre la respuesta de aaronasterling y la respuesta de quantumSoup .

La versión de aaronasterling hace len(y)comparaciones de elementos para cada elemento x, por lo que lleva tiempo cuadrático. La versión de quantumSoup usa conjuntos, por lo que realiza una sola búsqueda de conjuntos de tiempo constante para cada elemento en x, pero porque convierte ambos x yy en conjuntos, pierde el orden de sus elementos.

Al convertir solo yen un conjunto e iterar xen orden, obtienes lo mejor de ambos mundos: tiempo lineal y preservación del orden. *


Sin embargo, esto todavía tiene un problema con la versión de quantumSoup: requiere que sus elementos sean hashable. Eso está más o menos integrado en la naturaleza de los conjuntos. ** Si está tratando de restar, por ejemplo, una lista de dictos de otra lista de dictos, pero la lista para restar es grande, ¿qué debe hacer?

Si puede decorar sus valores de alguna manera para que se puedan compartir, eso resuelve el problema. Por ejemplo, con un diccionario plano cuyos valores son en sí mismos hashables:

ys = {tuple(item.items()) for item in y}
[item for item in x if tuple(item.items()) not in ys]

Si sus tipos son un poco más complicados (por ejemplo, a menudo se trata de valores compatibles con JSON, que son hashable, o listas o dictados cuyos valores son recursivamente del mismo tipo), aún puede usar esta solución. Pero algunos tipos simplemente no se pueden convertir en algo hashaable.


Si sus elementos no son, y no se pueden hacer, hashables, pero son comparables, al menos puede obtener un tiempo de registro lineal ( O(N*log M)que es mucho mejor que el O(N*M)tiempo de la solución de la lista, pero no tan bueno como el O(N+M)tiempo de la solución establecida) ordenando y usando bisect:

ys = sorted(y)
def bisect_contains(seq, item):
    index = bisect.bisect(seq, item)
    return index < len(seq) and seq[index] == item
[item for item in x if bisect_contains(ys, item)]

Si sus artículos no son hashables ni comparables, entonces está atrapado con la solución cuadrática.


* Tenga en cuenta que también puede hacerlo utilizando un par de OrderedSetobjetos, para los cuales puede encontrar recetas y módulos de terceros. Pero creo que esto es más simple.

** La razón por la que las búsquedas de conjuntos son de tiempo constante es que todo lo que tiene que hacer es calcular el valor hash y ver si hay una entrada para ese hash. Si no puede cambiar el valor, esto no funcionará.

abarnert
fuente
7

Buscar valores en conjuntos es más rápido que buscarlos en listas:

[item for item in x if item not in set(y)]

Creo que esto escalará un poco mejor que:

[item for item in x if item not in y]

Ambos preservan el orden de las listas.

Rudolfbyker
fuente
¿Se almacenará en caché set(y)y no se convertirá yen un nuevo conjunto en cada bucle? De lo contrario, respondía necesidad de abarnert: ys = set(y); [i for i in x if i not in ys].
Jacktose
2
Algunas pruebas aproximadas sugieren que if i not in set(y)lleva un 25% más de tiempo que if i not in y(donde yhay una lista). La conversión previa del conjunto lleva un 55% menos de tiempo. Probado con bastante corto xy y, pero las diferencias deberían ser más pronunciadas con la longitud, en todo caso.
Jacktose
1
@Jacktose: Sí, esta solución hace más trabajo, porque tiene que iterar y hash de cada elemento de la yde cada elemento de la x; a menos que la comparación de igualdad sea realmente costosa en relación con el cómputo hash, esto siempre se perderá por completo item not in y.
ShadowRanger
@ShadowRanger que tiene sentido. Si la conversión de conjuntos fuera una forma más rápida y confiable de hacer esa verificación, pensarías que el compilador siempre lo haría de esa manera.
Jacktose
5

Si las listas permiten elementos duplicados, puede usar Contador de colecciones:

from collections import Counter
result = list((Counter(x)-Counter(y)).elements())

Si necesita preservar el orden de los elementos de x:

result = [ v for c in [Counter(y)] for v in x if not c[v] or c.subtract([v]) ]
Alain T.
fuente
Esto es bueno, aunque pierde el orden; arreglar eso es un poco más complicado .
ShadowRanger
@ShadowRanger, de hecho lo es. pero solo un poco
Alain T.
No me molesten, solo voy a estremecerme en listcomps con el almacenamiento en caché y los efectos secundarios (aunque supongo que la combinación de los dos elimina los efectos secundarios visibles desde el exterior). :-)
ShadowRanger
Además, este código no funcionará como está escrito; Counter.subtractno elimina elementos de valor cero ( -y lo -=hace, pero no subtract), por lo que nunca dejaría de eliminar elementos. Desea reemplazar not v in ccon not c[v](que devuelve cero para elementos inexistentes, por lo que puede probar de forma segura el retorno para "cero" a través de not).
ShadowRanger
@ShadowRanger, ¡Buena captura! Lo arregló ahora.
Alain T.
3

Creo que la forma más fácil de lograr esto es usando set ().

>>> x = [1,2,3,4,5,6,7,8,9,0]  
>>> y = [1,3,5,7,9]  
>>> list(set(x)- set(y))
[0, 2, 4, 6, 8]
Loochie
fuente
3

Las otras soluciones tienen uno de los pocos problemas:

  1. No preservan el orden, o
  2. No eliminan un recuento preciso de elementos, por ejemplo, for x = [1, 2, 2, 2]y y = [2, 2]se convierten en ya set, y eliminan todos los elementos coincidentes (dejando [1]solo) o eliminan uno de cada elemento único (salir [1, 2, 2]), cuando el comportamiento adecuado sería eliminar 2dos veces, dejando[1, 2] o
  3. Funcionan O(m * n), donde una solución óptima puede O(m + n)funcionar

Alain estaba en el camino correctoCounter para resolver el # 2 y el # 3, pero esa solución perderá el orden. La solución que conserva el orden (eliminando las primeras ncopias de cada valor para las nrepeticiones en los listvalores a eliminar) es:

from collections import Counter

x = [1,2,3,4,3,2,1]  
y = [1,2,2]  
remaining = Counter(y)

out = []
for val in x:
    if remaining[val]:
        remaining[val] -= 1
    else:
        out.append(val)
# out is now [3, 4, 3, 1], having removed the first 1 and both 2s.

Pruébalo en línea!

Para que elimine las últimas copias de cada elemento, simplemente cambie el forbucle for val in reversed(x):y agréguelo out.reverse()inmediatamente después de salir delfor ciclo.

La construcción de Counteres O(n)en términos de ylongitud, la iteración xes O(n)en términos de xlongitud, y Counterlas pruebas de membresía y la mutación son O(1), mientras que list.appendse amortiza O(1)(un hecho appendpuede ser O(n), pero para muchos appends, los promedios generales de Big-O O(1)ya que cada vez menos de ellos requieren una reasignación), por lo que el trabajo general realizado esO(m + n) .

También puede probar para determinar si había algún elemento yque no se eliminó xmediante la prueba:

remaining = +remaining  # Removes all keys with zero counts from Counter
if remaining:
    # remaining contained elements with non-zero counts
ShadowRanger
fuente
Nota: Esto hace requerir los valores a ser hashable, pero cualquier solución que no requiere objetos hashable o bien no es de uso general (por ejemplo, puede contar ints en matriz de longitud fija) o tiene que hacer algo más que O(m + n)el trabajo (por ejemplo, la siguiente mejor grande -O sería hacer un orden listde pares de valor / recuento únicos, cambiando las O(1) dictbúsquedas en búsquedas O(log n)binarias; necesitaría valores únicos con sus recuentos, no solo valores no únicos ordenados, porque de lo contrario estaría pagando O(n)costos para eliminar el elementos de la ordenada list).
ShadowRanger
2

Prueba esto.

def subtract_lists(a, b):
    """ Subtracts two lists. Throws ValueError if b contains items not in a """
    # Terminate if b is empty, otherwise remove b[0] from a and recurse
    return a if len(b) == 0 else [a[:i] + subtract_lists(a[i+1:], b[1:]) 
                                  for i in [a.index(b[0])]][0]

>>> x = [1,2,3,4,5,6,7,8,9,0]
>>> y = [1,3,5,7,9]
>>> subtract_lists(x,y)
[2, 4, 6, 8, 0]
>>> x = [1,2,3,4,5,6,7,8,9,0,9]
>>> subtract_lists(x,y)
[2, 4, 6, 8, 0, 9]     #9 is only deleted once
>>>
usuario3435376
fuente
1

La respuesta proporcionada por @aaronasterling se ve bien, sin embargo, no es compatible con la interfaz por defecto de la lista: x = MyList(1, 2, 3, 4)vs x = MyList([1, 2, 3, 4]). Por lo tanto, el siguiente código se puede usar como una lista más amigable para python:

class MyList(list):
    def __init__(self, *args):
        super(MyList, self).__init__(*args)

    def __sub__(self, other):
        return self.__class__([item for item in self if item not in other])

Ejemplo:

x = MyList([1, 2, 3, 4])
y = MyList([2, 5, 2])
z = x - y
Hamid Zafar
fuente
0

Creo que esto es más rápido:

In [1]: a = [1,2,3,4,5]

In [2]: b = [2,3,4,5]

In [3]: c = set(a) ^ set(b)

In [4]: c
Out[4]: {1}
Eds_k
fuente
Esto no es resta. De hecho, esta es la diferencia simétrica entre dos listas.
Parth Chauhan
Además, esto solo funciona para los objetos que se pueden cambiar dentro de las listas
zhukovgreen
-1

Este ejemplo resta dos listas:

# List of pairs of points
list = []
list.append([(602, 336), (624, 365)])
list.append([(635, 336), (654, 365)])
list.append([(642, 342), (648, 358)])
list.append([(644, 344), (646, 356)])
list.append([(653, 337), (671, 365)])
list.append([(728, 13), (739, 32)])
list.append([(756, 59), (767, 79)])

itens_to_remove = []
itens_to_remove.append([(642, 342), (648, 358)])
itens_to_remove.append([(644, 344), (646, 356)])

print("Initial List Size: ", len(list))

for a in itens_to_remove:
    for b in list:
        if a == b :
            list.remove(b)

print("Final List Size: ", len(list))
Joao Nicolau
fuente
8
Evita esto, es O (N ^ 2)
Alexander - Restablece Monica