Quiero guardar todas las variables en mi entorno actual de Python. Parece que una opción es usar el módulo 'pickle'. Sin embargo, no quiero hacer esto por 2 razones:
- Tengo que llamar
pickle.dump()
para cada variable - Cuando quiero recuperar las variables, debo recordar el orden en el que guardé las variables y luego hacer un
pickle.load()
para recuperar cada variable.
Estoy buscando algún comando que guarde toda la sesión, de modo que cuando cargue esta sesión guardada, todas mis variables se restauren. es posible?
Editar: Supongo que no me importa llamar pickle.dump()
a cada variable que me gustaría guardar, pero recordar el orden exacto en el que se guardaron las variables parece una gran restricción. Quiero evitar eso.
PicklingError: Can't pickle <built-in function raw_input>: it's not the same object as __builtin__.raw_input
solo tengo 2 variables declaradas en mi espacio de trabajo. ¿Alguna idea sobre cómo solucionar esto? ¿Ha aparecido alguna forma mejor de guardar la sesión actual después de esta respuesta?except:
lugar deexcept TypeError:
. Esto archivará las variables definidas por el usuario y la mayoría de los objetos (los marcos de datos de pandas se archivaron bien para mí)Habiéndome sentado aquí y sin poder guardar el
globals()
como un diccionario, descubrí que puedes elegir una sesión usando la biblioteca de eneldo.Esto se puede hacer usando:
import dill #pip install dill --user filename = 'globalsave.pkl' dill.dump_session(filename) # and to load the session again: dill.load_session(filename)
fuente
TypeError: no default __reduce__ due to non-trivial __cinit__
Una forma muy sencilla que podría satisfacer sus necesidades. Para mí, funcionó bastante bien:
Simplemente, haga clic en este icono en el Explorador de variables (lado derecho de Spider):
Guardar todas las variables en formato * .spydata
Cargando todas las variables o fotos, etc.
fuente
Aquí hay una forma de guardar las variables del espacio de trabajo de Spyder usando las funciones de spyderlib
#%% Load data from .spydata file from spyderlib.utils.iofuncs import load_dictionary globals().update(load_dictionary(fpath)[0]) data = load_dictionary(fpath) #%% Save data to .spydata file from spyderlib.utils.iofuncs import save_dictionary def variablesfilter(d): from spyderlib.widgets.dicteditorutils import globalsfilter from spyderlib.plugins.variableexplorer import VariableExplorer from spyderlib.baseconfig import get_conf_path, get_supported_types data = globals() settings = VariableExplorer.get_settings() get_supported_types() data = globalsfilter(data, check_all=True, filters=tuple(get_supported_types()['picklable']), exclude_private=settings['exclude_private'], exclude_uppercase=settings['exclude_uppercase'], exclude_capitalized=settings['exclude_capitalized'], exclude_unsupported=settings['exclude_unsupported'], excluded_names=settings['excluded_names']+['settings','In']) return data def saveglobals(filename): data = globalsfiltered() save_dictionary(data,filename) #%% savepath = 'test.spydata' saveglobals(savepath)
Déjame saber si te funciona. David BH
fuente
Lo que está intentando hacer es hibernar su proceso. Esto ya se discutió . La conclusión es que existen varios problemas difíciles de resolver al intentar hacerlo. Por ejemplo, con la restauración de descriptores de archivos abiertos.
Es mejor pensar en el subsistema de serialización / deserialización de su programa. No es trivial en muchos casos, pero es una solución mucho mejor en una perspectiva a largo plazo.
Aunque si he exagerado el problema. Puede intentar encurtir su dict de variables globales . Úselo
globals()
para acceder al diccionario. Dado que está indexado por varname, no debe preocuparse por el pedido.fuente
Si desea que la respuesta aceptada se resuma para que funcione, puede usar:
import shelve def save_workspace(filename, names_of_spaces_to_save, dict_of_values_to_save): ''' filename = location to save workspace. names_of_spaces_to_save = use dir() from parent to save all variables in previous scope. -dir() = return the list of names in the current local scope dict_of_values_to_save = use globals() or locals() to save all variables. -globals() = Return a dictionary representing the current global symbol table. This is always the dictionary of the current module (inside a function or method, this is the module where it is defined, not the module from which it is called). -locals() = Update and return a dictionary representing the current local symbol table. Free variables are returned by locals() when it is called in function blocks, but not in class blocks. Example of globals and dir(): >>> x = 3 #note variable value and name bellow >>> globals() {'__builtins__': <module '__builtin__' (built-in)>, '__name__': '__main__', 'x': 3, '__doc__': None, '__package__': None} >>> dir() ['__builtins__', '__doc__', '__name__', '__package__', 'x'] ''' print 'save_workspace' print 'C_hat_bests' in names_of_spaces_to_save print dict_of_values_to_save my_shelf = shelve.open(filename,'n') # 'n' for new for key in names_of_spaces_to_save: try: my_shelf[key] = dict_of_values_to_save[key] except TypeError: # # __builtins__, my_shelf, and imported modules can not be shelved. # #print('ERROR shelving: {0}'.format(key)) pass my_shelf.close() def load_workspace(filename, parent_globals): ''' filename = location to load workspace. parent_globals use globals() to load the workspace saved in filename to current scope. ''' my_shelf = shelve.open(filename) for key in my_shelf: parent_globals[key]=my_shelf[key] my_shelf.close() an example script of using this: import my_pkg as mp x = 3 mp.save_workspace('a', dir(), globals())
para obtener / cargar el espacio de trabajo:
import my_pkg as mp x=1 mp.load_workspace('a', globals()) print x #print 3 for me
funcionó cuando lo ejecuté. Admitiré que no entiendo
dir()
y alglobals()
100%, así que no estoy seguro de si podría haber alguna advertencia extraña, pero hasta ahora parece funcionar. Los comentarios son bienvenidos :)después de investigar un poco más, si llama
save_workspace
como sugerí con globales ysave_workspace
está dentro de una función, no funcionará como se esperaba si desea guardar los verificables en un ámbito local. Para ese usolocals()
. Esto sucede porque globals toma los globales del módulo donde se define la función, no desde donde se llama, supongo.fuente
Puede guardarlo como un archivo de texto o un archivo CVS. La gente usa Spyder, por ejemplo, para guardar variables, pero tiene un problema conocido: para tipos de datos específicos, no se puede importar en el camino.
fuente