psutil libreria example python system cpu status ram

libreria - psutil python example



¿Cómo obtener el uso actual de CPU y RAM en Python? (12)

¿Cuál es su forma preferida de obtener el estado actual del sistema (CPU actual, RAM, espacio libre en disco, etc.) en Python? Puntos de bonificación para * nix y plataformas Windows.

Parece que hay algunas formas posibles de extraer eso de mi búsqueda:

  1. Usar una biblioteca como PSI (que actualmente no parece estar desarrollada activamente y no es compatible con múltiples plataformas) o algo así como pystatgrab (de nuevo, no hay actividad desde 2007 y no hay soporte para Windows)

  2. Uso de un código específico de la plataforma, como el uso de os.popen("ps") o similar para los sistemas * nix y MEMORYSTATUS en ctypes.windll.kernel32 (consulte esta receta en ActiveState ) para la plataforma Windows. Uno podría poner una clase de Python junto con todos esos fragmentos de código.

No es que esos métodos sean malos, ¿pero ya existe una forma multiplataforma bien soportada de hacer lo mismo?

"... el estado actual del sistema (CPU actual, RAM, espacio libre en disco, etc.)" Y "* nix y las plataformas Windows" puede ser una combinación difícil de lograr.

Los sistemas operativos son fundamentalmente diferentes en la forma en que administran estos recursos. De hecho, difieren en conceptos básicos como definir qué cuenta como sistema y qué cuenta como tiempo de aplicación.

"Espacio libre en disco"? ¿Qué cuenta como "espacio en disco?" Todas las particiones de todos los dispositivos? ¿Qué pasa con las particiones extranjeras en un entorno de arranque múltiple?

No creo que haya un consenso lo suficientemente claro entre Windows y * nix que lo haga posible. De hecho, puede que ni siquiera haya consenso entre los distintos sistemas operativos llamados Windows. ¿Existe una API de Windows única que funcione tanto para XP como para Vista?

A continuación los códigos, sin bibliotecas externas funcionaron para mí. He probado en Python 2.7.9

Uso de CPU

import os CPU_Pct=str(round(float(os.popen(''''''grep ''cpu '' /proc/stat | awk ''{usage=($2+$4)*100/($2+$4+$5)} END {print usage }'' '''''').readline()),2)) #print results print("CPU Usage = " + CPU_Pct)

Y Ram Usage, Total, Usado Y Gratis.

import os mem=str(os.popen(''free -t -m'').readlines()) """ Get a whole line of memory output, it will be something like below ['' total used free shared buffers cached/n'', ''Mem: 925 591 334 14 30 355/n'', ''-/+ buffers/cache: 205 719/n'', ''Swap: 99 0 99/n'', ''Total: 1025 591 434/n''] So, we need total memory, usage and free memory. We should find the index of capital T which is unique at this string """ T_ind=mem.index(''T'') """ Than, we can recreate the string with this information. After T we have, "Total: " which has 14 characters, so we can start from index of T +14 and last 4 characters are also not necessary. We can create a new sub-string using this information """ mem_G=mem[T_ind+14:-4] """ The result will be like 1025 603 422 we need to find first index of the first space, and we can start our substring from from 0 to this index number, this will give us the string of total memory """ S1_ind=mem_G.index('' '') mem_T=mem_G[0:S1_ind] """ Similarly we will create a new sub-string, which will start at the second value. The resulting string will be like 603 422 Again, we should find the index of first space and than the take the Used Memory and Free memory. """ mem_G1=mem_G[S1_ind+8:] S2_ind=mem_G1.index('' '') mem_U=mem_G1[0:S2_ind] mem_F=mem_G1[S2_ind+8:] print ''Summary = '' + mem_G print ''Total Memory = '' + mem_T +'' MB'' print ''Used Memory = '' + mem_U +'' MB'' print ''Free Memory = '' + mem_F +'' MB''

Basado en el código de uso de la CPU por @Hrabal, esto es lo que yo uso:

from subprocess import Popen, PIPE def get_cpu_usage(): '''''' Get CPU usage on Linux by reading /proc/stat '''''' sub = Popen((''grep'', ''cpu'', ''/proc/stat''), stdout=PIPE, stderr=PIPE) top_vals = [int(val) for val in sub.communicate()[0].split(''/n'')[0].split[1:5]] return (top_vals[0] + top_vals[2]) * 100. /(top_vals[0] + top_vals[2] + top_vals[3])

Elegimos utilizar la fuente de información habitual para esto porque pudimos encontrar fluctuaciones instantáneas en la memoria libre y sentimos que consultar la fuente de datos meminfo fue útil. Esto también nos ayudó a obtener algunos parámetros relacionados más que fueron analizados previamente.

Código

import os .... memory_usage = os.popen("cat /proc/meminfo").read()

Salida para referencia (eliminamos todas las nuevas líneas para un análisis más detallado)

MemTotal: 1014500 kB MemFree: 562680 kB MemAvailable: 646364 kB Buffers: 15144 kB en caché: 210720 kB SwapCached: 0 kB activo: 261476 kB inactivo: 128888 kB activo (anon): 167092 kB inactivo (anon): 20888 kB activo (archivo) : 94384 kB Inactivo (archivo): 108000 kB Unevictable: 3652 kB Mlocked: 3652 kB SwapTotal: 0 kB SwapFree: 0 kB Sucio: 0 kB Escritura: 0 kB AnonPages: 168160 kB Mapeado: 81352 kB Shmem: 21060 kB Slab: 342 kB Sbc SReclaimable: 18044 kB SUnreclaim: 16448 kB KernelStack: 2672 kB Parámetros de las personas: gPcaras de los campos de las partes de los animales: 507248 kB Committed_AS: 10385 kB Vmallpc: 0 kB AnonHugePages: 88064 kB CmaTotal: 0 kB CmaFree: 0 kB HugePages_Total: 0 HugePages_Free: 0 HugePages_Rsvd: 0 HugePages_Surp: 0 Hugepagesize: 2048 kB DirectMap4k: 43008 KB

Este script para el uso de la CPU:

import os def get_cpu_load(): """ Returns a list CPU Loads""" result = [] cmd = "WMIC CPU GET LoadPercentage " response = os.popen(cmd + '' 2>&1'',''r'').read().strip().split("/r/n") for load in response[1:]: result.append(int(load)) return result if __name__ == ''__main__'': print get_cpu_load()

Esto es algo que armé hace un tiempo, es solo ventanas, pero puede ayudarlo a obtener parte de lo que necesita hacer.

Derivado de: "para sys mem disponible" http://msdn2.microsoft.com/en-us/library/aa455130.aspx

"información de proceso individual y ejemplos de script en python" http://www.microsoft.com/technet/scriptcenter/scripts/default.mspx?mfr=true

NOTA: la interfaz / el proceso de WMI también está disponible para realizar tareas similares. No lo estoy utilizando aquí porque el método actual cubre mis necesidades, pero si algún día es necesario ampliarlo o mejorarlo, es posible que desee investigar las herramientas de WMI. .

WMI para python:

http://tgolden.sc.sabren.com/python/wmi.html

El código:

'''''' Monitor window processes derived from: >for sys available mem http://msdn2.microsoft.com/en-us/library/aa455130.aspx > individual process information and python script examples http://www.microsoft.com/technet/scriptcenter/scripts/default.mspx?mfr=true NOTE: the WMI interface/process is also available for performing similar tasks I''m not using it here because the current method covers my needs, but if someday it''s needed to extend or improve this module, then may want to investigate the WMI tools available. WMI for python: http://tgolden.sc.sabren.com/python/wmi.html '''''' __revision__ = 3 import win32com.client from ctypes import * from ctypes.wintypes import * import pythoncom import pywintypes import datetime class MEMORYSTATUS(Structure): _fields_ = [ (''dwLength'', DWORD), (''dwMemoryLoad'', DWORD), (''dwTotalPhys'', DWORD), (''dwAvailPhys'', DWORD), (''dwTotalPageFile'', DWORD), (''dwAvailPageFile'', DWORD), (''dwTotalVirtual'', DWORD), (''dwAvailVirtual'', DWORD), ] def winmem(): x = MEMORYSTATUS() # create the structure windll.kernel32.GlobalMemoryStatus(byref(x)) # from cytypes.wintypes return x class process_stats: ''''''process_stats is able to provide counters of (all?) the items available in perfmon. Refer to the self.supported_types keys for the currently supported ''Performance Objects'' To add logging support for other data you can derive the necessary data from perfmon: --------- perfmon can be run from windows ''run'' menu by entering ''perfmon'' and enter. Clicking on the ''+'' will open the ''add counters'' menu, From the ''Add Counters'' dialog, the ''Performance object'' is the self.support_types key. --> Where spaces are removed and symbols are entered as text (Ex. # == Number, % == Percent) For the items you wish to log add the proper attribute name in the list in the self.supported_types dictionary, keyed by the ''Performance Object'' name as mentioned above. --------- NOTE: The ''NETFramework_NETCLRMemory'' key does not seem to log dotnet 2.0 properly. Initially the python implementation was derived from: http://www.microsoft.com/technet/scriptcenter/scripts/default.mspx?mfr=true '''''' def __init__(self,process_name_list=[],perf_object_list=[],filter_list=[]): ''''''process_names_list == the list of all processes to log (if empty log all) perf_object_list == list of process counters to log filter_list == list of text to filter print_results == boolean, output to stdout '''''' pythoncom.CoInitialize() # Needed when run by the same process in a thread self.process_name_list = process_name_list self.perf_object_list = perf_object_list self.filter_list = filter_list self.win32_perf_base = ''Win32_PerfFormattedData_'' # Define new datatypes here! self.supported_types = { ''NETFramework_NETCLRMemory'': [ ''Name'', ''NumberTotalCommittedBytes'', ''NumberTotalReservedBytes'', ''NumberInducedGC'', ''NumberGen0Collections'', ''NumberGen1Collections'', ''NumberGen2Collections'', ''PromotedMemoryFromGen0'', ''PromotedMemoryFromGen1'', ''PercentTimeInGC'', ''LargeObjectHeapSize'' ], ''PerfProc_Process'': [ ''Name'', ''PrivateBytes'', ''ElapsedTime'', ''IDProcess'',# pid ''Caption'', ''CreatingProcessID'', ''Description'', ''IODataBytesPersec'', ''IODataOperationsPersec'', ''IOOtherBytesPersec'', ''IOOtherOperationsPersec'', ''IOReadBytesPersec'', ''IOReadOperationsPersec'', ''IOWriteBytesPersec'', ''IOWriteOperationsPersec'' ] } def get_pid_stats(self, pid): this_proc_dict = {} pythoncom.CoInitialize() # Needed when run by the same process in a thread if not self.perf_object_list: perf_object_list = self.supported_types.keys() for counter_type in perf_object_list: strComputer = "." objWMIService = win32com.client.Dispatch("WbemScripting.SWbemLocator") objSWbemServices = objWMIService.ConnectServer(strComputer,"root/cimv2") query_str = ''''''Select * from %s%s'''''' % (self.win32_perf_base,counter_type) colItems = objSWbemServices.ExecQuery(query_str) # "Select * from Win32_PerfFormattedData_PerfProc_Process")# changed from Win32_Thread if len(colItems) > 0: for objItem in colItems: if hasattr(objItem, ''IDProcess'') and pid == objItem.IDProcess: for attribute in self.supported_types[counter_type]: eval_str = ''objItem.%s'' % (attribute) this_proc_dict[attribute] = eval(eval_str) this_proc_dict[''TimeStamp''] = datetime.datetime.now().strftime(''%Y-%m-%d %H:%M:%S.'') + str(datetime.datetime.now().microsecond)[:3] break return this_proc_dict def get_stats(self): '''''' Show process stats for all processes in given list, if none given return all processes If filter list is defined return only the items that match or contained in the list Returns a list of result dictionaries '''''' pythoncom.CoInitialize() # Needed when run by the same process in a thread proc_results_list = [] if not self.perf_object_list: perf_object_list = self.supported_types.keys() for counter_type in perf_object_list: strComputer = "." objWMIService = win32com.client.Dispatch("WbemScripting.SWbemLocator") objSWbemServices = objWMIService.ConnectServer(strComputer,"root/cimv2") query_str = ''''''Select * from %s%s'''''' % (self.win32_perf_base,counter_type) colItems = objSWbemServices.ExecQuery(query_str) # "Select * from Win32_PerfFormattedData_PerfProc_Process")# changed from Win32_Thread try: if len(colItems) > 0: for objItem in colItems: found_flag = False this_proc_dict = {} if not self.process_name_list: found_flag = True else: # Check if process name is in the process name list, allow print if it is for proc_name in self.process_name_list: obj_name = objItem.Name if proc_name.lower() in obj_name.lower(): # will log if contains name found_flag = True break if found_flag: for attribute in self.supported_types[counter_type]: eval_str = ''objItem.%s'' % (attribute) this_proc_dict[attribute] = eval(eval_str) this_proc_dict[''TimeStamp''] = datetime.datetime.now().strftime(''%Y-%m-%d %H:%M:%S.'') + str(datetime.datetime.now().microsecond)[:3] proc_results_list.append(this_proc_dict) except pywintypes.com_error, err_msg: # Ignore and continue (proc_mem_logger calls this function once per second) continue return proc_results_list def get_sys_stats(): '''''' Returns a dictionary of the system stats'''''' pythoncom.CoInitialize() # Needed when run by the same process in a thread x = winmem() sys_dict = { ''dwAvailPhys'': x.dwAvailPhys, ''dwAvailVirtual'':x.dwAvailVirtual } return sys_dict if __name__ == ''__main__'': # This area used for testing only sys_dict = get_sys_stats() stats_processor = process_stats(process_name_list=[''process2watch''],perf_object_list=[],filter_list=[]) proc_results = stats_processor.get_stats() for result_dict in proc_results: print result_dict import os this_pid = os.getpid() this_proc_results = stats_processor.get_pid_stats(this_pid) print ''this proc results:'' print this_proc_results

http://monkut.webfactional.com/blog/archive/2009/1/21/windows-process-memory-logging-python

No creo que haya una biblioteca multiplataforma bien soportada disponible. Recuerde que Python está escrito en C, por lo que cualquier biblioteca simplemente tomará una decisión inteligente sobre qué fragmento de código específico del sistema operativo se ejecutará, como sugirió anteriormente.

Siento que estas respuestas se escribieron para Python 2 y, en cualquier caso, nadie mencionó el paquete de resource estándar que está disponible para Python 3. Proporciona comandos para obtener los límites de recursos de un proceso determinado (el proceso de Python de llamada por defecto). Esto no es lo mismo que obtener el uso actual de los recursos por parte del sistema en su conjunto, pero podría resolver algunos de los mismos problemas como, por ejemplo, "Quiero asegurarme de que solo use X mucha RAM con este script".

Una sola línea para el uso de RAM con solo dependencia de stdlib:

import os tot_m, used_m, free_m = map(int, os.popen(''free -t -m'').readlines()[-1].split()[1:])

Usa la librería psutil . Para mí en Ubuntu, pip instalado 0.4.3. Puedes verificar tu versión de psutil haciendo esto en Python:

from __future__ import print_function import psutil print(psutil.__versi‌​on__)

Para obtener algunas estadísticas de memoria y CPU:

from __future__ import print_function import psutil print(psutil.cpu_percent()) print(psutil.virtual_memory()) # physical memory usage

También me gusta hacer esto:

import os import psutil pid = os.getpid() py = psutil.Process(pid) memoryUse = py.memory_info()[0]/2.**30 # memory use in GB...I think print(''memory use:'', memoryUse)

lo que da el uso de memoria actual de su script de Python.

Hay algunos ejemplos más detallados en la página pypi para 4.3.0 y 0.5.0 .

Para Ubuntu 16 y 14, la instalación desde pip me dio la versión 4.3.0, que no tiene el método phymem_usage (). Para obtener 0.5.0, puede hacer la pip install psutil==0.5.0 , o 0.5.0 , luego

tar -xvzf psutil-0.5.0.tar.gz‌​ cd psutil-0.5.0 sudo python setup.py install

La biblioteca psutil le dará información del sistema (CPU / uso de memoria) en una variedad de plataformas:

psutil es un módulo que proporciona una interfaz para recuperar información sobre los procesos en ejecución y la utilización del sistema (CPU, memoria) de manera portátil mediante Python, implementando muchas funcionalidades ofrecidas por herramientas como ps, top y el administrador de tareas de Windows.

Actualmente es compatible con Linux, Windows, OSX, Sun Solaris, FreeBSD, OpenBSD y NetBSD, arquitecturas de 32 y 64 bits, con versiones de Python de 2.6 a 3.5 (los usuarios de Python 2.4 y 2.5 pueden usar la versión 2.1.3).