ver sintaxis resultados numero ejemplos ejemplo conexiones comando abiertas linux sockets tcp

sintaxis - ¿Hay un límite en el número de conexiones tcp/ip entre máquinas en Linux?



sintaxis de netstat (6)

¿Es su servidor de un solo hilo? Si es así, ¿qué función de sondeo / multiplexación está usando?

El uso de select () no funciona más allá del límite de descriptor de archivo máximo codificado de forma rígida establecido en tiempo de compilación, lo cual es inútil (normalmente 256 o algunos más).

poll () es mejor pero terminará con el problema de escalabilidad con una gran cantidad de FD repoblando el conjunto cada vez que se pasa el ciclo.

epoll () debería funcionar bien hasta algún otro límite que aciertes.

Las conexiones de 10k deberían ser lo suficientemente fáciles de lograr. Use un núcleo reciente (ish) 2.6.

¿Cuántas máquinas cliente usaste? ¿Estás seguro de que no alcanzaste el límite del lado del cliente?

Tengo un programa muy simple escrito en 5 minutos que abre un socket de corte y recorre la solicitud e imprime en la pantalla los bytes que se le envían.

Luego traté de comparar cuántas conexiones puedo usar para tratar de averiguar cuántos usuarios concurrentes puedo apoyar con este programa.

En otra máquina (donde la red entre ellos no está saturada) creé un programa simple que entra en un bucle y se conecta a la máquina del servidor y envía los bytes "hello world".

Cuando el ciclo es 1000-3000, el cliente finaliza con todas las solicitudes enviadas. Cuando el ciclo va más allá de 5000, comienza a tener tiempos de espera después de finalizar el primer número X de solicitudes. ¿Por qué es esto? Me he asegurado de cerrar mi socket en el bucle.

¿Puedes crear solo tantas conexiones dentro de un cierto período de tiempo?

¿Este límite solo es aplicable entre las mismas máquinas y no tengo que preocuparme por esto en la producción, donde más de 5000 solicitudes provienen de diferentes máquinas?

Cuando busca el máximo rendimiento, se encuentra con un montón de problemas y posibles cuellos de botella. Ejecutar una prueba simple de hello world no necesariamente los va a encontrar a todos.

Las posibles limitaciones incluyen:

  • Limitaciones del socket del kernel: busque /proc/sys/net para obtener una gran cantidad de ajustes del kernel.
  • límites de proceso: echa un vistazo a ulimit como otros han indicado aquí
  • a medida que su aplicación crezca en complejidad, puede que no tenga suficiente potencia de CPU para mantenerse al día con la cantidad de conexiones que entran. Use top para ver si su CPU está al máximo
  • ¿Número de hilos? No tengo experiencia con el enhebrado, pero esto puede entrar en juego junto con los artículos anteriores.

Hay un límite, sí. Ver ulimit .

También debe considerar el estado TIMED_WAIT . Una vez que se cierra un socket TCP (por defecto), el puerto permanece ocupado en estado TIMED_WAIT durante 2 minutos. Este valor es sintonizable Esto también "te sacará de las órbitas" aunque estén cerrados.

Ejecute netstat para ver las cosas TIMED_WAIT en acción.

PD El motivo de TIMED_WAIT es manejar el caso de los paquetes que llegan después de que se cierra el socket. Esto puede suceder porque los paquetes se retrasan o el otro lado simplemente no sabe que el socket ya se ha cerrado. Esto permite que el sistema operativo silencie esos paquetes sin posibilidad de "infectar" una conexión de socket diferente y no relacionada.

La respuesta rápida es 2 ^ 16 puertos TCP, 64K.

Los problemas con los límites impuestos por el sistema son un problema de configuración, ya mencionado en comentarios anteriores.

Las implicaciones internas para TCP no son tan claras (para mí). Cada puerto requiere memoria para su creación de instancias, va a una lista y necesita búferes de red para los datos en tránsito.

Dadas las sesiones TCP de 64K, la sobrecarga para las instancias de los puertos podría ser un problema en un kernel de 32 bits, pero no en un kernel de 64 bits (la corrección aquí se acepta gustosamente). El proceso de búsqueda con sesiones de 64K puede ralentizar un poco las cosas y cada paquete llega a las colas del temporizador, lo que también puede ser problemático. El almacenamiento de datos en tránsito puede, en teoría, aumentar al tamaño de ventana por puertos (tal vez 8 GByte).

El problema con la velocidad de conexión (mencionado anteriormente) es probablemente lo que está viendo. TCP generalmente toma tiempo para hacer cosas. Sin embargo, no es obligatorio. Se puede hacer una conexión TCP, realizar transacciones y desconectar de manera muy eficiente (verifique cómo se crean y cierran las sesiones TCP).

Hay sistemas que pasan decenas de gigabits por segundo, por lo que la escala de nivel de paquete debería estar bien.

Hay máquinas con mucha memoria física, por lo que se ve bien.

El rendimiento del sistema, si se configura cuidadosamente, debe estar bien.

El lado del servidor de las cosas debería escalar de una manera similar.

Me preocuparía cosas como el ancho de banda de la memoria.

Considere un experimento en el que inicie sesión en el host local 10.000 veces. Luego escribe un personaje. La pila completa a través del espacio de usuario se dedicaría a cada personaje. La huella activa probablemente excedería el tamaño del caché de datos. Correr a través de mucha memoria puede estresar el sistema VM. ¡El costo de los cambios de contexto podría acercarse un segundo!

Esto se discute en una variedad de otros hilos: https://serverfault.com/questions/69524/im-designing-a-system-to-handle-10000-tcp-connections-per-second-what-problems

Tal vez quieras echarle un vistazo a /etc/security/limits.conf