Intentaré explicaros un 'expediente X' de esos que ya tengo resueltos, pero de los que no tengo una explicación al 100% del comportamiento que tenía el pfSense ante el problema. La conclusión es que el pfSense descartaba paquetes por tener demasiadas conexiones concurrentes, pero al ser conexiones UDP costaba identificarlas. El problema es que de forma completamente misteriosa el pfSense descartaba los primeros X paquetes hacia cualquier IP. Este número indeterminado podía ser desde 2, 3 o 4 paquetes hasta 100 o 200. O sea, que había momentos en los que daba la sensación de que se había perdido el enlace. Como peculiaridad de la configuración del firewall (pfSense) comentar que la tarjeta WAN estaba en modo bridge con la tarjeta de servidores de internet. O sea, que la DMZ recibe el tráfico de las IPs públicas que allí hay filtrado a través de un bridge de estas dos tarjetas de red que he comentado.
Ejemplo, de la pérdida de paquetes que comentaba. Ping realizado a una IP de internet (la de oriol.joor.net) desde el propio firewall. Realmente eso de operation not permitted me tuvo muy y muy desconcertado.
# ping 80.35.31.228
PING 80.35.31.228 (80.35.31.228): 56 data bytes
ping: sendto: Operation not permitted
ping: sendto: Operation not permitted
ping: sendto: Operation not permitted
ping: sendto: Operation not permitted
ping: sendto: Operation not permitted
ping: sendto: Operation not permitted
ping: sendto: Operation not permitted
ping: sendto: Operation not permitted
ping: sendto: Operation not permitted
64 bytes from 80.35.31.228: icmp_seq=9 ttl=57 time=117.668 ms
64 bytes from 80.35.31.228: icmp_seq=10 ttl=57 time=86.728 ms
Desde cualquiera de las otras patas del firewall se sufría el mismo efecto, incluso si se hacían los pings hacia la LAN. La solución tardé casi 48h en encontrarla, era una locura. Ya que al final para localizar el problema aislamos el firewall de internet y el fenómeno dejó de ocurrir. O sea, ya nunca pasaba eso de operation not permitted por mucho tráfico que inyectásemos en el firewall, no pasaba. Así pues, gracias a una muy buena idea del Manu cerramos todo el tráfico desde internet y fuimos abriendo servicios hacia la DMZ, uno por uno. Hasta que descubrí que el servicio de NTP (123/upd) era el que provocaba este extraño efecto en el pfSense.
Después de varias pruebas la conclusión, es que había demasiadas conexiones concurrentes contra el servicio que comento. Así pues, actualmente lo que he hecho es filtrar el número de conexiones que permito contra ese puerto:
pfsense.png
Estas opciones las podéis encontrar editando la Rule, concretamente en la sección donde pone Advaced Options. Como podéis ver podéis dejar bien limitado qué conexiones y cuáles no dejáis pasar hacia un servicio.
Quizás lo más importante que he aprendido de esta historia es no montar nunca un firewall que no cumpla la regla de oro: by default block all. O sea, cerradlo siempre todo y ya iréis abriendo a medida que haga falta. Pero a veces por querer ser un poco más transigente lo hacemos al revés y al final eso se acaba pagando, como en este caso. A mí ya no me volverá a pasar, espero que a vosotros tampoco.