Reddit open source: aplicaciones que destaco...

Traducción del original en catalán. Léela en: CatalàEnglish

reddit logo

Esta mañana Alfredo me ha informado de que

reddit

ha

abierto su código

. Pues bien, después de mirarme cada uno de los componentes que ha explicado que está usando no he tardado nada en pasarme por cada una de las páginas web de las aplicaciones para mirarme a ver qué tal. A continuación os hago una lista de lo que más destaco, obviamente son las aplicaciones más inusuales y menos conocidas.

  • HAProxy: es una aplicación muy parecida a Pound, su finalidad es balancear las peticiones HTTP entre diferentes servidores. Aunque son aplicaciones similares Pound y HAProxy pueden trabajar de forma combinada. Digamos que HAProxy está mucho más orientado a grandes infraestructuras y Pound es para entornos de carga media. Lo bueno es que podemos usar HAProxy y detrás usar Pound para hacer redirecciones más refinadas en función de la URL o ciertos parámetros de las HTTP headers. También se diferencian básicamente en el tratamiento que hacen de los paquetes HTTPs, lo cual también invita a trabajar con las dos herramientas a la vez. Ya que podríamos montar un sistema para escalar peticiones HTTPs de forma segura y simple.
  • Slony-l:es un sistema de replicación master-slave que soporta trabajar en cascada y con failover. Además está pensado para trabajar con bases de datos grandes. Básicamente usado por el PostgreSQL que usa reddit, eso les permite tener muchos servidores de bases de datos de lectura que son las peticiones que básicamente tienen a la base de datos.
  • Pylons: se trata de un framework MVC que usa Python, es realmente ligero y combina ideas del mundo Ruby, Python y Perl. Quizá una de las cosas que más sorprende es que los proyectos de Pylons no requieran servidor web si no se quiere, ya que ellos mismos ya implementan uno con Python, además de tener un instalador del proyecto que creamos solo por el mero hecho de crear el proyecto. Si ya controláis algún tipo de MVC y estáis un poco familiarizados con la sintaxis de Python podéis ver el screencast: Special Edition Screencast: Pylons with Tesla. Con este screencast os podréis hacer una muy buena idea de cómo funciona este MVC y de su potencia. Hay que reconocer que promete mucho, no os perdáis el sistema de debug, realmente me ha gustado muchísimo, pensaba que el debug de Symfony era bueno, pero este todavía lo supera.
  • Slor: se trata de un servidor de indexación de información web implementado sobre Tomcat y que ofrece servicios de consulta vía JSON y otros sistemas webservice que simplifican muchísimo su integración con otras arquitecturas. Además dispone de una lista de funcionalidades muy atractivas.
  • Daemontools: una herramienta realmente sencilla y potente, básicamente solo sirve para lanzar procesos como demonios o directamente demonios en sí mismos. Lo bueno es que controla estos demonios para, si estos caen, volverlos a levantar. La verdad es que a pesar de ser un poco más grande diría que es mejor monit. Aunque hay que decir que se tarda mucho menos en montar monit que no daemontools y como la gente de reddit ya usan Ganglia como sistema de monitorización no se han complicado con el monit.

Hay que reconocer que han hecho muy buenas elecciones esta colla, además se ha demostrado que son realmente escalables y que su disponibilidad es envidiable. Un buen ejemplo de cómo hacer las cosas bien y sencillas desde el principio. La gente de twitter podrían tomar buena nota. Si os hace ilusión uno de estos días os explicaré mis ideas de cómo hacer que twitter sea muy escalable y no se hunda con los 2M de usuarios que tiene diariamente, lo cual no me parece ninguna exageración, con un buen diseño detrás seguro que en

Pau

sufre mucho más con sus millones de megas a indexar diariamente.

3 comentarios

Los comentarios del blog antiguo, tal como se escribieron. Los comentarios están cerrados.

  1. Pau

    Nano ja et dic jo que els de twitter han de patir una mica més :/

    Per cert HAProxy pot estar molt bé pero com a codi sap greu dir que es una veritable xapussa, molt millor Pound. Code nice code :/

  2. Oriol Rius

    et proposo fer un livePodcast i et comento la meva idea de disseny per tal de solucionar el problema de twitter a veure què et sembla.

    Quan quedem?

  3. mTorres

    Buf quan he llegit tot el que usen a can Reddit, immediatament t'he imaginat enimg d'una de les reunions que devien tenir els seus tècincs. Discutint quina seria la millor eina a elegir, provant les diverses opcions, estaries a la teva salsa!

    Per cert interessant article, ara necessitaré temps per fotra-li un cop d'ull a totes aquestes tecnologies!