Aluxio
| Autor(es) original(es) | Li Haoyuan |
|---|---|
| Desarrollador(es) | Laboratorio AMP de la Universidad de California en Berkeley |
| Lanzamiento inicial | 8 de abril de 2013; hace 11 años (2013-04-08) |
| Versión estable | v2.9.3 / 24 de marzo de 2023 [1] ( 24-03-2023 ) |
| Repositorio | https://github.com/Alluxio/alluxio |
| Escrito en | Java |
| Sistema operativo | MacOS , Linux |
| Disponible en | Java |
| Licencia | Licencia Apache 2.0 |
| Sitio web | www.alluxio.io |
Alluxio es un sistema de archivos distribuido virtual (VDFS) de código abierto . Inicialmente, Alluxio fue creado como proyecto de investigación "Tachyon" en el AMPLab de la Universidad de California, Berkeley, como tesis doctoral de Haoyuan Li , [2] asesorada por el profesor Scott Shenker y el profesor Ion Stoica . Alluxio se ubica entre la computación y el almacenamiento en la pila de análisis de big data . Proporciona una capa de abstracción de datos para marcos de computación, lo que permite que las aplicaciones se conecten a numerosos sistemas de almacenamiento a través de una interfaz común. El software se publica bajo la licencia Apache .
Las aplicaciones basadas en datos, como análisis de datos, aprendizaje automático e inteligencia artificial, utilizan API (como Hadoop HDFS API, S3 API, FUSE API) proporcionadas por Alluxio para interactuar con datos de varios sistemas de almacenamiento a gran velocidad. Los marcos populares que se ejecutan sobre Alluxio incluyen Apache Spark , Presto , TensorFlow , Trino , Apache Hive y PyTorch , etc.
Alluxio se puede implementar en las instalaciones, en la nube (por ejemplo, Microsoft Azure , AWS , Google Compute Engine ) o en un entorno de nube híbrido. Puede ejecutarse en hardware físico o en entornos en contenedores como Kubernetes , Docker o Apache Mesos .
Historia
Alluxio fue iniciado inicialmente por Haoyuan Li en el AMPLab de UC Berkeley en 2013, y se convirtió en código abierto en 2014. Alluxio tuvo más de 1000 colaboradores en 2018, [3] lo que lo convierte en uno de los proyectos más activos en el ecosistema de datos.
| Versión | Fecha de lanzamiento original | Última versión | Fecha de lanzamiento |
|---|---|---|---|
| Versión antigua, ya no se mantiene:0,2 | 08-04-2013 | 0.2.1 | 25 de abril de 2013 |
| Versión antigua, ya no se mantiene:0.3 | 21 de octubre de 2013 | 0.3.0 | 21 de octubre de 2013 |
| Versión antigua, ya no se mantiene:0,4 | 02-02-2014 | 0.4.1 | 25 de febrero de 2014 |
| Versión antigua, ya no se mantiene:0,5 | 20 de julio de 2014 | 0.5.0 | 20 de julio de 2014 |
| Versión antigua, ya no se mantiene:0.6 | 01-03-2015 | 0.6.4 | 23 de abril de 2015 |
| Versión antigua, ya no se mantiene:0,7 | 17 de julio de 2015 | 0.7.1 | 10 de agosto de 2015 |
| Versión antigua, ya no se mantiene:0,8 | 21 de octubre de 2015 | 0.8.2 | 10 de noviembre de 2015 |
| Versión antigua, ya no se mantiene:1.0 | 23 de febrero de 2016 | 1.0.1 | 27-03-2016 |
| Versión antigua, ya no se mantiene:1.1 | 06-06-2016 | 1.1.1 | 04-07-2016 |
| Versión antigua, ya no se mantiene:1.2 | 17 de julio de 2016 | 1.2.0 | 17 de julio de 2016 |
| Versión antigua, ya no se mantiene:1.3 | 5 de octubre de 2016 | 1.3.0 | 5 de octubre de 2016 |
| Versión antigua, ya no se mantiene:1.4 | 12 de enero de 2017 | 1.4.0 | 12 de enero de 2017 |
| Versión antigua, ya no se mantiene:1.5 | 11 de junio de 2017 | 1.5.0 | 11 de junio de 2017 |
| Versión antigua, ya no se mantiene:1.6 | 24 de septiembre de 2017 | 1.6.1 | 2 de noviembre de 2017 |
| Versión antigua, ya no se mantiene:1.7 | 14 de enero de 2018 | 1.7.1 | 26-03-2018 |
| Versión antigua, pero aún mantenida:1.8 | 07-07-2018 | 1.8.2 | 5 de agosto de 2019 |
| Versión antigua, pero aún mantenida:2.0 | 27 de junio de 2019 | 2.0.1 | 03-09-2019 |
| Versión antigua, pero aún mantenida:2.1 | 6 de noviembre de 2019 | 2.1.2 | 04-02-2020 |
| Versión antigua, pero aún mantenida:2.2 | 11-03-2020 | 2.2.2 | 24 de junio de 2020 |
| Versión antigua, pero aún mantenida:2.3 | 30 de junio de 2020 | 2.3.0 | 30 de junio de 2020 |
| Versión antigua, pero aún mantenida:2.4 | 19 de octubre de 2020 | 2.4.1 | 20 de noviembre de 2020 |
| Versión antigua, pero aún mantenida:2.5 | 10-03-2021 | 2.5.0 | 10-03-2021 |
| Versión antigua, pero aún mantenida:2.6 | 23 de junio de 2021 | 2.6.2 | 17 de septiembre de 2021 |
| Versión antigua, pero aún mantenida:2.7 | 16 de noviembre de 2021 | 2.7.4 | 19 de abril de 2022 |
| Versión antigua, pero aún mantenida:2.8 | 04-05-2022 | 2.8.1 | 17 de agosto de 2022 |
| Versión estable actual: 2.9 | 16 de noviembre de 2022 | 2.9.3 | 27-03-2023 |
Leyenda: Versión antigua, sin mantenimiento Versión antigua, aún mantenida Última versión Última versión preliminar Lanzamiento futuro | |||
Empresas que utilizan Alluxio
La siguiente es una lista de empresas notables que han utilizado o están utilizando Alluxio:
- Baidu [4]
- Barclays [5]
- China Unicom [6]
- Comcast [7]
- Loco [8]
- DiDi Chuxing [9]
- Banco DBS [10]
- Esri [11]
- Huawei [12]
- IBM [13]
- Inteligencia [14]
- JD.com [15]
- Lenovo [16]
- Samsung [17]
- Tencent [18]
- Tienda VIP [19]
- Wells Fargo [20]
Véase también
- Sistema de archivos en clúster
- Comparación de sistemas de archivos distribuidos
- Espacio de nombres global
- Lista de sistemas de archivos
Referencias
- ^ "Lanzamientos · Alluxio/alluxio". github.com . Consultado el 4 de marzo de 2023 .
- ^ Li, Haoyuan (7 de mayo de 2018). Alluxio: un sistema de archivos distribuido virtual (informe técnico). Departamento de EECS, Universidad de California, Berkeley. UCB/EECS-2018-29.
- ^ Actividad de desarrollo de Open HUB Alluxio
- ^ "Este nuevo proyecto de código abierto es 100 veces más rápido que Spark SQL en producción a escala de petabytes".
- ^ "Hacer posible lo imposible con Tachyon: acelerar los trabajos de Spark de horas a segundos".
- ^ "La gran apuesta de China Unicom por el código abierto".
- ^ "Operacionalización del aprendizaje automático: gestión de la procedencia desde datos sin procesar hasta predicciones".
- ^ "Cray Analytics y Alluxio: cómo gestionar el almacenamiento empresarial". Archivado desde el original el 14 de julio de 2019. Consultado el 19 de febrero de 2019 .
- ^ "Uso y práctica de Alluxio en Didi".
- ^ "Transformación de datos en los servicios financieros".
- ^ "ArcGIS y Alluxio: uso de Alluxio para mejorar la capacidad de datos de ArcGIS y obtener información más rápida de todos sus datos".
- ^ "Huawei abraza al Alluxio de código abierto: gracias por los recuerdos". The Register .
- ^ "Cómo Alluxio acelera las cargas de trabajo de Apache Spark". Archivado desde el original el 14 de julio de 2019. Consultado el 19 de febrero de 2019 .
- ^ "Introducción a Tachyon por casos de uso".
- ^ "Uso de Alluxio como un componente de optimización conectable y tolerante a fallos de los marcos computacionales de JD.com".
- ^ "El mayor fabricante de computadoras del mundo, Lenovo, selecciona Alluxio para la gestión de datos de teléfonos inteligentes en todo el mundo".
- ^ "Mejorando el valor de Alluxio con SSD NVMe de Samsung".
- ^ "Tencent ofrece noticias personalizadas a más de 100 millones de usuarios por mes con Alluxio".
- ^ "La práctica de Alluxio en la plataforma de datos casi en tiempo real en VIPShop".
- ^ "Dando vida a los datos: técnicas de gestión y visualización de datos".
Enlaces externos
- www.alluxio.io
