Вышел релиз платформы Apache Hadoop 3.0
Hadoop включает в себя распределенную файловую систему Hadoop Distributed Filesystem (HDFS), которая оптимизирована для MapReduce-приложений и обеспечивает автоматизированное резервирование данных.
Перечень изменений в новом релизе:
Предварительная поддержка новой версии YARN Timeline Service;
- В HDFS теперь производятся коррекции ошибок, используя код избыточности и позволяя повысить надежность хранения данных;
- Появилась возможность добавления в YARN ресурсов (диски, процессор);
- Поддержка объединения субкластеров HDFS и YARN;
- Улучшение функциональности и производительности при работе с Microsoft Azure Data Lake, Amazon S3 (S3Guard), Aliyun Object Storage System.