Вышел новый выпуск Hadoop с улучшениями, включая поддержку кодирования HDFS Erasure, предварительную версию v2 службы временной шкалы YARN и улучшения федерации YARN / HDFS.
Read more «Hadoop 3 добавляет кодирование стирания HDFS»Рубрика: Большие данные
Apache Bigtop добавляет поддержку OpenJDK 8
Apache выпустил Bigtop 1.2.1 с поддержкой OpenJDK 8 и новую функцию песочницы, которая позволяет запускать псевдокластеры больших данных в Docker. Bigtop — это проект Apache Foundation, который можно использовать для упаковки, тестирования и настройки широко известных компонентов больших данных с открытым исходным кодом, составляющих инфраструктуру Hadoop.
Hadoop 2.9 добавляет оценщик ресурсов
Apache выпустил Hadoop 2.9 с новыми функциями, включая федерацию YARN, федерацию на основе маршрутизатора HDFS и средство оценки ресурсов.
Spark получает библиотеку NLP
Для Apache Spark есть новая библиотека обработки естественного языка, которая расширяет логику машинного обучения Spark, предоставляя аннотации NLP для конвейеров машинного обучения, которые масштабируются в распределенной среде.
Apache PredictionIO достигает статуса верхнего уровня
PredictionIO — это платформа машинного обучения с открытым исходным кодом, которая в основном поддерживается Salesforce. Пожертвованный Apache прошлым летом, он вышел из инкубатора Apache и стал проектом верхнего уровня, что сделало его более общедоступным.
Read more «Apache PredictionIO достигает статуса верхнего уровня»
Улучшения машинного обучения Azure
На этой неделе в Microsoft Ignite были запущены три новых направления машинного обучения Azure (AML). Также было объявлено об интеграции AML с Excel, в результате чего функции AI будут добавлены в электронные таблицы.
Быстрые данные требуют новых фреймворков
Согласно отчету Lightbend, представленному на сегодняшней конференции Strata Data Conference в Нью-Йорке, разработчики внедряют новые структуры потоковых данных и обращаются к микросервисам, чтобы удовлетворить потребность в более быстром использовании данных.
Сравнение Kafka с RabbitMQ
Исследователи из Nokia Bell Labs проанализировали относительные достоинства Apache Kafka и RabbitMQ, двух систем публикации / подписки с открытым исходным кодом и коммерческой поддержкой, чтобы сравнить их.
Звезды лгут — рейтинги приложений конфликтуют
Это не ограничивается только рейтингами приложений. Как часто вы видите низкий рейтинг, а затем читаете обзор только для того, чтобы обнаружить противоречие между тем, что было сказано, и количеством присвоенных звезд? Что происходит? Неужели пользователи просто логически несовместимые существа? Конечно, есть!
В Apache Hive добавлена поддержка операций над наборами
Вышел новый выпуск Apache Hive с новыми функциями, включая поддержку операций Set и обработчика хранилища JDBC.
Read more «В Apache Hive добавлена поддержка операций над наборами»