🚀 Представлен Apache Spark 4.0 — крупнейший релиз с момента запуска Spark 2.0
Databricks анонсировали Spark 4.0 с множеством фундаментальных улучшений производительности и архитектуры.
Новый релиз фокусируется на ускорении обработки, поддержке GenAI-нагрузок и расширенной масштабируемости. 🔥 Что нового:
• 💡Project Tungsten++, Catalyst++ — переработка движка исполнения и оптимизации запросов • 🧠Поддержка генеративных AI-запросов — Spark теперь эффективнее работает с LLM-нагрузками • ⚙️Новый Execution Engine — более 2× ускорение в среднем, до 10× в некоторых кейсах • 📦Модульная архитектура — теперь ядро Spark отделено от MLlib, GraphX и др. • 🌐Поддержка нового Shuffle-движка и улучшенное распределение по кластерам • 🧪Обратная несовместимость — Spark 4.0 требует миграции, особенно для UDF и кастомных оптимизаций
🚀 Представлен Apache Spark 4.0 — крупнейший релиз с момента запуска Spark 2.0
Databricks анонсировали Spark 4.0 с множеством фундаментальных улучшений производительности и архитектуры.
Новый релиз фокусируется на ускорении обработки, поддержке GenAI-нагрузок и расширенной масштабируемости. 🔥 Что нового:
• 💡Project Tungsten++, Catalyst++ — переработка движка исполнения и оптимизации запросов • 🧠Поддержка генеративных AI-запросов — Spark теперь эффективнее работает с LLM-нагрузками • ⚙️Новый Execution Engine — более 2× ускорение в среднем, до 10× в некоторых кейсах • 📦Модульная архитектура — теперь ядро Spark отделено от MLlib, GraphX и др. • 🌐Поддержка нового Shuffle-движка и улучшенное распределение по кластерам • 🧪Обратная несовместимость — Spark 4.0 требует миграции, особенно для UDF и кастомных оптимизаций
Lastly, the web previews of t.me links have been given a new look, adding chat backgrounds and design elements from the fully-features Telegram Web client. Russians and Ukrainians are both prolific users of Telegram. They rely on the app for channels that act as newsfeeds, group chats (both public and private), and one-to-one communication. Since the Russian invasion of Ukraine, Telegram has remained an important lifeline for both Russians and Ukrainians, as a way of staying aware of the latest news and keeping in touch with loved ones. Telegram users are able to send files of any type up to 2GB each and access them from any device, with no limit on cloud storage, which has made downloading files more popular on the platform. Given the pro-privacy stance of the platform, it’s taken as a given that it’ll be used for a number of reasons, not all of them good. And Telegram has been attached to a fair few scandals related to terrorism, sexual exploitation and crime. Back in 2015, Vox described Telegram as “ISIS’ app of choice,” saying that the platform’s real use is the ability to use channels to distribute material to large groups at once. Telegram has acted to remove public channels affiliated with terrorism, but Pavel Durov reiterated that he had no business snooping on private conversations. Oleksandra Matviichuk, a Kyiv-based lawyer and head of the Center for Civil Liberties, called Durov’s position "very weak," and urged concrete improvements.
from it
