🚀 Представлен Apache Spark 4.0 — крупнейший релиз с момента запуска Spark 2.0
Databricks анонсировали Spark 4.0 с множеством фундаментальных улучшений производительности и архитектуры.
Новый релиз фокусируется на ускорении обработки, поддержке GenAI-нагрузок и расширенной масштабируемости. 🔥 Что нового:
• 💡Project Tungsten++, Catalyst++ — переработка движка исполнения и оптимизации запросов • 🧠Поддержка генеративных AI-запросов — Spark теперь эффективнее работает с LLM-нагрузками • ⚙️Новый Execution Engine — более 2× ускорение в среднем, до 10× в некоторых кейсах • 📦Модульная архитектура — теперь ядро Spark отделено от MLlib, GraphX и др. • 🌐Поддержка нового Shuffle-движка и улучшенное распределение по кластерам • 🧪Обратная несовместимость — Spark 4.0 требует миграции, особенно для UDF и кастомных оптимизаций
🚀 Представлен Apache Spark 4.0 — крупнейший релиз с момента запуска Spark 2.0
Databricks анонсировали Spark 4.0 с множеством фундаментальных улучшений производительности и архитектуры.
Новый релиз фокусируется на ускорении обработки, поддержке GenAI-нагрузок и расширенной масштабируемости. 🔥 Что нового:
• 💡Project Tungsten++, Catalyst++ — переработка движка исполнения и оптимизации запросов • 🧠Поддержка генеративных AI-запросов — Spark теперь эффективнее работает с LLM-нагрузками • ⚙️Новый Execution Engine — более 2× ускорение в среднем, до 10× в некоторых кейсах • 📦Модульная архитектура — теперь ядро Spark отделено от MLlib, GraphX и др. • 🌐Поддержка нового Shuffle-движка и улучшенное распределение по кластерам • 🧪Обратная несовместимость — Spark 4.0 требует миграции, особенно для UDF и кастомных оптимизаций
The next bit isn’t clear, but Durov reportedly claimed that his resignation, dated March 21st, was an April Fools’ prank. TechCrunch implies that it was a matter of principle, but it’s hard to be clear on the wheres, whos and whys. Similarly, on April 17th, the Moscow Times quoted Durov as saying that he quit the company after being pressured to reveal account details about Ukrainians protesting the then-president Viktor Yanukovych. The fake Zelenskiy account reached 20,000 followers on Telegram before it was shut down, a remedial action that experts say is all too rare. "He has kind of an old-school cyber-libertarian world view where technology is there to set you free," Maréchal said. He floated the idea of restricting the use of Telegram in Ukraine and Russia, a suggestion that was met with fierce opposition from users. Shortly after, Durov backed off the idea. Investors took profits on Friday while they could ahead of the weekend, explained Tom Essaye, founder of Sevens Report Research. Saturday and Sunday could easily bring unfortunate news on the war front—and traders would rather be able to sell any recent winnings at Friday’s earlier prices than wait for a potentially lower price at Monday’s open.
from jp
