Наши разработчики радикально расширили эмоциональный диапазон Алисы. Теперь она может увлечённо слушать, сопереживать, радоваться и даже ругаться (но мы попросили её этого не делать).
Ребята рассказали, почему в этой задаче нельзя просто дать модели больше данных, а приходится модернизировать архитектуру. Дело в том, что у нейронной сети нет человеческой интуиции и понимания важности оттенка речи. Поэтому информацию о новых эмоциях она воспринимает как менее значимую, чем, например, параметры реверберации звука.
🔳Какую архитектуру в итоге выбрали и почему, как выглядят схемы модели синтеза до и после модернизации нейросети и дизайна функции потерь, а ещё аудиопримеры голоса — ищите в статье на Хабре.
⚪️ Эта история будет интересна инженерам, которые занимаются синтезом речи или созданием архитектуры обучения LLM. А ещё всем, кто следит за развитием звуковых нейросетей.
Наши разработчики радикально расширили эмоциональный диапазон Алисы. Теперь она может увлечённо слушать, сопереживать, радоваться и даже ругаться (но мы попросили её этого не делать).
Ребята рассказали, почему в этой задаче нельзя просто дать модели больше данных, а приходится модернизировать архитектуру. Дело в том, что у нейронной сети нет человеческой интуиции и понимания важности оттенка речи. Поэтому информацию о новых эмоциях она воспринимает как менее значимую, чем, например, параметры реверберации звука.
🔳Какую архитектуру в итоге выбрали и почему, как выглядят схемы модели синтеза до и после модернизации нейросети и дизайна функции потерь, а ещё аудиопримеры голоса — ищите в статье на Хабре.
⚪️ Эта история будет интересна инженерам, которые занимаются синтезом речи или созданием архитектуры обучения LLM. А ещё всем, кто следит за развитием звуковых нейросетей.
Again, in contrast to Facebook, Google and Twitter, Telegram's founder Pavel Durov runs his company in relative secrecy from Dubai. Soloviev also promoted the channel in a post he shared on his own Telegram, which has 580,000 followers. The post recommended his viewers subscribe to "War on Fakes" in a time of fake news. Individual messages can be fully encrypted. But the user has to turn on that function. It's not automatic, as it is on Signal and WhatsApp. Two days after Russia invaded Ukraine, an account on the Telegram messaging platform posing as President Volodymyr Zelenskiy urged his armed forces to surrender. He floated the idea of restricting the use of Telegram in Ukraine and Russia, a suggestion that was met with fierce opposition from users. Shortly after, Durov backed off the idea.
from de
