🤖Дообучение больших языковых моделей для обнаружения уязвимостей
22 мая в 17:00 присоединяйтесь к научному семинару, где выступит Алексей Шестов (Sber AI Lab)!
На семинаре разберём публикацию в журнале IEEE Access по адаптации больших языковых моделей для поиска уязвимостей в коде: ▪️ поговорим об оптимальном режиме дообучения, выборе базовой модели, архитектуре ▪️ покажем, как ускорить дообучение для классификации в 13 раз с помощью батчей переменной длины без потери качества ▪️ обсудим сравнение с моделями на основе CodeBERT (относительный прирост - +5% ROC AUC и F1 на сбалансированных данных и +20% F1 — на несбалансированных)
🤖Дообучение больших языковых моделей для обнаружения уязвимостей
22 мая в 17:00 присоединяйтесь к научному семинару, где выступит Алексей Шестов (Sber AI Lab)!
На семинаре разберём публикацию в журнале IEEE Access по адаптации больших языковых моделей для поиска уязвимостей в коде: ▪️ поговорим об оптимальном режиме дообучения, выборе базовой модели, архитектуре ▪️ покажем, как ускорить дообучение для классификации в 13 раз с помощью батчей переменной длины без потери качества ▪️ обсудим сравнение с моделями на основе CodeBERT (относительный прирост - +5% ROC AUC и F1 на сбалансированных данных и +20% F1 — на несбалансированных)
Founder Pavel Durov says tech is meant to set you free Right now the digital security needs of Russians and Ukrainians are very different, and they lead to very different caveats about how to mitigate the risks associated with using Telegram. For Ukrainians in Ukraine, whose physical safety is at risk because they are in a war zone, digital security is probably not their highest priority. They may value access to news and communication with their loved ones over making sure that all of their communications are encrypted in such a manner that they are indecipherable to Telegram, its employees, or governments with court orders. Telegram was founded in 2013 by two Russian brothers, Nikolai and Pavel Durov. Ukrainian forces successfully attacked Russian vehicles in the capital city of Kyiv thanks to a public tip made through the encrypted messaging app Telegram, Ukraine's top law-enforcement agency said on Tuesday. Telegram users are able to send files of any type up to 2GB each and access them from any device, with no limit on cloud storage, which has made downloading files more popular on the platform.
from sg