Telegram Group & Telegram Channel
🤖 Дообучение больших языковых моделей для обнаружения уязвимостей

22 мая в 17:00 присоединяйтесь к научному семинару, где выступит Алексей Шестов (Sber AI Lab)!

На семинаре разберём публикацию в журнале IEEE Access по адаптации больших языковых моделей для поиска уязвимостей в коде:
▪️ поговорим об оптимальном режиме дообучения, выборе базовой модели, архитектуре
▪️ покажем, как ускорить дообучение для классификации в 13 раз с помощью батчей переменной длины без потери качества
▪️ обсудим сравнение с моделями на основе CodeBERT (относительный прирост - +5% ROC AUC и F1 на сбалансированных данных и +20% F1 — на несбалансированных)

Ждем ваши вопросы после выступления!

Подключайтесь по ссылке


#анонс
@sb_ai_lab
Please open Telegram to view this post
VIEW IN TELEGRAM



group-telegram.com/sb_ai_lab/141
Create:
Last Update:

🤖 Дообучение больших языковых моделей для обнаружения уязвимостей

22 мая в 17:00 присоединяйтесь к научному семинару, где выступит Алексей Шестов (Sber AI Lab)!

На семинаре разберём публикацию в журнале IEEE Access по адаптации больших языковых моделей для поиска уязвимостей в коде:
▪️ поговорим об оптимальном режиме дообучения, выборе базовой модели, архитектуре
▪️ покажем, как ускорить дообучение для классификации в 13 раз с помощью батчей переменной длины без потери качества
▪️ обсудим сравнение с моделями на основе CodeBERT (относительный прирост - +5% ROC AUC и F1 на сбалансированных данных и +20% F1 — на несбалансированных)

Ждем ваши вопросы после выступления!

Подключайтесь по ссылке


#анонс
@sb_ai_lab

BY ИИ Песочница | RnD про ML, AI, Data Science


Warning: Undefined variable $i in /var/www/group-telegram/post.php on line 260

Share with your friend now:
group-telegram.com/sb_ai_lab/141

View MORE
Open in Telegram


Telegram | DID YOU KNOW?

Date: |

"Someone posing as a Ukrainian citizen just joins the chat and starts spreading misinformation, or gathers data, like the location of shelters," Tsekhanovska said, noting how false messages have urged Ukrainians to turn off their phones at a specific time of night, citing cybersafety. Apparently upbeat developments in Russia's discussions with Ukraine helped at least temporarily send investors back into risk assets. Russian President Vladimir Putin said during a meeting with his Belarusian counterpart Alexander Lukashenko that there were "certain positive developments" occurring in the talks with Ukraine, according to a transcript of their meeting. Putin added that discussions were happening "almost on a daily basis." Stocks dropped on Friday afternoon, as gains made earlier in the day on hopes for diplomatic progress between Russia and Ukraine turned to losses. Technology stocks were hit particularly hard by higher bond yields. Overall, extreme levels of fear in the market seems to have morphed into something more resembling concern. For example, the Cboe Volatility Index fell from its 2022 peak of 36, which it hit Monday, to around 30 on Friday, a sign of easing tensions. Meanwhile, while the price of WTI crude oil slipped from Sunday’s multiyear high $130 of barrel to $109 a pop. Markets have been expecting heavy restrictions on Russian oil, some of which the U.S. has already imposed, and that would reduce the global supply and bring about even more burdensome inflation. The gold standard of encryption, known as end-to-end encryption, where only the sender and person who receives the message are able to see it, is available on Telegram only when the Secret Chat function is enabled. Voice and video calls are also completely encrypted.
from tw


Telegram ИИ Песочница | RnD про ML, AI, Data Science
FROM American