Сделали подкаст про автономные грузовики. Получилось интересно, приглашаю послушать)
Forwarded from Яндекс
This media is not supported in your browser
VIEW IN TELEGRAM
Подписывайтесь
Please open Telegram to view this post
VIEW IN TELEGRAM
Очень интересно, что сейчас происходит из-за DeepSeek r1. Для тех, кто не следил:
1. Чуваки смогли обучить LLM, которая почти не хуже, чем у OpenAI.
2. Сделали это в 20 раз дешевле и написали подробную статью как это сделали.
3. Сотрудники из фейсбука на форумах пишут чуть ли не о панике в руководстве, что так дешево можно делать такие модели.
4. Приложение DeepSeek в топе американского стора.
5. Акции крупных компаний падают на премаркете (насдак еще не открылся). Акции nvidia падают почти на 12% на премаркете.
С 2022 года после выхода ChatGPT это первое событие, которое вызвало такой бурный ажиотаж. Представьте, основные игроки в индустрии думают, что нужно очень много денег, анонсируют stargate на 500млрд$. И тут оказывается, что можно сделать то же самое в 20 раз дешевле.
Есть нюансы. Китайцы не могут нормально рассказывать про мощности. Потому что санкции. Поэтому есть некоторые риски, что сказали неправду и использовали больше мощностей.
Но лично я не думаю. Статья есть, нужен примерно квартал, чтобы ее повторили самые быстрые конкуренты. На код и эксперименты около месяца, плюс месяца два на обучение и все проверки. Думаю увидим подтверждение.
Ноу хау в том, что придумали как делать обучение с подкреплением по-другому.
Интересно, а ведь год только начался!
1. Чуваки смогли обучить LLM, которая почти не хуже, чем у OpenAI.
2. Сделали это в 20 раз дешевле и написали подробную статью как это сделали.
3. Сотрудники из фейсбука на форумах пишут чуть ли не о панике в руководстве, что так дешево можно делать такие модели.
4. Приложение DeepSeek в топе американского стора.
5. Акции крупных компаний падают на премаркете (насдак еще не открылся). Акции nvidia падают почти на 12% на премаркете.
С 2022 года после выхода ChatGPT это первое событие, которое вызвало такой бурный ажиотаж. Представьте, основные игроки в индустрии думают, что нужно очень много денег, анонсируют stargate на 500млрд$. И тут оказывается, что можно сделать то же самое в 20 раз дешевле.
Есть нюансы. Китайцы не могут нормально рассказывать про мощности. Потому что санкции. Поэтому есть некоторые риски, что сказали неправду и использовали больше мощностей.
Но лично я не думаю. Статья есть, нужен примерно квартал, чтобы ее повторили самые быстрые конкуренты. На код и эксперименты около месяца, плюс месяца два на обучение и все проверки. Думаю увидим подтверждение.
Ноу хау в том, что придумали как делать обучение с подкреплением по-другому.
Интересно, а ведь год только начался!
Роль интуиции в работе
Посмотрел подкаст с Яном Непомнящим (один из лучших шахматистов современности).
Очень зацепил момент про интуицию в шахматах: https://www.youtube.com/watch?v=T_QYOn7P-tA&t=2465s
Ян говорит, что вот бросаешь взгляд на доску и в голове сразу появляется какие-то 4 хода, которые нравятся. Сначала непонятно почему, потом начинаешь их анализировать. Если ты в хорошей кондиции, то в 9 случаях из 10 среди этих 4 ходов есть лучший ход, который возможно сделать на текущем шаге. Если кондиция не очень, то реже. Ян считает, что интуиция не просто так берется, а на основе большого опыта.
Рассуждения полностью верны и для работы руководителя. Нужно понимать, что интуиция всегда присутствует, люди не могут быть роботами. Даже если человек считает, что не ориентируется на интуицию, все равно какие-то решения ему нравятся больше, какие-то меньше.
Решения, которые приходится принимать руководителю, бывают тактические и стратегические.
Стратегические решения - это то, куда вообще идет вся команда в ближайший год и далее. Тут ошибка может быть фатальна. Даже 1 из 10. Но с другой стороны интуиция помогает сузить пространство возможных решений. В конечном итоге хорошая интуиция помогает с большей вероятностью двигаться правильно.
Тактические решения - это те решения, которые отвечают на вопрос "Что нужно делать прямо сейчас? Что нужно делать в ближашие два-три месяца?". В них ошибка в 1 случае из 10 - это незначительный риск. Последствия таковы, что некоторые вещи придется переделывать. Но с другой стороны на тактическом уровне медленное принятие решений - фатально на стратегическом уровне. Команда заболачивается, люди бесконечно спорят, боятся принять даже элементарные решения, думаю все это встречали.
Если интуиция работает хорошо, то ей можно пользоваться. Получится работу делать быстрее. Если интуиция работает плохо, то нельзя. Как понять работает ли интуиция хорошо? На самом деле это не очень сложно. На стратегическом уровне нужно в любом случае глубоко прорабатывать решения. Важно так же помнить про когнитивные искажения. Заниматься проработкой, а не рационализацией. В чем отличие? Рационализация - поиск аргументов "за". Проработка - поиск аргументов и "за" и "против". На тактическом уровне можно просто увидеть, что происходит. Делает ли команда то, что не нужно в 1 случае из 10, или чаще, или реже.
Итак, интуиция важна. И важно, чтобы она работала хорошо. Как ее развивать? Нельзя просто верить в интуицию, получится ерунда.
Чтобы развивать интуицию, на мой взгляд надо развивать три вещи: насмотренность, погруженность и подготовка. Расскажу подробнее про каждую вещь:
1. Насмотренность. Нужно понимать как делаются разные проекты. Может казаться, что зачем тратить время на то, чтобы погружаться в чужие проекты, в опыт других компаний или команд. Но если так тратить время, то начинаешь видеть параллели и со своим проектом. Начинаешь видеть похожее. Это помогает учиться на чужих ошибках. Нужно смотреть и стараться разобраться как все работает в вашей и смежных индустриях. Не в вашем проекте, а в других.
2. Погруженность. Надо глубоко понимать как и что делается в вашем проекте. У некоторых людей бытует мнение, что руководитель - это только про people management. Сроки, ресурсы, процессы. Но нет, таким образом решения принимать невозможно. Нужно знать детально, что делают ваши люди. В моменте может казаться, что спрашивать как что-то делается - трата времени. Но по факту погружение помогает более эффективно конфигурировать зоны ответственности. Помогает понимать, где команда идет не туда или где команда идет медленнее, чем могла бы.
3. Подготовка. К принятию решения надо готовиться. Подготовка от погруженности отличается тем, что погруженность - это про все подряд, подготовка - это про конкретное решение. Если не хватает знаний про то место, в котором нужно решение принять, надо погрузиться в это место, даже если времени мало.
Посмотрел подкаст с Яном Непомнящим (один из лучших шахматистов современности).
Очень зацепил момент про интуицию в шахматах: https://www.youtube.com/watch?v=T_QYOn7P-tA&t=2465s
Ян говорит, что вот бросаешь взгляд на доску и в голове сразу появляется какие-то 4 хода, которые нравятся. Сначала непонятно почему, потом начинаешь их анализировать. Если ты в хорошей кондиции, то в 9 случаях из 10 среди этих 4 ходов есть лучший ход, который возможно сделать на текущем шаге. Если кондиция не очень, то реже. Ян считает, что интуиция не просто так берется, а на основе большого опыта.
Рассуждения полностью верны и для работы руководителя. Нужно понимать, что интуиция всегда присутствует, люди не могут быть роботами. Даже если человек считает, что не ориентируется на интуицию, все равно какие-то решения ему нравятся больше, какие-то меньше.
Решения, которые приходится принимать руководителю, бывают тактические и стратегические.
Стратегические решения - это то, куда вообще идет вся команда в ближайший год и далее. Тут ошибка может быть фатальна. Даже 1 из 10. Но с другой стороны интуиция помогает сузить пространство возможных решений. В конечном итоге хорошая интуиция помогает с большей вероятностью двигаться правильно.
Тактические решения - это те решения, которые отвечают на вопрос "Что нужно делать прямо сейчас? Что нужно делать в ближашие два-три месяца?". В них ошибка в 1 случае из 10 - это незначительный риск. Последствия таковы, что некоторые вещи придется переделывать. Но с другой стороны на тактическом уровне медленное принятие решений - фатально на стратегическом уровне. Команда заболачивается, люди бесконечно спорят, боятся принять даже элементарные решения, думаю все это встречали.
Если интуиция работает хорошо, то ей можно пользоваться. Получится работу делать быстрее. Если интуиция работает плохо, то нельзя. Как понять работает ли интуиция хорошо? На самом деле это не очень сложно. На стратегическом уровне нужно в любом случае глубоко прорабатывать решения. Важно так же помнить про когнитивные искажения. Заниматься проработкой, а не рационализацией. В чем отличие? Рационализация - поиск аргументов "за". Проработка - поиск аргументов и "за" и "против". На тактическом уровне можно просто увидеть, что происходит. Делает ли команда то, что не нужно в 1 случае из 10, или чаще, или реже.
Итак, интуиция важна. И важно, чтобы она работала хорошо. Как ее развивать? Нельзя просто верить в интуицию, получится ерунда.
Чтобы развивать интуицию, на мой взгляд надо развивать три вещи: насмотренность, погруженность и подготовка. Расскажу подробнее про каждую вещь:
1. Насмотренность. Нужно понимать как делаются разные проекты. Может казаться, что зачем тратить время на то, чтобы погружаться в чужие проекты, в опыт других компаний или команд. Но если так тратить время, то начинаешь видеть параллели и со своим проектом. Начинаешь видеть похожее. Это помогает учиться на чужих ошибках. Нужно смотреть и стараться разобраться как все работает в вашей и смежных индустриях. Не в вашем проекте, а в других.
2. Погруженность. Надо глубоко понимать как и что делается в вашем проекте. У некоторых людей бытует мнение, что руководитель - это только про people management. Сроки, ресурсы, процессы. Но нет, таким образом решения принимать невозможно. Нужно знать детально, что делают ваши люди. В моменте может казаться, что спрашивать как что-то делается - трата времени. Но по факту погружение помогает более эффективно конфигурировать зоны ответственности. Помогает понимать, где команда идет не туда или где команда идет медленнее, чем могла бы.
3. Подготовка. К принятию решения надо готовиться. Подготовка от погруженности отличается тем, что погруженность - это про все подряд, подготовка - это про конкретное решение. Если не хватает знаний про то место, в котором нужно решение принять, надо погрузиться в это место, даже если времени мало.
(продолжение)
На первый взгляд во всех этих пунктах много затрат времени на то, что напрямую не связано с вашей работой. Однако если это не делать, то интуиция будет работать плохо, что в результате приведет к неверным или слишком медленно принятым решениям.
На первый взгляд во всех этих пунктах много затрат времени на то, что напрямую не связано с вашей работой. Однако если это не делать, то интуиция будет работать плохо, что в результате приведет к неверным или слишком медленно принятым решениям.
Посмотрел keynote Хуанга от nvidia на GTC
Очень много всего крутого про самое разное. Но сильно зацепил кусок, в котором он объявил о партнерстве DeepMind + Nvidia + Disney Research для создания реалистичной физики для симулятора MuJoCo. Вообще реалистичная физика в симуляторе - критически важна для того, чтобы можно было делать роботов. Только с помощью симулятора можно тестировать и обучать роботов. Проблема переноса результатов обучения из симулятора в реальный мир - существенная. Если попробовать обучить робота ходить в симуляторе, то в реальности он так просто ходить уметь не будет после этого. Реалистичная физика - ключ к тому, чтобы роботы буквально самообучались внутри виртуального мира. Ну и вывели на сцену милашку-робота из звездных войн - это просто отвал башки)
Очень много всего крутого про самое разное. Но сильно зацепил кусок, в котором он объявил о партнерстве DeepMind + Nvidia + Disney Research для создания реалистичной физики для симулятора MuJoCo. Вообще реалистичная физика в симуляторе - критически важна для того, чтобы можно было делать роботов. Только с помощью симулятора можно тестировать и обучать роботов. Проблема переноса результатов обучения из симулятора в реальный мир - существенная. Если попробовать обучить робота ходить в симуляторе, то в реальности он так просто ходить уметь не будет после этого. Реалистичная физика - ключ к тому, чтобы роботы буквально самообучались внутри виртуального мира. Ну и вывели на сцену милашку-робота из звездных войн - это просто отвал башки)
Радуюсь, когда появляются российские компании, которым удается делать классные LLM-ки. Авито сделали хорошую модель A-Vibe, которая стала топ-1 среди всех 7b моделей на бенчмарке для русского языка MERA. Судя по новостям взяли qwen2.5, дообучили на русский язык и получили большой буст по метрикам (интегрально 0.482 -> 0.578), переобучили токенизатор (до x2 к производительности). Большая работа, круто!
Устали от классических конференций, в которых просто выходят люди и рассказывают доклады?
Мне повезло, что меня позвали надеть рубашку ведущего на "Чинителей прекрасного", который провел Яндекс. Мне очень понравился формат мероприятия. Были и интересные доклады на нем тоже, но очень прикольно, что была еще куча активностей.
- Можно было под присмотром профессионалов взять какую-нибудь сломанную электронику изапаять починить ее.
- Можно былозапаять починить самокаты в составе группы. Буквально на ивент притащили пару самокатов и чинили их группой.
- Можно было починить старый компьютер Ленинград. Люди по очереди подходили и паяли электроды! Кажется, в итоге к успеху не пришли, но было весело)
А еще можно было посмотреть на прототипы Яндекс Станции и на разобранный сервер яндекса.
Вообще ивент был для людей, которые занимаются железом, но вот я, например, чистый программист и мне очень понравилось.
Больше фото тут: https://moiseev.gallery.photo/gallery/yandex_chiniteli_prekrasnogo/
Мне повезло, что меня позвали надеть рубашку ведущего на "Чинителей прекрасного", который провел Яндекс. Мне очень понравился формат мероприятия. Были и интересные доклады на нем тоже, но очень прикольно, что была еще куча активностей.
- Можно было под присмотром профессионалов взять какую-нибудь сломанную электронику и
- Можно было
- Можно было починить старый компьютер Ленинград. Люди по очереди подходили и паяли электроды! Кажется, в итоге к успеху не пришли, но было весело)
А еще можно было посмотреть на прототипы Яндекс Станции и на разобранный сервер яндекса.
Вообще ивент был для людей, которые занимаются железом, но вот я, например, чистый программист и мне очень понравилось.
Больше фото тут: https://moiseev.gallery.photo/gallery/yandex_chiniteli_prekrasnogo/
Советы от Слуцкого
На выходных Яндекс провел CTO Day в Белграде. В воскресенье было выступление Леонида Слуцкого про управление командой. В его случае футбольной командой. Удивительно на сколько много параллелей можно провести с работой руководителя разработчиков. В руководстве футбольной командой все примерно так же, но более утрировано и более остро из-за спортивной составляющей.
Постараюсь основные тезисы выступления привести:
1. Людям гораздо сильнее интересна их судьба и их перспективы, чем судьба команды. Все эгоисты. Поэтому аргументы, что что-то нужно для команды, обычно работают плохо. Нужно понимать чего хочет человек и делать так, чтобы эти желания соответствавали задачам, которые стоят перед человеком.
2. Есть три стадии ухудшения эффективности: человек хорошо работает и не высказывает недовольство - эффективен; человек хорошо работает и начинает высказывать недовольство - терпим и конструктивные моменты чиним; человек не работает и только высказывает недовольство - безвозвратная точка и надо расставаться с человеком.
3. Каждый член команды хочет, чтобы тренировали только его и помогали развиваться только ему. Такое невозможно, но если каждого тренировать по чуть чуть, общаться лично и давать персональные советы, то у людей складывается такое ощущение, что тренируют только их. В итоге люди довольны, но при этом не замечают, что такое отношение ко всем.
4. Самая болезненная новость. Стресса и страданий меньше не будет, а будет только больше. Даже если кажется, что в будущем получится меньше нервничать, то это не так, нервничать будешь только больше. Когда ты молодой тренер и проигрываешь кому-то, то никто этого не замечает. Но чем ты успешнее, тем больше людей видят твои неудачи и поэтому проигрыши нервируют гораздо сильнее. Это мудрость от Алекса Фергюсона, которого Слуцкий спрашивал про это.
5. Страх проигрыша гораздо более сильное чувство, чем желание выйграть. Потому что негатив от поражения гораздо сильнее, чем радость от победы. Кто не боится проигрывать - успехов не добиваются. Люди готовы сильнее фигачить для того, чтобы избежать негатив от поражения, чем ради достижения радости от победы. Но постоянно бояться очень тяжело, поэтому вместе со страхом должна быть психологическая устойчивость. Слуцкий рассказал, что Галицкий говорил ему, что Галицкому не важен счет, важна игра. Но при этом Галицкий часто уходил с игры на 75 минуте, чтобы не видеть концовку и счет, к которому концовка приводит.
6. В команде нужно шутить, юмор очень важен. Юмор помогает понимать на сколько вы близки с командой. Если вы близки, то получается добиваться от команды лучших результатов.
7. Бывают игроки, которые очень плохо идут на контакт. С ними тяжело выстроить близкие отношения. Закрытые игроки. И это нормально, не обязательно вы что-то делаете не так, когда с таким сталкиваетесь. Такое просто бывает и все.
Было еще бесконечное число футбольных баек. Запала в душу одна байка про ситуацию с правым крайним защитником в одной из команд, которые тренировал Слуцкий. В какой-то момент этот крайний правый защитник стал плохо играть. В критические моменты совершал ошибки. При этом игрок крутой. В итоге выяснилось, что крайнего правого защитника раздражают советы правого центрального защитника. И в критические моменты это приводит к тому, что крайний правый защитник слышит совет, тильтует и ошибается. Слуцкий поменял местами правого центрального защитника с левым центральным и это сделало так, что крайний правый защитник заиграл сильно лучше. Вот на сколько человеческие отношения в команде влияют на результативность!
На выходных Яндекс провел CTO Day в Белграде. В воскресенье было выступление Леонида Слуцкого про управление командой. В его случае футбольной командой. Удивительно на сколько много параллелей можно провести с работой руководителя разработчиков. В руководстве футбольной командой все примерно так же, но более утрировано и более остро из-за спортивной составляющей.
Постараюсь основные тезисы выступления привести:
1. Людям гораздо сильнее интересна их судьба и их перспективы, чем судьба команды. Все эгоисты. Поэтому аргументы, что что-то нужно для команды, обычно работают плохо. Нужно понимать чего хочет человек и делать так, чтобы эти желания соответствавали задачам, которые стоят перед человеком.
2. Есть три стадии ухудшения эффективности: человек хорошо работает и не высказывает недовольство - эффективен; человек хорошо работает и начинает высказывать недовольство - терпим и конструктивные моменты чиним; человек не работает и только высказывает недовольство - безвозвратная точка и надо расставаться с человеком.
3. Каждый член команды хочет, чтобы тренировали только его и помогали развиваться только ему. Такое невозможно, но если каждого тренировать по чуть чуть, общаться лично и давать персональные советы, то у людей складывается такое ощущение, что тренируют только их. В итоге люди довольны, но при этом не замечают, что такое отношение ко всем.
4. Самая болезненная новость. Стресса и страданий меньше не будет, а будет только больше. Даже если кажется, что в будущем получится меньше нервничать, то это не так, нервничать будешь только больше. Когда ты молодой тренер и проигрываешь кому-то, то никто этого не замечает. Но чем ты успешнее, тем больше людей видят твои неудачи и поэтому проигрыши нервируют гораздо сильнее. Это мудрость от Алекса Фергюсона, которого Слуцкий спрашивал про это.
5. Страх проигрыша гораздо более сильное чувство, чем желание выйграть. Потому что негатив от поражения гораздо сильнее, чем радость от победы. Кто не боится проигрывать - успехов не добиваются. Люди готовы сильнее фигачить для того, чтобы избежать негатив от поражения, чем ради достижения радости от победы. Но постоянно бояться очень тяжело, поэтому вместе со страхом должна быть психологическая устойчивость. Слуцкий рассказал, что Галицкий говорил ему, что Галицкому не важен счет, важна игра. Но при этом Галицкий часто уходил с игры на 75 минуте, чтобы не видеть концовку и счет, к которому концовка приводит.
6. В команде нужно шутить, юмор очень важен. Юмор помогает понимать на сколько вы близки с командой. Если вы близки, то получается добиваться от команды лучших результатов.
7. Бывают игроки, которые очень плохо идут на контакт. С ними тяжело выстроить близкие отношения. Закрытые игроки. И это нормально, не обязательно вы что-то делаете не так, когда с таким сталкиваетесь. Такое просто бывает и все.
Было еще бесконечное число футбольных баек. Запала в душу одна байка про ситуацию с правым крайним защитником в одной из команд, которые тренировал Слуцкий. В какой-то момент этот крайний правый защитник стал плохо играть. В критические моменты совершал ошибки. При этом игрок крутой. В итоге выяснилось, что крайнего правого защитника раздражают советы правого центрального защитника. И в критические моменты это приводит к тому, что крайний правый защитник слышит совет, тильтует и ошибается. Слуцкий поменял местами правого центрального защитника с левым центральным и это сделало так, что крайний правый защитник заиграл сильно лучше. Вот на сколько человеческие отношения в команде влияют на результативность!
Регистрация на Young Con заканчивается через 2 дня: https://yandex.ru/youngcon
Буду рассказывать про автономный транспорт, приходите 😉
Кроме этого будет много и других прикольных докладов и прочих вещей в программе!
Буду рассказывать про автономный транспорт, приходите 😉
Кроме этого будет много и других прикольных докладов и прочих вещей в программе!
This media is not supported in your browser
VIEW IN TELEGRAM
Через 5 мин выступаю на Young Con, поговорим про то, как воплотить ИИ в автономной машине, подключайтесь по ссылке — https://yandex.ru/youngcon/#program