Машинное обучение и нейросети / Интервью с техническим директором Яндекс.Дзен
Из этого выпуска вы узнаете о том, что такое машинное обучение (machine learning), какие бывают нейронные сети, что такое data sets и чем инженер машинного обучения отличается от data scientist.
В гостях CTO компании Яндекс.Дзен - Антон Фролов.
Кроме того, у Антона история обычного парня, который не блистал знаниями ни в школе, ни в универе, но добился многого к своим годам.
Так что, заваривайте чаинский/кофеинский и погнали! 😉
~~~~~~~~~~~~~~
ЛЮБИМЫЙ ПАРТНЁР ELBRUS CODING BOOTCAMP
Elbrus - это лучший формат обучения программированию.
У ребят идет набор в новый поток, подробнее тут: clck.ru/NmqtM
Старт 6 июля. Вступительные экзамены до конца июня, ПОСПЕШИ!😎
~~~~~~~~~~~~~~
Linkedin Антона: / anton-frolov-15912047
Емейл для связи: anton-fr@yandex-team.ru
Аудио-версия выпуска: bit.ly/3dsavWt
Материалы из выпуска: t.me/itbeard/393
______________________________
АЙТИБОРОДА В ИНТЕРНЕТЕ:
🔹 Сайт - itbeard.com
🔹 KZhead - / itbeard
🔹 SoundCloud - / itbeard
🔹 Discord - s.itbeard.com/discord
🔹 Telegram - t.me/itbeard
🔹 Instagram - / itbeard
🔸 Стать спонсором - kzhead.infojoin
______________________________
00:00 - Начало
01:14 - Про себя
07:55 - РЕКЛАМА
11:32 - Разработка процессоров
22:21 - О переездах в Европу на ПМЖ
24:51 - Переход в Касперский
28:06 - Переход в Яндекс
34:29 - О PhD
37:41 - Переход в Дзен
41:23 - Примеры алгоритмических фидов
42:15 - Что такое Machine Learning
45:23 - О хайпе ML
46:09 - Почему считают на видео-картах
47:36 - В каких областях применяется ML
49:01 - Когда применять ML целесообразно
50:11 - Как называют спеца в ML и чем он занимается
52:16 - Что такое модель данных
53:24 - Почему важно выбрать удачную модель
56:55 - Кто работает в ML - градации специалистов
1:00:16 - Отличие датасаентиста от инженера по машинному обучению
1:04:41 - Реально ли начать учится ML у себя на ноутбуке
1:05:59 - Типы моделей машинного обучения
1:10:26 - Про нейросети
1:12:48 - Разметка данных
1:13:57 - Проблемы в ML
1:15:26 - GAN - конкурирующие сети
1:19:36 - Самообучающиеся модели
1:22:09 - Про Искусственный Интеллект
1:27:17 - Как стать ML инженером
1:35:08 - Про собеседования
1:37:43 - Источники знаний для ML-специалиста
1:39:07 - Хобби и занятия по-за работой
#айтиборода #ityoutubersru
Актуально и свежо! Чувствуется профессиональный подход к созданию качественного и актуального контента! Thank you so much Lex !
До просмотра этого видео я думал что мне интересно направление ML, теперь я в этом уверен! Спасибо за контент! )
Спасибо большое за интервью Антоном Фроловым, было интересно послушать. Данные видео добавляют желания больше заниматься программированием и нейронками, и, вероятно, уйти потом в эту сферу, или что-то смежное. (из электроэнергетики)
Очень интересный гость! Лекс красавчик, правильные вопросы задаёшь! Продолжай в том же духе👍🔥💪
Шикарное инервью. Я заслушался также как Лекс)) Видно что человек глубоко знает - может простыми словами объяснять
Охрененный выпуск! Сам начинаю погружаться в область. Многие моменты прояснились, спасибо)
Спасибо, что просвящаете. Очень интересно и познавательно. Спасибо!
Обожаю эту рубрику! Спасибо за данные видео)
на здоровье)
Очень классное и полезное интервью, вынес для себя много полезных вещей, благодарю!
На собеседовании на ML-специалиста в компанию МТС меня спросили: "С каким фруктом у вас ассоциируется наша компания?" Я: с яйцом! HR: это фрукт? Я: Нет, но ассоциируется с яйцом... P.S. Ну в общем собеседование я не прошёл.
#конкурс
Назвал бы фрукт в форме яйца.
@@inksmart типа лимон, но он жёлтый, возможно слива, ну не знаю... У меня ассоциация только с яйцом!
@@cheloveknauk возможно груша
может манго какое-нибудь красное
Огонь 🔥 Одно из лучших интервью.
Благодарю за информацию, очень интересно. Особенно, комментарий Антона по поводу того, что математика в ML не rocket science. Примерно подразумевал, что это именно так :)
О, Обнинск! Землякам привет! Гимназии тоже, я из ФТШ. Тройки в гимназии это ок, я тоже троечник) Лексу, как обычно, респект)
За вставки про места Белоруссии отдельный лайк)
Так здорово! Хотя тема ролика "машинное обучение" и начинается с 42 минуты) Благо метки есть, за это респект!
Классное интервью с крутым специалистом на интересную тему
Отличное интервью, вопросы все в точку! Спасибо!
Шикарное интервью! Отличный гость! Просто и красиво разложил всю сферу и развеял мистический ореол вокруг индустрии! Спасибо!!
Классный выпуск! Сейчас ищу ml разработчиков в свою компанию и видео помогло чуть лучше понять суть работы, спасибо
Добрый день а вы не ищите стажера?
По поводу банков и сьёма жилья полностью согласен, особенно магазинов которые работают пока ты на работе...
Не по колокольчику, а по зову сердца
Спасибо, хехе)
Отличные вставки с определениями, не напрягающие. Отдельный плюс :)
Классный пример человека, которого не сломало школьное образование
как может сломать то, что можно просто прогулять?) Слабенькие какие то люди пошли))
@@MrAleksQD скорее, правильные
@@viennasovello4623 А в чем их правильность..?
@@Dpon0 В том что они враги своих мыслей
@@danielk8368 вариант: домашнее образование
Тут самая адекватная аудитория. Читаю комменты и не верю что я в ютубе. Выпуск очень полезный, подача тоже не хромает. Лайк, все от души прям
круто и вовремя, спасибо большое
отличное интервью, прямо как бальзам на душу :) познавательно
Спасибо за интересное интервью с профессионалом высочайшего уровня!
а так ли это?
Почему то после просмотра интервью на этом канале появляется вдохновение .не понятно как это работает . и пусть я просто делаю сайты. все равно все очень интересно .
а после вдохновение, тебя опускает в грязь дипрессия, что тебе как до луны по сравнению с этими людьми
@@cryday3270 они были на том же самом месте
@@ghostinthewires7006 поверь им было похуй, они ни кем не вдохновлялись, а тратили своё время на себя любимых. Тупо 24/7 делали что им нравится и это их привело к тому, что сейчас они собой представляют. Удачи если ты кем-то вдохновляешься, тебе не то, что тяжело будет, у тебя вобще ничего не будет. Хааха)))
@@cryday3270 что плохого в вдохновение? Мне кажется, ты путаешь вдохновения с сотворением кумиров. Каждый человек вдохновляется чем-то или кем-то и я не вижу в этом ничего плохо. Сколько научных открытий было сделано, когда тот или иной учёный вдохновился работами другого. Вдохновение этот тот щелчок, который говорит тебе "слушай, там Илон Маск снова побил рекорд. Блин, нужно мне тоже постараться и сделать что-то крутое", а кумиры это: "Илон Маск такой круто!!!1!!1! Хочу быть как он! Точно, он работает по 100+ часов в неделю, буду также и тогда я стану как он!" И вообще, я бы тебе посоветовал не быть таким песимисстом, а если уже решил им быть, то хотя бы не нужно кидаться фразами "у тебя ничего не выйдет", это отвратительно... Хотя бы аргументируй свою позицию и предложи альтернативы. А то в таком случае поступаешь, как то же самое русское образование 🙃 И ещё. Если ты сравниваешь себя с другими людьми и после этого у тебя пропадает мотивация, то земля тебе духом, дружище
@生陳港 Гениям говорят, что это не их и они неправы. Рад видеть тому подтверждение, темболее от кунг-фу... хз кто ты, джэки чан какой-то, твой батя чтоли?
Одно из самых интересных интервью на канале, наравне с интервью с разработчиком на ГО
Борода настоящий красаучик) спасибо что делаешь это, всех благ тебе. Лайк, репост, подписка. Пожалуйста пригласи еще кого-нибудь из веба, понимаю что было уже по 2 js и php разраба, но все равно) эта ниша одна из самых обширных. Пожалуйста))
Спасибо)
Классное интервью. Отличный рассказчик
Лекс, красава! Инетерсное интервью получилось !
"Поможешь выбрать лучший вопрос?" "Конечно, за меня это сделает нейронка"
Эх где же мой 2014.. Я как раз тогда хотел такими вещами заниматься, но вообще не представлял что это и как, думал что изучать ЯП способны только суперумные люди.
ооооо дааа. прокачаем наши нейронные сеточки. звоню друзьям чтобы ставили лайки
Сидела разбиралась с новой работой и гуглила ролики про ML тренинг моделей и наткнулась на этот среди обучающих
Сильный мужик
Было интересно и вполне информативно, в целом мне понравилось. Для меня Яндекс.Дзен не особо привлекательный сервис, но, допускаю, что далеко не всю его работу на самом деле замечаю, это раз, а во-вторых, не хочу ставить негативный ярлык на то, что может будет мне полезно, он ведь в любом случае развивается. Для меня получилось интервью такого общепознавательного и немного мотивационного характера. Антон - обычный человек, да, вероятно, с рядом психологических комплексов, впрочем также как и те, кто поминутно и посекундно на это зачем-то указывают в комментариях, впрочем также как и Я САМ, который зачем-то сейчас на это указывает им:) Так вот, обычный чел, чем-то увлеченный и предпринимающий какие-то конкретные действия для достижения результата и к каким-то конкретным результатам приходящий. Причем результатам явно выше среднего уровня! Интервьюеру отдельная благодарность. Я слабо помню даже школьную математику, в принципе не знаком с программированием, но в целом все было доступно, если не на понятийном, то хотя бы на интуитивном уровне . СПАСИБО!
Полная противоположность более раннему интервью со Славой, тут описал что все в МЛ так легко бери и делай. Все что нужно подберешь по ходу, класс
_____________________________________ Давай больше таких умных дядек. ____________________________________
Спасибо за такой полезный контент
на 22:50 сноска: "Citizen - гаражанини" (от слова гараж)
хах)
@@itbeard правильно переводится - гражданини
Спасибо за выпуск, очень хотел послушать ML специалиста. А теперь к конкурсу: Кофе какой марки стоит у вас в автомате? И какой он по крепкости?
Спасибо за интервью, Лекс! Хотелось бы, чтобы на канале появилось интервью с Rust Developer.
будет когда-то)
@@itbeard Надеюсь :)
@@user-tv3jq2vt8s вышло)
К сожалению, про сам только Rust мало сказано. Оно и понятно - язык то молодой.
#конкурс в начале диалога "Сейчас нам нужен эМэЛ ...", я перебил на мандраже - "да конечно, (и назвал свой эМэйл)", в итоге смотрю фильмы режиссёра Вонг Кар-Вай, особо доставляет язык света и подчёркивание любовных сцен каустикой - английский продвинутый (не требует перевода) поэтому с удовольствием изучил бы этот кирпич.
Очень интересное интервью! Антон Фролов говорит медленно - но удивительно по делу, так что не приходится включать 1.25, или 1.50 к скорости. ML - крутая вещь!
Спасибо за гостя
Обмазался выпуском, спасибо что не даешь умереть с информационного голода)
Очень хочу интервью с джуном который попал в топовую компанию, либо с синьором который взобрался по карьерной лестницы очень быстро за 3-4 года. Будет что-то в этом роде ? Просто в основном интервью с теми кто уже давно знаком с IT ( а хотелось бы посмотреть про тех кто вообще был полным нулем)
блин. все они были полными нулями и рассказывают как попали
@@itbeard Фантазер просто хочет услышать от кого то волшебную пилюлю с которой думая, что сможет обхитрить других
Спасибо тебе за все, Айпи Борода
на здоровье!
Интересно, спасибо!
Очень интересное интервью!
На #Конкурс . Не совсем интервью, мы защищали курсовые после третьего курса. Работа была по определению пола человека на изображенит. И один из преподов просто заваливал дико тупыми вопросами. Вот один из моментов: " - Какая точность у вас получилось? - около 92%. - ого как много вы наверное и обучение и проверку на одном датасете проводили. - если бы мы так сделали было бы 100% - ну хорошо, а вот если я вам шотландца в юпке подам на вход ваша же программа ошибется, а если у меня вся выборка из шотландцев о каких 92% может идти речь. " После этого препод был послан, так как выборка должны быть стохастичной. До сих пор не знаю он хотел услышать такой ответ или просто пытался с умным видом задавать вопросы в том, что не шарил. Другим ребятам он тоже кучу вопросов таких задавал "Что вы подаете на обработку программе, не можете же вы все изображение подать? - Ну, вообще-то именно этим я и занимаюсь.". Поначалу у нас немного горело, а потом мы уже не могли сдерживать смех. Хочу книжечку) Жду стрим!) Видео ОГОНЬ!
посмотрев этот интервью понял что я был частично ML специалистом ;))) готовить данные, извлекать данные, особенно когда БД транзакционная и не предназначено для анализа это искуство ))) потом среди всего этого шума искать аномалии, и себя перепроверять по сто раз, а точно ли я все учел. Или когда уже данные были отправлены ты осознаешь что забыл один момент )))) это большая ответсвенность, согласен с Антон, посравнению с разработкой софта
Заканчиваю курс ML на Coursera от Andrew Ng, очень интересно было послушать, некоторые моменты подчеркнул для себя!Впереди ещё многому нужно будет научиться, главное не опускать руки и хорошо бы иметь ментора и команду с которой вместе двигаешься вперёд, это очень ускоряет процесс обучения! Всем кто на этом пути, желаю дойти до заветной цели. Удачи!
Лабы делал? Не могу решиться купить подписку или продолжать в режиме read only
@@juergen5948 Делал всё, а иначе как тогда можно в этом начать разбираться, ко всему это же и в работе всё будет, читать можно сколько угодно, а водить нужно учиться, я думаю Америку не открыл, и так всё понятно что нужно делать)
Сильный матан для этого надо был? И насколько хорошо пайтон надо знать?
@@LetspleionSamp Andrew Ng объясняет всё по полочкам, даже если никогда не был знаком с мат. анализом, python знать нужно, чем лучше, тем больше ты молодец), изучаем python Эрик Мэтиз_3 для начала будет хорошо . Но можно и походу разобраться, но тут всё зависит от человека и его способностей, сугубо индивидуально. English mast have.
круто! спасибо
Интро балдежное)))
Спасибо за видео
Это ОЧЕНЬ КРУТАЯ идея! Показывать достопримечательности своей Родины, страны, города! 👍👍👍👍 Так держать!
Спасибо!
42:14 круто объяснил как программист, программистам))
Пора обновить это интервью😅
Таймлайны в поддержку земляков: 00:00 - Начало 01:14 - Про себя 22:21 - О переездах в Европу на ПМЖ 24:51 - Переход в Касперский 28:06 - Переход в Яндекс 34:29 - О PhD 37:41 - Переход в Дзен 41:23 - Примеры алгоритмических фидов 42:15 - Что такое Machine Learning 45:23 - О хайпе ML 46:09 - Почему считают на видео-картах 47:36 - В каких областях применяется ML 49:01 - Когда применять ML целесообразно 50:11 - Как называют спеца в ML и чем он занимается 52:16 - Что такое модель данных 53:24 - Почему важно выбрать удачную модель 56:55 - Кто работает в ML - градации специалистов 1:00:16 - Отличие датасаентиста от инженера по машинному обучению 1:04:41 - Реально ли начать учится ML у себя на ноутбуке 1:05:59 - Типы моделей машинного обучения 1:10:26 - Про нейросети 1:12:48 - Разметка данных 1:13:57 - Проблемы в ML 1:15:26 - GAN - конкурирующие сети 1:19:36 - Самообучающиеся модели 1:22:09 - Про Искусственный Интеллект 1:27:17 - Как стать ML инженером 1:35:08 - Про собеседования 1:37:43 - Источники знаний для ML-специалиста 1:39:07 - Хобби и занятия по-за работой
Европу*
Здравствуйте я ваш подписчик а вы знаете такого ютубера Хауди хо (Howdy ho)?
Знаю
Закрепи коммент
@@oleg_1_ef ждём когда он Сталкер 2 сделает 😁
Интересный и конкретный собеседник !
я так понимаю, что если поставить солнечную батарею и запитать от неё насос, который будет из речки перекачивать воду в банку, то солнечная энергия будет преобразована в банку воды?)
Если поставить солнечную батарею на автопогрузчик, то солнечная энергия будет преобразована в пару ящиков пива
Не в саму банку, а в потенциальную энергию банки воды
@@Krymgujin в массу банки)) Ну если верить, что в случае с растениями солнечная энергия переходит в массу.
Может быть я чего-то не знаю, но при фотосинтезе свет не преобразуется в массу. Свет совершает работу по преобразованию воды и углекислого газа в углевод и кислород.
Свет действительно преобразует воду и углекислый газ в углевод (глюкозу), но данная реакция требует огромных энергетических затрат, которые в конечном счете аккумулируются в той самой массе углевода. примерно так)
@@user-th9cp1zb2tздесь принципиально то, что масса до фотосинтеза и после не меняется, а вопрос был поставлен именно таким образом, что свет преобразуется в массу. Поэтому меня зацепил этот момент в интервью, так как странно слышать такие вещи.
Фёдор Гончаров мне кажется, Вы просто слишком цепляетесь за слово масса. В данном случае под массой имеется в виду не мера инертности тела как в физике. Под словом масса подразумевается вещество как-таковое. Свет преобразуется в вещество с нулевой массой, например. Но я тоже такой себе эксперт, так что могу быть не права )
@@user-th9cp1zb2t Вы не права. Свет не преобразуется ни в какое вещество и ни в какую массу, если только не происходит реакция ядерного превращения (синтеза или распада), к коим фотосинтез не относится. Айти борода не совсем хорошо учил физику или просто не думал над вопросом) Федор +
#конкурс Вопрос: Кто лучший программист в сфере Data Science ? Ответ: градиентный спуск.
лучший программист в сфере Data Science тот мужик, который в прошлый раз у бороды рассказывал об этом..
интересно ролик смотрится из текущей действителтности 🫣
Обывательский вопрос: а что например изменилось?
Начальник из Яндекса скажи, как сделать так чтобы в браузере телефона не открывались страницы Яндекс turbo
#конкурс Какой уровень образования должен быть у нейронной сети, чтобы она занялась самообучением?
Люто плюсую)
По поводу научных исследований в ML, разве не исследуется активно раздел долгосрочной памяти в нейронных сетях? Почем то совсем не затронули эту тему, хотя это очень важный кмк вопрос, так как сейчас это большая преграда перед тем чтоб действительно чему то учить. Я не специалист но когда год назад, активно изучал вопрос по МЛ наткнулся на то что у НС фактически нет памяти она может делать предположение только из текущего стейта, есть подходы по реализации краткосрочной памяти но они тоже имеют проблемы.
Модели долгосрочной памяти исследуются, но это лишь один из десятков (или даже сотен) подразделов машинного обучения, так что нет ничего странного, что про него не вспомнили.
RNN, а конкретно LSTM
23:43 Вот, кстати, верно говорит! Работаю со многими иностранцами в России. Сам сильно удивился этому, но иностранцы то же самое говорят. Что у нас ОТЛИЧНЫЙ сервис и высокие технологии в плане повседневных банковских операций, процентных ставок, возможностей. От того что у нас Сбер по номеру телефона позволяет без процентов деньги кидать иностранцы прямо в дикий восторг приходят! Мы живём и не замечаем этого... А это огромный прорыв, в том числе это заслуга наших ITшников ;) И вайфай у нас в крупных городах на каждом углу, в каждой кафешке, а то и в такси, в электричках, в автобусах. Хотя, как геолог, я знаю места где нет ни электричества, ни сигналов сотовой связи ))) Однако, широка Страна моя, родная. Тут не поспоришь. Но там где есть сервис - он на хорошем уровне. Это факт.
Вау, неожиданно было коллегу встретить, читая комментарии😂!
задавали вопрос можно ли сделать так чтобы не верный ответ давала намерена. например место кота говорила собака но когда это нужно
А можно ссылку на интервью с data scientist?
5:20 - 5:34 - что за заклинание он прочитал? Можно бригаду начинающему недо-программисту
Какие результаты конкурса из видео про яндекс дзен
Лайк ставлю :)
Amazing content about ML. I hope he is in the UK
Расскажи про лучшие или худшие курсы Минска!!!!
"чувтсвуешь себя там человеком второго сорта", спасибо, проорался. Я давно переехал и ни минуты себя так не чувствовал, мне с внж ипотеку под 1.8% выдали без проблем, все плюшки "ситизена" крмое голосования с порога были доступны. В Европе страны настолько разные, насколько это возможно. А чел рассуждает так, будто во всех странах пожил, рофлан-поминки.
Лекс давай интервью по IoT!!
Отличное Видео! Аве!
в интервью было рассказано о ссылках на дополнительные материалы... не могу найти, где эти ссылки?
В телеграме
Классный выпуск, от души
Да, на 1.25 хорошо слушается :-)
сразу видно, человек познал дзен
Не соглашусь про тухлость высшего технического образвания 10 лет назад. Судить по обучению на техническую специальность в РУДН как-то странно. Так же как было бы странно ожидать хорошего обучения на переводчика в условном МФТИ. Сам поступал в 2009 году в МИФИ на факультет Кибернетики и Информационной Безопасности и образованием остался очень доволен. В остальном выпуск интересный и, гость молодец, что решил пойти по сложному пути, учиться дальше, а не получать честную "копейку" за верстку веб-страничек.
Я слышал о машинном обучении с учителем. А почему нет графического воплощения, ПО для этих задач? Например мне крайне необходима программа по определению чкакой рисунок я вижу - ксерокопию или оригинальный чистый текст, рисунок, чертеж. Почему многое ушло на сайты Google, где приведен код программы и на нем идет расчет? Да не важно для пользователя насколько быстро идет задача, хотелось бы решать офлайн.
@@just_weirdo печально ))))
#конкурс Самый странный вопрос на собеседовании на ML инженера: как владеете экселем?
5:20 что за hive recons stranding ?
Очень интересная беседа и познавательная, но меня коробят англо-нижегородские жаргонизмы.Спасибо гостю и интервьюеру!😊
Крайне приятный, умный и компетентный чувак. Не такое частое сочетание среди интервьюируемых у бороды. Сравнить с чуваками, которые рассказывали про Python, JS, Ruby - небо и земля. Большое спасибо за интервью, и побольше таких гостей!
Если кто интересуется человеческим Сознанием и попыткой реализации этого с помощью AI стоит посмотреть Константина Анохина. В конце 2020 он говорил об этой теме.
С первого взгляда показалось, что это или Хауди Хо, или его старший брат :)
не упоминай этот шлак здесь
По вопросам чувствуется, что Борода все же понимает кто чей брат в ML)
А можно эту часть о том, откуда вылез человек вот как то сократить?
можно подумать, сейчас нет Desktop приложений и автоматизации бухгалтерии )
А где ссылки на источники знаний ( курсы, книги и т.д. )
#конкурс "Вы можете сделать модель, чтобы мы поувольняли ненужных програмистов?"
Люблю делать пессимистичные модели)