#статья
Работа ребят из Беркли
Zitong Yang et al Rethinking Bias-Variance Trade-off for Generalization of Neural Networks
о пересмотре для нейросетей концепции разброс-смещение
https://arxiv.org/pdf/2002.11328.pdf
Работа ребят из Беркли
Zitong Yang et al Rethinking Bias-Variance Trade-off for Generalization of Neural Networks
о пересмотре для нейросетей концепции разброс-смещение
https://arxiv.org/pdf/2002.11328.pdf
#статья
Обзор по представлениям в обработке аудио
Deep Representation Learning in Speech Processing:Challenges, Recent Advances, and Future Trends:
https://arxiv.org/abs/2001.00378
Обзор по представлениям в обработке аудио
Deep Representation Learning in Speech Processing:Challenges, Recent Advances, and Future Trends:
https://arxiv.org/abs/2001.00378
#статья
Ещё один ответ на популярный вопрос студентов: «Какая математика используется в ML?» Серия постов про теорию решёток (!) в машинном обучении:
https://habr.com/ru/post/510808/
Ещё один ответ на популярный вопрос студентов: «Какая математика используется в ML?» Серия постов про теорию решёток (!) в машинном обучении:
https://habr.com/ru/post/510808/
Хабр
Представление объектов для машинного обучения, основанного на теории решеток
Это четвертая статья из серии работ (ссылки на первую , вторую и третью статьи), посвященных системе машинного обучения, основанного на теории решеток, названной "ВКФ-система". Программа...
#статья
Почему сильный ИИ никогда не будет создан. Статья авторитетного учёного в Nature:
https://www.nature.com/articles/s41599-020-0494-4
Почему сильный ИИ никогда не будет создан. Статья авторитетного учёного в Nature:
https://www.nature.com/articles/s41599-020-0494-4
Nature
Why general artificial intelligence will not be realized
Humanities and Social Sciences Communications - Why general artificial intelligence will not be realized
#статья
Неплохой обзор современных методов синтеза и клонирования. Правда, после его написания вышли ещё:
Mellotron, WaveGlow (вокодер)
FlowTron
Glow-TTS
EATS
https://heartbeat.fritz.ai/a-2019-guide-to-speech-synthesis-with-deep-learning-630afcafb9dd#2a7a
Неплохой обзор современных методов синтеза и клонирования. Правда, после его написания вышли ещё:
Mellotron, WaveGlow (вокодер)
FlowTron
Glow-TTS
EATS
https://heartbeat.fritz.ai/a-2019-guide-to-speech-synthesis-with-deep-learning-630afcafb9dd#2a7a
Fritz ai
A 2019 Guide to Speech Synthesis with Deep Learning - Fritz ai
Artificial production of human speech is known as speech synthesis. This machine learning-based technique is applicable in text-to-speech, music generation, speech generation, speech-enabled devices, navigation systems, and accessibility for visually-impaired…
#статья
Очень неплохая статья про теорему Эрроу:
https://psv4.userapi.com/c856416/u8733459/docs/d5/c2150e7b913d/Savvateev-Filatov-Shvarts-JEM2018.pdf
Очень неплохая статья про теорему Эрроу:
https://psv4.userapi.com/c856416/u8733459/docs/d5/c2150e7b913d/Savvateev-Filatov-Shvarts-JEM2018.pdf
#статья
Работа «старая», но всё время забываю на неё сослаться, когда рассказываю студентам об Adam - это метод оптимизации используется наиболее интенсивно при обучении нейронных сетей, но он может не сходиться. Пример приведён в этой работе, метод «исправили», он стал теоретически обоснован, но практически показывает себя хуже и Adam-ом продолжают пользоваться;)
https://arxiv.org/abs/1904.09237
Работа «старая», но всё время забываю на неё сослаться, когда рассказываю студентам об Adam - это метод оптимизации используется наиболее интенсивно при обучении нейронных сетей, но он может не сходиться. Пример приведён в этой работе, метод «исправили», он стал теоретически обоснован, но практически показывает себя хуже и Adam-ом продолжают пользоваться;)
https://arxiv.org/abs/1904.09237
#статья
Отличный пост от моего коллеги Дмитрия Ватолина, у него вообще очень хорошие посты на Хабре. Про гениев, сжатие и монетизацию:
https://habr.com/ru/post/525664/
Отличный пост от моего коллеги Дмитрия Ватолина, у него вообще очень хорошие посты на Хабре. Про гениев, сжатие и монетизацию:
https://habr.com/ru/post/525664/
Хабр
О талантах, деньгах и алгоритмах сжатия данных
Алгоритмы сжатия — это очень коварная тема, привлекающая многих новичков. Это правда! Часто человеку кажется, что его осенила божественная идея, как сильно сжать данные. Любые, кстати! Без потерь!...
#статья
Ещё на тему функций ошибки. Интересное обобщение нескольких известных функций - alpha-loss:
https://arxiv.org/pdf/1906.02314v5.pdf
Ещё на тему функций ошибки. Интересное обобщение нескольких известных функций - alpha-loss:
https://arxiv.org/pdf/1906.02314v5.pdf
#статья
На рис. кто откуда хантит профессоров. Из статьи Michael Gofman et al. Artificial Intelligence, Education, and Entrepreneurship // http://gofman.info/AI/AI_GofmanJin.pdf
На рис. кто откуда хантит профессоров. Из статьи Michael Gofman et al. Artificial Intelligence, Education, and Entrepreneurship // http://gofman.info/AI/AI_GofmanJin.pdf
#статья
Надо бы порекламировать первую статью Татьяны на хабре, тем более, что написано очень неплохо:
https://habr.com/ru/post/591779/
Надо бы порекламировать первую статью Татьяны на хабре, тем более, что написано очень неплохо:
https://habr.com/ru/post/591779/
Хабр
Inductive bias и нейронные сети
В этой статье я расскажу, что такое inductive bias, зачем он нужен и где встречается в машинном обучении. Спойлер: везде. Любая нейросеть имеет inductive bias (даже та, что в человеческом мозге,...
#статья
По поводу последнего вопроса. Есть даже статьи, в которых изучаются такие "неправильные" генерации. Одна из свежих, например:
Terence Broad, Sebastian Berns, Simon Colton, Mick Grierson "Active Divergence with Generative Deep Learning -- A Survey and Taxonomy" // https://arxiv.org/abs/2107.05599v1
(рис. из неё)
По поводу последнего вопроса. Есть даже статьи, в которых изучаются такие "неправильные" генерации. Одна из свежих, например:
Terence Broad, Sebastian Berns, Simon Colton, Mick Grierson "Active Divergence with Generative Deep Learning -- A Survey and Taxonomy" // https://arxiv.org/abs/2107.05599v1
(рис. из неё)