Phygital podcast — разговариваем о 3D ML и phygital технологиях

Всем привет хабровчане и любители 3D ML!

Мы уже ведем на хабре серию заметок про 3D ML, а теперь еще и выпускаем на нашем youtube канале визуальный подкаст «PHYGITAL PODCAST«, где освещаем новости из мира ML, 3D и phygital технологий, а также вкратце излагаем суть выпущенных здесь заметок.

Заметка от партнера IT-центра МАИ и организатора магистерской программы “VR/AR & AI” — компании PHYGITALISM.

Выпуск 1: Итоги прошедшего года, интересные статьи и проекты из мира 3D ML и PHYGITAL

В первом подкасте мы поговорили об итогах 2020 года в мире науки вообще и в области машинного обучения в частности. Посмотрели на самые интересные работы, победившие в «Технотекст 2020». В конце мы взглянули на интересные и свежие работы и проекты из области 3D ML.

Материалы и содержание:

• Блок I : Итоги 2020 года в мире науки и IT

  • Обзор в graph ml в 2020 году

  • Обзоры от журнала Quantamagazine — Плейлист на youtube

  • Достижение и планы на 2020 в научном мире от Meduza

    • Космонавтика

    • Наука в целом

  • Список конференций по компьютерному зрению в 2021 году

  • Достижение в ML 2020 — пост на хабр

• Блок II: Итоги Хабр Технотекст 2020 и самые интересные статьи

  • Итоги Технотекста

    • Вычисления на GPU – зачем, когда и как. Плюс немного тестов — пост на хабр

    • Deep Fake Science, кризис воспроизводимости и откуда берутся пустые репозитории​ — пост на хабр

    • Равномерное перемещение объекта вдоль кривой — пост на хабр​

    • Трехмерный движок в коде… ДНК — пост на хабр и код на Observable

    • Молекулярная биология и Houdini летом двадцатого — пост на хабр и видеоролик на Behance​

• Блок III: Не совсем серьезные, но крутые проекты

  • Проект нейророссия — пост на хабр и еще один пост про Обращение GPT-2

• Блок IV: Различные проекты из области 3D ML

  • Как я научила свой компьютер играть в пары используя OpenCV и Глубокое обучение — пост на хабр

  • Castle in the Sky — страница проекта (пост на хабр про нейронный рендеринг)

• Блок V: Работы, посвященные 3D селфи

  • Relightable 3D Head Portraits from a Smartphone Video — видео на youtube

  • Deformable Neural Radiance Fields — станица проекта

  • Neural Scene Flow Fields for Space-Time View Synthesis of Dynamic Scenes — страница проекта

  • NeRF in the Wild — видео на youtube

• Блок VI: прочие проекты из области 3D ML

  • Детекция и запоминания невидимых объектов — страница проекта и пост на хабр на эту тему

  • Smoothie-3D —страница приложения и видео с примером работы (1 и 2)

  • GROUNDED LANGUAGE LEARNING FAST AND SLOW — статья

  • VOGUE: Try-On by StyleGAN Interpolation Optimization — станица проекта

• The art of code — виде с youtube

Выпуск 2: 3D DATA FORMS / ФОРМЫ ОПИСАНИЯ 3D ДАННЫХ

Во втором подкасте мы поговорили про то, что такое форма и формат, как описывать 3D объекты на компьютере и немного про неевклидовость данных. Фактически это более быстрая и актуальная версия нашей первой заметки из серии 3D ML.

Содержание :

• В чем отличие формата от формы?

• Какие формы есть у 3D данных?

  • Multiview

  • Visual bag of words (bag of visual words)

  • Воксельное представление (Voxels)

  • Облако точек (Point Cloud)

  • 3D данные не являются Евклидовыми

  • Полигональные модели (Mesh)

  • Параметрическое представление (на примере SDF)

• Дескриптивные представления данных

Материалы:

• Статья на хабре про формы представления 3D данных (3D ML часть 1)

• Bag of Visual Words in a Nutshell — заметка на Medium

• 4IoT project

• Статья про 3D датасеты и фреймворки

• Заметка про камеры глубины​

• Заметка про сканирование помещений

• M. M. Bronstein, J. Bruna, Y. LeCun, A. Szlam, P. Vandergheynst, Geometric deep learning: going beyond Euclidean data, IEEE Signal Processing Magazine 2017 (Review paper)

• Видео с канала Onigiri про SDF

• Видео с канала Onigiri про черную дыру

• Заметка про дескрипторы

• Лекция Артема Бабенко из яндекса про поиск среди изображений

Выпуск 3: Как увидеть Wi-Fi сигнал своими глазами?

В третьем выпуске поговорили о том, какие есть интересные применения у Wi-Fi кроме раздачи интернета, как будет выглядеть будущее бесконтактных интерфейсов и о том, как уже сегодня можно увидеть Wi-Fi сигнал своими глазами в реальном времени.

Содержание :

• Электромагнитные волны и эффект Доплера

• Google project SOLI

• SeeSignal

Материалы:

• Демонстрация распространения Wi-Fi в помещении

• Google project SOLI

• SeeSignal
  

Telegram канал «3D ML»

Помимо подкаста в Youtube, на тему 3D ML у нас есть телеграмм канал, который так и называется «3D ML» [t.me/PHYGITAL3DML]. В нем мы регулярно публикуем различные новости и обзоры проектов, а еще вместе иронизируем и смеемся над нелепыми картинками из работ в этой области.