Herrenberg is boasting about about their multimodal system for sustainable transport: stadtnavi. Hey, other cities, don't be jealous: Just adopt the solution, developed by Trufi.

Как мы учили Алису видеть мир с помощью мультимодальной нейросети Яндекса

Недавно пользователям приложения «Алиса» стал доступен Live-режим, который работает на базе мультимодальной нейросети (VLM), созданной в Яндексе. В этом режиме Алиса распознаёт объекты, показанные ей через камеру смартфона, и рассказывает о них пользователю. А ещё раньше наша VLM стала применяться в Поиске по картинкам, Умной камере и Нейроэксперте. Всё это время технология не стояла на месте и продолжала совершенствоваться. Пожалуй, пришло время поделиться опытом. На связи Роман Исаченко из команды компьютерного зрения в Яндексе. Сегодня я расскажу, какой путь наша VLM прошла за полгода. А Дарья @dara-orange Виноградова, которая работает со мной в той же команде, поделится описанием пайплайна зрения в Алисе. Мы опишем весь путь формирования новой модели: от архитектуры и сбора данных до финальных замеров качества и скорости.

https://habr.com/ru/companies/yandex/articles/904584/

“With many genres, one needs the physical impact of the waveforms hitting the body to evaluate what is really going on” —Bob Ludwig, audio mastering engineer. #PhilPerception #AuditoryPerception #multimodality www.soundonsound.com/techniques/m...

Mixing On Headphones

Selling your car is a huge step. But what if Seattle had a multimodal app—like our "Not Without My Bike" for Hamburg?

via mstdn @seabikeblog threads @seabikeblog bsky @seattlebikeblog[.]com

https://www.seattlebikeblog.com/2025/03/20/sell-your-tesla-or-any-other-car-and-take-the-30-car-free-days-challenge/

[Перевод] Spring AI научился видеть! Показываю, как заставить GPT находить бананы на картинках

Новый перевод от команды Spring АйО расскажет вам о работе с мультимодальностью при работе со Spring AI и о различных вариантах работы с графическими изображениями с использованием искусственного интеллекта.

https://habr.com/ru/companies/spring_aio/articles/889974/

I am rather happy to notice that @kielipankki, The Language Bank of Finland, is here.

They provide access to numerous resources related to #research, especially relevant to for #linguistics #multimodality #LiteraryStudies and #NaturalLanguageProcessing. Many of the resources are open-access or free to use for #academic pursuits. Check them out!

In some places multimodality is the ability to bring your bike on a train. In Mauritania...

In 2025 we would welcome the chance to build on our prior work in Mauritania.

https://tinyurl.com/2xtxrv2j

Photo via Reddit u/itsarace1

Kandinsky 4.0 — новая модель генерации видео

Сегодняшний релиз хочется начать с небольшой истории семейства моделей Kandinsky. В прошлом году на конференции AI Journey 2023 наша команда представила две модели: Kandinsky 3.0 для генерации изображений и первую российскую модель генерации видео по тексту Kandinsky Video . В этом году в апреле и мае вышли в свет улучшенные версии этих моделей: Kandinsky 3.1 с повышенным качеством изображений и Kandinsky Video 1.1 с улучшенными визуальным качеством и временной связностью кадров на видео. С тех пор прогресс в области генеративных моделей привел к созданию множества интересных решений для задач генерации, связывающих текст, видео и аудио модальности. Сегодня наша команда исследователей и учёных из Лаборатории Sber AI Research при поддержке учёных Лаборатории FusionBrain Института AIRI представляет Kandinsky 4.0 — нейросеть нового поколения для создания реалистичных видеороликов по текстовому описанию или стартовому кадру, а также аудио сопровождения для сгенерированного видеоролика. Теперь модель генерирует видеоряд продолжительностью до 12 секунд в разрешении HD (1280x720) по любому текстовому описанию или произвольному стартовому кадру. С помощью модели можно создавать видео с разным соотношением сторон под любые пользовательские и продуктовые потребности. В этой статье мы подробно рассмотрим структуру, функционал и процесс обучения нашей новой модели.

https://habr.com/ru/companies/sberbank/articles/866156/

Sit back and marvel at 14 minutes of great bike infrastructure. Good gracious, Addis! Let’s put our multimodal code to work! Who's in?

Via YT @biruksxp

https://youtu.be/tZVg_pD4wFk

#sustainabletransport #ActiveMobility #ActiveTransport #Africa #Ethiopia #AddisAbaba #Cycling #mobileapp MobileApps #AppInnovation #mobility #multimodal #Multimodality #OpenStreetMap #TrufiAssociation

Microplastic pollution worsens with heavier electric cars and buses. As electrification grows, we must also promote walking and cycling.

https://buff.ly/411NOFc

Xitter @TC_Africa
#sustainabletransport #transportation #microplastics #Cycling #multimodal #Multimodality #research #TransportationJustice #Walking #TrufiAssociation

This study shows how volunteered GPS data helps decode informal transport transfers, offering hope for more equitable and efficient mobility in data-poor regions in the global South.

https://buff.ly/3B1XEMC

“Walking is still honest,” yet in the global South, it’s more than that: It’s essential; the only mode available to the vast majority. Despite this, streets cater to cars.

https://buff.ly/3AR8ftX
Xitter @CVRecord
#sustainabletransport #transportation #ActiveMobility #ActiveTransport #mobility #multimodal #Multimodality #TransportationJustice #Walking #TrufiAssociation

Gleich geht es los mit der Panel Discussion zum Thema "Wissen durch Bilder", am
@dipf_aktuell, @bbf_dipfberlin. Ich freue mich auf den Austausch zu Bildern, Texten, multimodalen Formaten. #Bildungsgeschichte und #DigitalHumanities im Dialog! #DH #Multimodality

The F24 ferry in Berlin shows that informal, community-driven transport deserves recognition—whether it’s a small ferry in Europe or a minibus in Lagos.

https://tinyurl.com/2bym3evq

I am heading to #Vienna for taking part at the Hackathon on #Multimodality in Digital Humanities. I am extremely glad, that years ago I took part at a three-days workshop on analysing DEMs for archaeology and one of the participants was 60y. That inspired me, to never stop visiting hackathons, workshops and the like, as they are unique opportunities to learn and to tackle my ideas. #motivatedgranny

Small-scale accessible transport: The Baby Bus. There's a FRONT BIKE RACK!!! – another missing element in many minibus-based transport networks in the global South.

https://youtu.be/QI1yM9mzCAE

India's transport inefficiencies stem from prioritizing highways over walking, cycling, and public transit, while new systems fail to integrate with existing modes.

It's not just you, India.

https://www.orfonline.org/expert-speak/the-need-for-integrated-and-sustainable-multimodal-transport-systems-in-indian-cities

How can OpenStreetMap provide community-sourced, street-level data for sustainable transport? Locals know which streets would work best for last-mile electric 3-wheeler deliveries—valuable input for logistics.

https://buff.ly/4exUlLJ

This multimodal transport hub in Minnesota used to be a gas station. One down, 1.5 million to go.

https://www.startribune.com/fridley-transforms-abandoned-gas-station-into-a-multimodal-hub/601158344

Job Opening: Post-doctoral researcher in Computer Science or Digital Humanities at the University of Helsinki. Join the ERC-funded project on multimodality starting in Jan 2025.
Apply by Oct 21, 2024.
More info: https://jobs.helsinki.fi/job-invite/3513/ @tuomo
#PostDoc #DigitalHumanities #Multimodality