LLM смотрит на мой сад: как ИИ-зрение решает, звать ли меня накрыть мебель перед дождём
TL;DRЯ собрал в своём умном доме автоматизацию, которая:следит за прогнозом осадков (в том числе за краткосрочным nowcast’ом на ближайшие пару часов);когда дождь/снег на подходе — включает подсветку на уличной камере и делает снимок;отправляет снимок в мультимодальную LLM с вопросом «садовая мебель накрыта чехлами?»;если не накрыта — присылает мне в Telegram фото + анимированный радар осадков и две кнопки: «Накрыл» и «Отложить на 3 часа»;пока я не среагировал/не отложил — не спамит; на сухую погоду LLM не дёргается вовсе.ИИ здесь на двух уровнях. Первый —
OCR всё прочитал, но ничего не понял: как мы научили систему разбирать транспортные накладные
Материал подготовлен для будущих студентов курса «Компьютерное зрение».Каждый день склады обрабатывают тысячи транспортных наклеек. FedEx, UPS, DHL, USPS, региональные перевозчики — у каждого свой макет, свои размеры шрифтов и расположение полей. На наклейке FedEx номер отслеживания может находиться наверху, а на наклейке DHL — посередине. Обратный адрес у одного перевозчика выровнен по левому краю, у другого — по центру.
Рентген может не отличить опасное от безобидного: как работает досмотр багажа и зачем там ИИ
Пролог: В котором ваш багаж исчезаетЧемодан медленно уезжает за резиновую шторку и на некоторое время перестаёт быть вашим.Где-то по ту сторону экрана его уже не воспринимают как багаж. Необычное цветное изображение, на которое нужно быстро взглянуть и понять: всё ли тут в порядке.Холодная металлическая коробка равнодушна к содержанию багажа. Она фиксирует только взаимодействие материи с рентгеновскими лучами. Оператор на экране наблюдает совсем не фотографию вашего чемодана. Это визуализация измерений: числа и сигналы, переведённые в форму и цвет, с которой человеку удобно работать.
Нейронки (не) плохо понимают юмор
Суть мини исследования в названии. С момента как нейронки стали мультимодальными прошло уже прилично времени. Но, по моему субъективному мнению, нейронки как раньше, так и сейчас плохо справляются как с пониманием того, что именно изображено на картинках. Примечание: в итоге автор переобулся. То же самое с юмором: понять, что что-то смешное – значит проявить по-настоящему интеллектуальную деятельность, включающую в себя и понимание контекста, культуры, социального взаимодействия и даже того, что находится на границе приличия, но все еще относительно приемлемо (тот самый черный юмор).
