πŸ€– Π ΠΎΠ±ΠΎΡ‚-сыщик ΠΎΡ‚ TUM: 3D-Π·Ρ€Π΅Π½ΠΈΠ΅ + LLM ΠΈΡ‰ΡƒΡ‚ потСрянныС Π²Π΅Ρ‰ΠΈ Π½Π° 30% быстрСС

Π˜Π½ΠΆΠ΅Π½Π΅Ρ€Ρ‹ ВСхничСского унивСрситСта ΠœΡŽΠ½Ρ…Π΅Π½Π° (TUM) прСдставили Π°Π»Π³ΠΎΡ€ΠΈΡ‚ΠΌ для ΠΌΠΎΠ±ΠΈΠ»ΡŒΠ½Ρ‹Ρ… Ρ€ΠΎΠ±ΠΎΡ‚ΠΎΠ², ΠΊΠΎΡ‚ΠΎΡ€Ρ‹ΠΉ сочСтаСт 3D-ΠΊΠ°Ρ€Ρ‚ΠΎΠ³Ρ€Π°Ρ„ΠΈΡ€ΠΎΠ²Π°Π½ΠΈΠ΅ помСщСния с языковой модСлью для поиска ΠΌΠ΅Π»ΠΊΠΈΡ… ΠΏΡ€Π΅Π΄ΠΌΠ΅Ρ‚ΠΎΠ² Π² Π·Π°Ρ…Π»Π°ΠΌΠ»Ρ‘Π½Π½ΠΎΠΉ срСдС. БистСма строит ΠΎΠ±Π½ΠΎΠ²Π»ΡΠ΅ΠΌΡƒΡŽ Π² Ρ€Π΅Π°Π»ΡŒΠ½ΠΎΠΌ Π²Ρ€Π΅ΠΌΠ΅Π½ΠΈ ΠΏΡ€ΠΎΡΡ‚Ρ€Π°Π½ΡΡ‚Π²Π΅Π½Π½ΡƒΡŽ ΠΊΠ°Ρ€Ρ‚Ρƒ с Ρ‚ΠΎΡ‡Π½ΠΎΡΡ‚ΡŒΡŽ Π΄ΠΎ сантимСтров, Π° LLM ΠΈΠ½Ρ‚Π΅Ρ€ΠΏΡ€Π΅Ρ‚ΠΈΡ€ΡƒΠ΅Ρ‚ контСкст: Π½Π°ΠΏΡ€ΠΈΠΌΠ΅Ρ€, Ρ‡Ρ‚ΠΎ ΠΎΡ‡ΠΊΠΈ вСроятнСС Π»Π΅ΠΆΠ°Ρ‚ Π½Π° столС, Π° Π½Π΅ Π½Π° ΠΏΠ»ΠΈΡ‚Π΅. Π’Π΅Ρ€ΠΎΡΡ‚Π½ΠΎΡΡ‚ΡŒ нахоТдСния ΠΎΠ±ΡŠΠ΅ΠΊΡ‚Π° Π² ΠΊΠ°ΠΆΠ΄ΠΎΠΉ Π·ΠΎΠ½Π΅ оцСниваСтся числСнно, Ρ€ΠΎΠ±ΠΎΡ‚ ΠΏΡ€ΠΈΠΎΡ€ΠΈΡ‚Π΅Π·ΠΈΡ€ΡƒΠ΅Ρ‚ поиск ΠΏΠΎ «горячим Ρ‚ΠΎΡ‡ΠΊΠ°ΠΌΒ». Π’ тСстах ΡΡ„Ρ„Π΅ΠΊΡ‚ΠΈΠ²Π½ΠΎΡΡ‚ΡŒ поиска выросла Π½Π° ~30% ΠΏΠΎ ΡΡ€Π°Π²Π½Π΅Π½ΠΈΡŽ со случайным сканированиСм, Ρ‚ΠΎΡ‡Π½ΠΎΡΡ‚ΡŒ Π΄Π΅Ρ‚Π΅ΠΊΡ†ΠΈΠΈ ΠΈΠ·ΠΌΠ΅Π½Π΅Π½ΠΈΠΉ Π² сцСнС β€” ~95%.

Алгоритм ΠΎΠΏΡƒΠ±Π»ΠΈΠΊΠΎΠ²Π°Π½ Π² IEEE Robotics and Automation Letters, тСкущая вСрсия Ρ€Π°Π±ΠΎΡ‚Π°Π΅Ρ‚ с ΠΎΠ±ΡŠΠ΅ΠΊΡ‚Π°ΠΌΠΈ Π½Π° ΠΎΡ‚ΠΊΡ€Ρ‹Ρ‚Ρ‹Ρ… повСрхностях; поиск Π²Π½ΡƒΡ‚Ρ€ΠΈ ящиков ΠΈ ΡˆΠΊΠ°Ρ„ΠΎΠ² β€” Π² Ρ€Π°Π·Ρ€Π°Π±ΠΎΡ‚ΠΊΠ΅. Для ИВ-индустрии это сигнал: домашниС сСрвисныС Ρ€ΠΎΠ±ΠΎΡ‚Ρ‹ пСрСходят ΠΎΡ‚ Π½Π°Π²ΠΈΠ³Π°Ρ†ΠΈΠΈ ΠΊ сСмантичСскому пониманию срСды, Ρ‡Ρ‚ΠΎ Ρ‚Ρ€Π΅Π±ΡƒΠ΅Ρ‚ ΠΈΠ½Ρ‚Π΅Π³Ρ€Π°Ρ†ΠΈΠΈ ΠΊΠΎΠΌΠΏΡŒΡŽΡ‚Π΅Ρ€Π½ΠΎΠ³ΠΎ зрСния, NLP ΠΈ планирования Π΄Π²ΠΈΠΆΠ΅Π½ΠΈΠΉ Π² Π΅Π΄ΠΈΠ½Ρ‹ΠΉ стСк.