Treba potvrdiť, že robotická technológia urobila za posledné roky veľký pokrok, sú šikovnejší s prítomnosťou umelej inteligencie, šikovnejší vďaka presnej mechanickej technológii aj automatizácii. Pokiaľ však ide o niektoré hĺbkové úlohy, ako je klasifikácia objektov podľa farby, nie veľa robotických systémov to dokáže.
Zmätok robota v rozpoznávaní farieb, najmä s priehľadnými predmetmi, ako sú sklenené fľaše a plastové fľaše, často pramení z vybaveného hĺbkového kamerového systému. Tieto kamerové systémy vyžarujú infračervené svetlo na objekt, aby zistili jeho tvar. Na nepriehľadných predmetoch to funguje celkom správne. Ak sú však umiestnené pred priehľadným predmetom, svetlo bude presvitať priamo a rozptýli reflexné plochy, čím sa výrazne sťaží výpočet tvaru predmetu a tým sa výrazne zníži aj presnosť.
Na vyriešenie vyššie uvedeného problému našli výskumníci z Carnegie Mellon University celkom jednoduché riešenie: Použite dodatočnú farebnú kameru integrovanú AI. Konkrétne tento nový systém využíva kombináciu farebných kamier a algoritmov strojového učenia na rozpoznanie tvaru objektov na základe ich farby.
Tím trénoval systém, aby bol schopný kombinovať snímky rozmazaných objektov pomocou hĺbkovej kamery a farebné snímky tej istej položky. To umožňuje AI algoritmu odvodiť rôzne 3D tvary z obrázkov zachytených fotoaparátom a potom poukázať na funkcie, ktoré pomáhajú rozlíšiť objekty.
Vďaka tejto metóde dokáže robot rozlíšiť a zachytiť lesklé, priehľadné predmety, aj keď sú v neusporiadanej hromade, ako môžete vidieť na videu nižšie:
Výskumný tím priznáva, že ich systém ešte nie je kompletný, pretože presnosť stále nie je na dokonalej úrovni. Časom sa to však dá úplne zlepšiť.