Mobil robot texnologiyası sürətlə hərəkət edir və generativ süni intellekt daha inteqrasiya olunmuş həlləri təmin etmək üçün AMR görmə sistemlərini çevirmək üçün bərkidilir.
Görmə sistemləri AMR-lərin çörəyi və yağıdır və texnologiya inkişaf etdikcə təkmilləşməyə davam edir. Şəkil: Adobe Stock
Qabaqcıl maşın öyrənməsi və vizual emal avtomatlaşdırılmış mobil robotun (AMR) inkişafında əsas tendensiyalardır. Gartner-in Emerging Tech Impact Radar-a görə, qabaqcıl kompüter görmə və süni intellekt sürətləndirilməsi yaxın iki il ərzində ən vacib təsir edənlər arasında olacaq.
“Son on ildə texnoloji təkmilləşdirmələr səbəbindən maşın görmə çox dəyişdi. Başlanğıc mərhələdə maşın görmə qaydaya əsaslanmışdı, bu hələ də çox səmərəlidir. Ancaq təxminən beş il əvvəl dərin öyrənmə dəqiqliyi və performansı yüksək dərəcədə təkmilləşdirdi. İndi generativ süni intellekt yenidən maşın görmə qabiliyyətini dəyişdirir “dedi Advantech-də Sənaye Bulud və Video Qrupunun AVP-si Magic Pao. 2023 Advantech Industrial IoT World Partner Conference, Taypei, Tayvanda.
Görmə AMR-lər üçün mürəkkəb mühitlərdə naviqasiya etmək, maneələrdən (insan işçilər də daxil olmaqla) qaçmaq və elementləri düzgün müəyyənləşdirmək və idarə etmək üçün vacibdir. AMR görmə sistemləri adətən aşağıdakılardan ibarətdir:
- Robotun ətrafının şəkil və video görüntülərini çəkən kameralar
- LiDAR və 3D sensorlar kimi digər sensorlar robota ətrafı anlamağa, dərinlik qavrayışını inkişaf etdirməyə və obyektləri aşkar etməyə kömək edir.
- Vizual və sensor məlumatlarını təhlil etmək üçün bort prosessoru. Bu prosessor verilənləri anlamlandırmaq, obyektləri müəyyən etmək, anomaliyaları aşkar etmək və robotun mövqeyini və oriyentasiyasını müəyyən etmək üçün kompüter görmə alqoritmlərini işlədir. O, həmçinin xəritələr yaratmaq və robotu xəritələr daxilində lokallaşdırmaq üçün eyni vaxtda lokalizasiya və xəritələşdirmə (SLAM) alqoritmlərini işlədə bilər.
- Mərkəzi idarəetmə sistemi kimi digər robotlara və ya sistemlərə məlumat göndərmək və qəbul etmək üçün rabitə interfeysi
AMR görmə sistemlərinin effektiv olması və insanlar ətrafında təhlükəsiz işləməsini təmin etmək üçün yüksək sürətli və aşağı gecikmə müddəti olmalıdır. Onlar həmçinin müxtəlif məsafələrə böyük həcmdə məlumat ötürmək və emal etmək üçün texnologiya tələb edir. Buna görə də, Gigabit Multimedia Serial Link (GMSL) texnologiyasına tez-tez üstünlük verilir, çünki o, kameralardan bort prosessoruna və xarici cihazlara və sistemlərə yüksək sürətli məlumat ötürülməsini asanlaşdıra bilər. O, həmçinin çoxlu sensorlar və mənbələrdən verilənlərin inteqrasiyasına imkan verir, daha mürəkkəb, real vaxt rejimində qərar qəbul etməyə imkan verir. Ən son nəsil, GMSL3, 12 Gbps-ə qədər sürəti dəstəkləyir və ana prosessorundan 15 m-ə qədər məlumat ötürə bilər.
Advantech-də Industrial Cloud və Video Group-un qabaqcıl kompüter görmə rəhbəri Jacky Liu, “Biz hesablama vahidimizi vizual imkanlarla gücləndirmək üçün texnologiyamız olaraq GMSL-i seçdik” dedi. “Bu, yeni texnologiya deyil və yüksək məlumat sürəti və uzun məsafəli ötürmə kimi xüsusiyyətlərlə artıq avtomobil sənayesində geniş istifadə olunub. Onun möhkəmliyi və məlumat bütövlüyü çətin mühitlərdə etibarlı əməliyyatı təmin edir və miqyaslılıq və sinxronizasiya çoxlu məlumat axınını idarə etməyə imkan verir. GMSL ilə hazırkı video çəkiliş kartımız eyni vaxtda səkkizə qədər kanalı, hətta 3D kameraları da dəstəkləyə bilər.”
2023-cü ilin əvvəlində Advantech, avtomatlaşdırılmış idarə olunan avtomobil (AGV) və AMR tətbiqləri üçün GMSL kamera və süni intellekt hesablama sistemində OEM kamera həlli təminatçısı olan e-con Systems ilə əməkdaşlıq etdi. MIC-733-AO NVIDIA Jetson AGX Orin əsaslı sənaye süni intellekt sistemidir. O, 275 TOP-a qədər yüksək süni intellekt performansına, 5G/4G bağlantısı üçün geniş çeşidli I/O interfeyslərinə və iki GMSL daxil olmaqla çoxsaylı video girişlərinə malikdir. e-con Systems şirkətinin GMSL kamerası video məlumatlarını uzun məsafələrə ötürür və həll birdən çox kameranı bir Jetson sisteminə birləşdirə bilər.
MIC-733-03 AI sistemi NVIDIA Jetson AGX Orin-ə əsaslanır və iki GMSL video girişini ehtiva edir. Şəkil: Advantech
“Bu gün bütün dəyər zənciri sıxılır və hər bir rol daha çox şeyi birləşdirməyə çalışır” dedi Pao. “Biz Advantech CamNavi SDK adlanan video çəkiliş proqramını NVIDIA ISAAC SDK və ROS2 (Robotic OS) ilə bir proqram paketinə inteqrasiya edirik. Biz onları təkcə əvvəlcədən quraşdırmırıq, həm də onları əvvəlcədən qururuq və əvvəlcədən öyrədirik. Onu robototexnika, AMR və kobotlar üçün uyğunlaşdırmaq üçün biz sadəcə tətbiqi proqram təminatını üstünə qoyub həlli işə salırıq”.
Ümumdünya Tərəfdaş Konfransındakı əsas panel zamanı Pao bunu təkrarladı generativ AI maşın görmə qabiliyyətini dəyişir və NVIDIA-nın generativ AI SDK MIC-733-AO-da hazırdır. Generativ AI ilə görmə sistemləri məlumatların artırılmasını, axtarış funksiyalarını və təsvirin yenidən qurulmasını təkmilləşdirə bilər. Məsələn, bir şirkətin element qüsurlarını və ya zədələrini dəqiq aşkar etmək üçün AMR-ni öyrətmək üçün kifayət qədər təsvirləri olmaya bilər. Bununla belə, generativ süni intellekt ilə sistemə nümunə olaraq bir neçə şəkil lazımdır və AMR-ni yenidən hazırlamaq üçün müxtəlif aspektləri olan çoxsaylı qüsurlu təsvirlər yarada bilər.
Magic Pao, Tayvanın Taypeyində 2023-cü ildə Advantech Industrial IoT World Partner Konfransında generativ süni intellektin maşın görmə texnologiyasını necə dəyişdirdiyini izah etdi. Şəkil: Advantech
Advantech-də Industrial Cloud və Video Group-un sənaye süni intellekt platforması meneceri Elvis Lee, “İncəsənət süni intellektin tərtibatçıdan tətbiqə qədər sürətləndirilməsi çox vacibdir” dedi. “GPU performansı 5 il əvvəllə müqayisədə 1000 dəfə, son 10 ildə isə məlumatlar 10.000 milyard dəfə artıb. Məlumat əvvəlki texnologiya ilə müqayisədə çox sürətlə hərəkət edir”.
Günortadan sonra panelə moderatorluq edərkən, Li NVIDIA-nın bu yaxınlarda AMR layihələrində hansı sensorlar və sensor interfeyslərdən istifadə etdiklərini anlamaq üçün müştərilərini sorğuladığını qeyd etdi. LiDAR sensorları və USB, MIPI, Ethernet və IR kameraları ən populyarlardandır. Qarışıq sensor inteqrasiyası da populyardır, lakin sürücü və uyğunluq problemləri və uzun inteqrasiya vaxtları layihələri gecikdirə bilər.
“GMSL ardıcıl kamera parametrləri məlumat strukturunu müəyyən etmir, buna görə də insanlar GMSL çəkmə kartı ilə cihaz arasında uyğunluğu təmin etmək üçün çoxlu layihə vaxtını sərf edirlər” dedi Liu Liun panelində. “Hazırda biz kamera parametr profilinin müəyyənləşdirilməsi üzərində işləyirik və onu 2024-cü ilin ikinci yarısına qədər bölməmizə inteqrasiya etməyi planlaşdırırıq. İnanırıq ki, bu, müştərilərə asanlıqla kamera seçməyə, layihənin ümumi vaxtını qısaltmağa və konfiqurasiyanı daha çevik etməyə kömək edəcək. .”
Advantech inteqrasiya səylərində tək deyil və Paonun qeyd etdiyi kimi, geniş yayılmış sənaye təsirini görmək üçün bütün dəyər zəncirini tələb edir. “Bütün dəyər zənciri çox uzundur. Əgər çip satıcısından, sistem istehsalçısından, sistem inteqratorundan və son istifadəçiyə doğru başlasanız, bu, uzun bir səyahət deməkdir”.
Məsələn, konfransın ikinci günündə Movensys-in baş direktoru Pyong W. Pak öz şirkətinin AGV və AMR-lər üçün hamısı bir yerdə proqram nəzarətçi platforması və onun mühəndislər üçün qapıları necə açması haqqında danışdı.
“Müştərilərimizdən eşitdiyimiz bir şey budur ki, görmə mühəndisləri hərəkətə nəzarət haqqında, hərəkətə nəzarət mühəndisləri isə görmə haqqında bilmirlər. Beləliklə, biz görmə və hərəkətə nəzarəti birləşdirən hamısı bir yerdə həll üzərində işləyirik” dedi Pak.
Pak həmçinin qeyd edib ki, Interact Analysis-ə əsasən, 2027-ci ilə qədər dünyada dörd milyondan çox mobil robot quraşdırılsa da, o vaxta qədər anbarların yalnız 14%-i ən azı bir AMR yerləşdirəcək. Bununla belə, görmə texnologiyası inkişaf etdikcə və daha çox şirkət inteqrasiyaya üstünlük verdikdə, qəbul etmə maneələri aradan qalxa və daha çox anbar üçün qabaqcıl avtomatlaşdırmanı reallığa çevirə bilər.
Advantech
advantech.com
Siz həmçinin bəyənə bilərsiniz:
Aşağıda verilmişdir: Anbarın avtomatlaşdırılması, AI • maşın öyrənməsi, Görmə • maşın görmə • kameralar + linzalar • çərçivə tutucuları • optik filtrlər
Tagged with: Advantech