【虹科案例】 一台智能相機無需PC通過人工智能实現自動化拾取

admin

虹科智能感知奇迹部專注于智能感知與呆板視觉范畴，已和IDS，Blickfeld和Gidel等有偏重要职位地方的國际公司開展深度的技能互助。咱们的解决方案包含3D激光雷達，工業相機，視觉处置平台，圖象收集卡及視觉體系集成等。虹科的工程师踊跃介入國表里專業协會和同盟的勾當，咱们很是器重技能培训和堆集，公司按期與國表里專家團队举行交换和培训。

AI速率快，耐用，毛病极低，不必要停息。因為這些长处，在必需延续高效力和高質量履行事情流程的范畴，AI比人類更有上風。人们但愿在呆板視觉情况中利用AI與呆板人技能举行交互，以提高流程效力和本錢效益。“視觉指导呆板人”用例展現了典范的取放使命，在不利用PC的环境下经由過程呆板人和嵌入式AI視觉相機实現智能主動化。

對付“智能抓取”，分歧學科必需以最好方法互治療跟腱炎,助。举個例子来讲，要利用呆板人對分歧巨细、外形、質料或質量的產物举行分類，那末不单要举行抓取，還必需事前举行辨認、阐發和定位。對付基于法则的圖象处置體系，這凡是不但很是耗時（处置小批量使命時特别紧张），并且在经济效益上说几近不成行。可是，工業呆板人與基于AI的推理連系後，已具有了纯熟工人所需的技術和產物常識。究竟上，再也不必要為单個子使命從新設計方案。只必要讓符合的產物以跨學科的方法有用协同事情，组成一個“智能呆板人視觉體系”，就足够應答這种使命。

01

智能拾取用例

在出產線中，物體随機分布在傳送带上。必需检测、選擇工具，按照必要将其放入包装中，或将其通报到准确的位置，以便举行進一步的处置或阐發。虹科互助火伴開辟了一种基于PC的解决方案，用于检测物體和節制呆板人。他们练習的AI模子可以或许辨認相機圖象中物體的位置和標的目的，從而肯定呆板人的抓取坐標。如今的方针是将该解决方案迁徙到虹科的基于AI的嵌入式視觉體系。對付他们来讲，解决方案中最首要的两大概求是：

（1）用户應當在不必要特别AI專業常識的环境下，轻松针對分歧用例调解體系。這象征着，即便出產情况產生一些變革，比方照明、工具的外觀產生變革，乃至增长了其他工具類型，體系仍然可以阐扬感化。

（2）实現装备组件之间的直接通讯，使全部體系可以完全解脱對PC的依靠，從而减小本錢、低落重量并節流空间。

虹科推出的IDS NXT ocean推理相機體系可以知足這两項请求。

02

位置检测和呆板通讯

颠末练習的神经收集辨認圖象中的所有工具，并检测它们的位置和標的目的。AI不但能处置外觀連结稳定的固定工具，也合用于存在大量天然變革的环境，比方食品、植物或其他柔性物體。這使得物體的位置和標的目的辨認很是不乱。咱们可使用本身的软件和常識為客户练習收集，然後将其上傳到虹科的智能相機。要做到這一点，必需水泡疹藥膏,将它轉化成一种特别的优化格局，雷同于一种“链表”。借助虹科供给的Ferry东西，将练習好的神经收集移植到推理相機中就變得很是轻易。在這個進程中，CNN收集的每层都成為一個節点描写符，這類描写符可以切确描写每层。终极的成果因此二進制暗示的CNN的完备串連列表。CNN加快器是專門為该相機開辟的，以FPGA為根本，很是合适履行這個通用CNN。

然後，虹科開辟的視觉利用按照检测数据计较呆板人的最好抓取位置。但這還不敷。除抓取甚麼、在哪里和若何抓取的成果外，智能相機和呆板人之间還必需創建直接通讯，不该低估這項使命的首要性。這凡是是决议解决方案必要投入几多時候、款項和人力的關头身分。咱们经由過程虹科Vision App Creator在相機的視觉利用中实現了基于XMLRPC的收集协定，可以将详细的事情指令直接通报给呆板人。终极的AI視觉利用能在约莫200毫秒内检测到物體，并实現了+/-2度的定位精度。

虹科智能相機中的神经收集定位并检测物體的正确位置

呆板人可以按照這些圖象信息，自力取放這些物體

03

解脱對PC機的依靠，实現人工智能

這個用例的凸起的地方不但仅是人工智能，這個解决方案彻底可以在没有PC的环境下事情。這一点有两個方面的上風。起首，因為相機自己不但仅傳送圖象，更可以天生圖象处置成果，如许便可以省去PC硬件和所有相干根本举措措施。终极可以低落體系的購買和保护本錢。但是，凡是环境下，直接在出產現場做出流程决议计划也很首要，也就是要知足“实時”的请求。如许，體系便可以更快地履行後续处置，并解除延迟，這在某些环境下還可以或许提高時钟频率。

其次，這類方法可以低落開辟本錢。AI視觉或神经收集练習的事情方法與基于法则的经典圖象处置彻底分歧，這也扭轉了圖象处置使命的法子和处置方法。终极質量再也不由圖象处置專家和利用開辟职员人工開辟的步伐代码决议。换句话说，若是可以基于AI实現一個利用，虹科智能相機方案還可以節流响應專家的本錢和時候，由于有了用户友爱的周全软件情况，每一個用户群均可以练習一個神经收集，設計响應的視觉利用，并在相機上履行。

该用例展現了计较機視觉若何成為無PC的嵌入式AI視觉利用。基于視觉利用的觀点的可扩大性、针對分歧方针群體的利用開辟和端到端出產商支撑也是小型嵌入式體系的上風。有了智能相機，便可以在利用中清晰分派各類能力。用户的注重力可以集中在他的產物上，而咱们则專注于练習和运行AI，以举行圖象处置和節制呆板人。另外一個上風是，经由過程基于以太網通讯和開放式平台，視觉利用還可以轻松顺應其他物體、其他呆板人模子，從而顺應很多其他雷同利用。

，時长00:28

一體化推理小體积智能相機——虹科NXT rio GS18031C-HQ

虹科NXT rio GS1803新冠肺炎檢測試劑,1C-HQ工業推理相機，采纳Sony IMX265LQR-C CMOS傳感器，像素達300万，帧率為20fps，自带128M圖象内存。咱们供给的NXT工業相機平台，可以实現當地圖外送茶,象处置。可用于实現視觉解决最新娛樂城,方案的所有步调，從圖象收集、圖象阐發與处置到工業出產装备的節制。咱们可以供给包含硬件、软件和根本举措措施在内的所有相干技能@常%71953%識和支%331A4%撑@，用户只需具有利用場所相干的專業常識和样本圖象便可搭建神经收集。借助云软件平台Lighthouse，即便是没有人工智能常識的用户，也能操纵本身的圖象数据来练習AI分類器或是物體检测器。Lighthouse是一款Web利用步伐，用户可立即利用它的所有功效和根本架構。即用户無需事前搭建小我開辟情况，直接可以起头练習他们專属的神经收集。神经收集练習只需三步：上傳样本数据，给圖象贴上標签，然後按一下按钮便可建立所需收集。天生的收集可以直接在NXT相機上运行，将其酿成推理相機——象征着他们能将深度進修所得到的常識，利用到新的数据中。因為NXT相機具备特别的AI处置器，是以神经收集能由硬件加快，并直接在装备上运行。

想要领會更多信息

接待拨打400-999-3848

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.