Rockchip пуска технология за AI ISP/интелигентно кодиране/сплайсинг с много очи за машинно зрение, за да насърчи подобренията на цифровия интелект в различни индустрии

- 2023-08-21-

Наскоро Rockchip пусна три основни технологии за машинно зрение, базирани на флагмана RK3588 и серия от процесори за зрение RV1126, RV1109 и RV1106: зашиване с няколко очи, AI ISP и интелигентно кодиране, които цялостно подобряват производителността на AI и качеството на изображението на крайните продукти и ефективност на кодирането, което позволява интелигентни надстройки в множество области и сценарии като индустриално производство, безопасен град, офис, образование и интелигентен дом.



Три нови визуални технологии за цялостно подобряване на качеството на изображението и ефективността на кодиране

Решението за шевове с множество камери, базирано на RK3588, RV1126 и RV1106, може да отговори на различни изисквания към продукта. RK3588 решение за снаждане с много очи, с двойна 24M ISP възможност за обработка, вграден ISP3.0, разработен от Rockchip, надграден HDR синтез и многостепенен алгоритъм за намаляване на шума, може да реализира подробните изисквания за производителност на високо динамични сцени и ефекти за нощно виждане в сцени със звездна светлина Изисквания; поддържа 2~6 мрежи на входа на сензора, което позволява панорамни шевове; поддържа 8K@30fps H264/265 кодиращ изход, висока разделителна способност и гладко видео заснемане; вграден многоядрен NPU, осигуряващ до 6TOPS изчислителна мощност, отговарящ на изискванията за видео структура на сложни IPC сцени от висок клас. Решенията за бинокулярно шиене RV1126 и RV1106 поддържат хоризонтално FOV 170-градусово шиене, а разделителната способност поддържа съответно 4M25 кадъра и 2M15 кадъра. Сред тях решението за снаждане на бинокъл RV1106 е предпочитаното решение с висока производителност на пазара. Производителност на ChipStitching RK35884 мрежа 8M30 рамки8 мрежа 4M30 рамкаRV1126 Бинокъл 4M25 рамкаRV1106 Бинокъл 2M15 рамка.


Решението RV1126/RV1109 AI ISP има два вградени основни алгоритъма, намаляване на шума при слаба светлина и интелигентно подобрение. Намаляването на шума при слаба светлина се основава на алгоритми за изкуствен интелект, а дълбокото обучение се извършва върху данните за шума на картината на видеоклипове и снимки; интелигентното подобрение прави детайлите по-ясни чрез супер възприятие на детайлите и адаптивно подобряване на текстурата. Въз основа на характеристиките на двата типа алгоритми, решението RV1126/RV1109 IPC може да накара продукта да покаже очевидни предимства в различни сложни светлинни среди, като среда с ниска осветеност и слабо осветяване, като все още не показва размазване, нисък шум и по-ясни снимки.


RV1106 схема за интелигентно кодиране, със супер производителност на кодиране, има за цел да предостави на клиентите осъществимо решение с изключително ниска битрейт. Има три предимства. Първо, изходният битрейт варира динамично според сложността на сцената и съотношението на ROI, което може да подобри качеството на изображението на ROI и да запази непроменено качеството на изображението на не-ROI. Побитовата скорост е значително намалена, за да се спести честотна лента на предаване; второ, качеството на изображението е гарантирано субективно без загуби, като същевременно се намалява битовата скорост. След сравнение на GOP на открито и действително измерване, при предпоставката за една и съща побитова скорост в една и съща сцена, решението RV1106/RV1103 има по-добро качество на картината в сравнение с други решения на пазара и ефектът от конвергенцията на петна от движение е по-добър; трето, статичен В сцената битрейтът се запазва адаптивно. При тестови условия на 1440P 15 кадъра в секунда, битрейтът е повече от 20 пъти по-нисък от този на конвенционалния режим. Заснеманата картина е с висока разделителна способност и обемът на видеото е по-малък, което може да спести място за съхранение и да осигури гладко възпроизвеждане на видео в слаба мрежова среда.


Серията решения за машинно зрение на Rockchip попадат в различни индустрии

За приложения за промишлено зрение продуктите, използващи чипове Rockchip RK356X и RV1126, включват главно четци за интелигентни кодове, камери за промишлени инспекции и оборудване за 3D печат. Продуктите за индустриални камери, базирани на собствено разработените ISP и NPU характеристики на Rockchip, могат лесно да разрешат повреда на баркод, замъглено отпечатване, нисък контраст и изключително малки баркодове и други проблеми с четенето на кодове, точно и надеждно придобиване на информация за баркод.



Оборудването за 3D печат, оборудвано с RV1126, може да поддържа AI автоматизация в реално време на ключови стъпки в процеса на печат (напълно автоматично нивелиране с двойно излишък, AI сканиране на първи слой, откриване на пържени юфка), вграден лазерен радар за милиметрово ниво измерване, скорост на печат 500 mm/s, Осигурете на потребителите безпрецедентно интелигентно изживяване при печат.




За преден край и приложения за визуализация отпред,

IPC, батерийният IPC, интелигентният звънец, интелигентната камера и други продукти, използващи решението за машинно зрение от ново поколение RV1106 и RV1103 на Rockchip, са зряло приложени в дома, общността, управлението на градския трафик и други сценарии. Формулярът на продукта обхваща бинокулярна машина "всичко в едно" за свързване на пистолет-топка, машина за накланяне и накланяне, машина за пистолет и др.



NVR решението, базирано на RK3588, е пуснато в търговска употреба в основните марки терминали на пазара. Може да поддържа 32-канално 1080P30 H.264/H.265 видео декодиране, 24-канално периметърно откриване и 32-канално интелигентно динамично откриване; с пакет от алгоритми RockIVA, той поддържа модели за разпознаване на лица до ключ, откриване на периметър, интелигентно откриване на движение (хора и превозни средства).

Приложения за контрол на вход и изход, терминални приложения, оборудвани с интелигентни решения за порта за контрол на достъпа RV1126 и RV1109, главно под формата на машини за контрол на достъпа за разпознаване на лица, видео звънци и машини за проверка на свидетели всичко в едно. Решението има вграден висококомпютърен NPU, който може да реализира по-бързо и по-точно разпознаване на лица, разпознаване на маски и статистически данни за пътническия поток. Поддържа откриване на живо с точност до 98,48%. Той може ефективно да разграничава снимки с висока разделителна способност, PS, 3D модели, електронни екрани, промяна на лицето и други фалшиви и измамни дейности, за да гарантира безопасността на офиса.


AI + технологията за машинно зрение дава възможност на сцената и се превърна в единствения начин за интелигентно надграждане във всички сфери на живота. Rockchip ще продължи да работи усилено по новата линия на машинното зрение и ще продължи да предоставя високопроизводителна, високостабилна AIoT чип технология и перфектна софтуерна и хардуерна техническа поддръжка за безопасни градове, интелигентни общности, интелигентен транспорт, интелигентно офис образование и други полета.