Amlogic A311D SoC가 탑재 된 Jevois Pro 소형 AI 카메라는 최대 13 TOPS (크라우드 펀딩)를 제공합니다. : 사물인식 카메라

Amlogic A311D SoC가 탑재 된 Jevois Pro 소형 AI 카메라는 최대 13 TOPS (크라우드 펀딩)를 제공합니다.

 

Jevois-A33 스마트 카메라는 컴퓨터 비전 애플리케이션 용으로 설계된 Allwinner A33 프로세서가 장착 된 작은 Linux 카메라로 2016 년에 발표되었습니다. 다음 해에 컴퓨터 비전 카메라 를 검토 할 기회가 있었는데 컴퓨터 비전 에 대해 배우는 데 사용하는 것이 즐거웠습니다. 많은 예가 있지만 처리를 위해 CPU에 의존했기 때문에 지연으로 인해 모든 프로젝트에 적합하지 않았을 것입니다. 예를 들어 객체 감지에는 추론 당 약 3 초가 걸리고 Yolo V3는 500ms가 걸렸습니다.

 

그러나 시간이 지났고 컴퓨터 비전 및 AI 분야에서 큰 진전이 이루어졌으며 이제는 일반적으로 내장형 NPU 또는 AI 가속기 카드로 처리됩니다. 그래서 JeVois Pro 딥 러닝 카메라는 5 TOPS NPU를 특징 으로하는 Amlogic A311D 프로세서 와 함께 출시되었으며 Myriad X 또는 Google Edge TPU M.2 카드를 통해 최대 13 개의 TOPS를 지원합니다.

JeVois Pro 사양 :

• 4x Cortex-A73 코어 @ 2.2GHz, 2x Cortex-A53 코어 @ 1.8GHz, 쿼드 코어 Mali G52 MP4 GPU @ 800MHz 및 5 TOPS NPU (Neural Processing Unit)를 갖춘 SoC- Amlogic A311D 헥사 코어 프로세서 .
• 시스템 메모리 – 4GB LPDDR4-3200
• 스토리지 – 운영 체제, 소프트웨어 및 데이터를위한 MicroSD 카드 슬롯.
• 카메라
  • 내장 2MP Sony IMX290이면 조사 형 Starvis 센서, 1 / 2.8”, 12mm 렌즈, 최대 120fps에서 1920x1080, 롤링 셔터, 넓은 동적 범위 지원.
  • 맞춤형 카메라 센서 커넥터, 1 개 또는 2 개의 센서, 4x MIPI-CSI + IMU를 지원합니다.
• 비디오 및 오디오 출력 – HDMI 2.1 최대 4k @ 60Hz.
• USB – 2x USB 2.0 포트, 1x 미니 USB OTG 포트
• 센서 – 7MHz에서 SPI 버스를 통해 연결된 3 축 가속도계, 3 축 자이로, 3 축 나침반이있는 TDK InvenSense ICM-20948을 카메라 센서와 동기화 할 수 있습니다.
• 확장
  • 2230 PCIe x1 / USB / SDIO / PCM / UART 추가 카드 (Coral TPU, WiFi 등) 용 M.2 E-Key 슬롯은 eMMC 플래시를위한 맞춤형 JeVois 확장을 지원합니다. (참고 : PCIe x2는 지원되지 않음).
  • 8 핀 GPIO 포트 (I2C + SPI 또는 6x GPIO + GND + I / O 전압 선택).
• 디버깅 – 4 핀 UART (직렬 콘솔) 포트.
• 전원 공급
  • 입력 – 최대 30 와트의 DC 잭을 통한 단일 6-24 VDC 입력
  • 5V, 3.3V 및 1.8V 주변기기 용 6 핀 보조 전원 출력.
  • 전력 소비
    • 유휴 : 3W
    • NPU의 YOLOv2 : 5.3 와트
    • 아래 비디오와 같이 CPU + NPU + TPU + VPU 쿼드 YOLO / SSD 데모 실행 : 12W.
• 크기 – 50 x 50 x 45mm (렌즈 제외)
• 무게 – 케이스, 팬, 방열판 포함 80g. 전자 제품 만 : 40g

AI 카메라는 다음 소프트웨어 패키지가 포함 된 Ubuntu 20.04 LTS aarch64를 실행합니다.

• OpenCV (최신) + OpenVino + 모든 기여 및 Python 바인딩이 사전 설치되어 있습니다.
• 30 개 이상의 머신 비전 모듈이 사전 설치된 JeVois Core 라이브러리 (OpenCV 데모, QR 코드 인식, 물체 감지, 사람 / 얼굴 감지, 물체 추적, 주사위 핍 계산 등)
• OpenGL ES 3.2, Vulkan 1.0, OpenCL 2.0, Coral Edge-TPU 라이브러리.
• Python 3.8 + numpy + scipy가 사전 설치되어 있습니다.
• Boost, Eigen, ImGui, glm 및 기타 여러 C ++ 라이브러리가 사전 설치되어 있습니다.

Amlogic A311D 카메라는 TensorFlow-Lite 2.5, Caffe, ONNX, MxNet 및 Darknet 딥 러닝 프레임 워크와 호환됩니다. 사전 설치된 머신 비전 모듈 외에도 C ++ 또는 Python의 머신 비전 파이프 라인을 사용하여 JeVois-Pro 내부에서 실행되도록 사용자 지정 딥 러닝 모델을 가져 오거나 설계 할 수도 있습니다. 소프트웨어 개발 및 테스트는 JeVois Pro 카메라 용 프로그램을 교차 컴파일하기 전에 Linux 컴퓨터에서 먼저 수행 할 수 있습니다.

이 코드는 이미지의 제로 카피를위한 DMABUF와 오버레이 및 GUI를 그리는 OpenGL에 의해 성능에 최적화되었습니다. 카메라의 성능을 파악하는 가장 좋은 방법은 아래 비디오를 보는 것입니다. 쿼드 뷰 데모에서도 모든 것이 카메라에서 렌더링됩니다. 내장 된 5 TOPS NPU는 꽤 잘 작동하며 일부 데모에서만 CPU를 사용하는 것보다 30 배 이상의 성능을 제공 할 수 있습니다.

 

https://youtu.be/aJp-mIBytno

 

JeVois Pro는 오픈 소스 프로젝트이며, 크라우드 펀딩 캠페인이 끝나면 소프트웨어 및 하드웨어 회로도를 포함한 모든 리소스가 공개됩니다. 개발 진행 상황 은 JeVois 문서 웹 사이트에서 확인할 수 있으며, 여기에서 이전 JeVois-A33 카메라에 대한 문서에도 액세스 할 수 있습니다.

 

JeVois는 6 만 달러의 자금 지원 목표를 가지고 Kickstarter 에서 새로운 Pro 카메라 를 출시했습니다 . 보상은 카메라, 64GB MicroSD 카드, 마이크로 HDMI-HDMI 어댑터, GPIO 케이블, 최대 9TOPS의 결합 된 AI 처리 능력을위한 Coral Edge TPU 카드가 포함 된 스타터 키트의 경우 $ 379부터 시작됩니다. 유일한 다른 보상은 $ 999에 JeVois Pro 스타터 키트 3 개 팩입니다. 미국은 배송비가 무료이지만 나머지 국가에는 39 달러가 추가됩니다. 후원자는 지연을 제외하고 2021 년 9 월에 특전이 배송 될 것으로 예상해야합니다. 13 TOPS는 Kickstarter 캠페인에서 제공되지 않는 이중 Google Edge TPU M.2 모듈로만 달성 할 수 있습니다.

 

https://www.cnx-software.com/2021/07/01/jevois-pro-small-ai-camera-amlogic-a311d-13-tops/

Jevois Pro small AI camera with Amlogic A311D SoC offers up to 13 TOPS (Crowdfunding) - CNX Software

 

 

사물인식카메라