연구진이 다양한 비전 트랜스포머(ViT) 모델을 엣지 환경에서 효율적으로 실행하기 위한 FPGA 가속기 FlexViT를 개발했어요.
FlexViT는 SECDA-TFLite 프레임워크 기반으로, 완전 연결층과 컨볼루션층을 통합하여 INT8 GEMM 엔진으로 매핑하고, 런타임 im2col 변환을 사용해요.
PYNQ-Z2 FPGA에 구현된 FlexViT는 CPU만 사용할 때보다 최대 1.4배의 속도 향상을 달성했으며, 관련 코드는 GitHub에서 확인할 수 있어요.