而FIT双芯互联的最直策应用,便是vivo最善于的算计拍照了。
因为传统ISP的滤波器集体是手工妄图的,虽然能以极低延时处置大度的数据流水,不过只可束缚已知的、一定的课题。
那么对付那些繁复、未知的课题来讲,最佳的束缚规划便是救济于人工智能。
不过,当你把AI软件算法摆设到NPU上时,就须要以帧或块为单元施行处置记号。比拟之下,传统的ISP却是以动作单元。
与此同时,因为绝大全体平台SoC片上SRAM容量有限,大度AI算法正在接入ISP 管道后,要经过外部DDR来告竣数据暂存以及交互。
这就会形成运算与数据结合,埋葬了高机能AI运算相当主要的Data-Locality要求,进一步升高了机能。
为领会决这一课题,vivo正在自研芯片V2上,把传统的ISP架构进级为AI-ISP架构。
进而经过FIT双芯互联,第一次将平台ISP-NPU与自研芯片V2的ISP-DLA算作一个大伙,妄图出了今朝来讲最正当的AI算法处置架构。
而这,也是正在异构多芯片算计方进取,迈出的相当主要的第一步。