當虹科技發布多模態視聽大模型BlackEye

格隆匯4月28日｜據當虹科技消息，在4月27日下午召開的“2024中關村論壇·超高清視聽科技創新發展論壇”上，當虹科技與北京經濟技術開發區聯合發布BlackEye大模型基座及應用場景。BlackEye融合了多種深度神經網絡組件，包括Transformer、Diffusion等組件，通過文本、圖像、視音頻、三維模型等多種模態的編碼、解碼、多模態潛空間對齊、多模態語言推理及生成等技術，實現不同模態信息之間的推理和預測生成。