視頻會議系統由視頻會議終端、視頻會議服務器（MCU，Multipoint Control Unit）、網絡管理系統和傳輸網絡四部分組成。

1） 視頻會議終端

位于每個會議地點的終端，其主要工作是將本地的視頻、音頻、數據和控制信息進行編碼打包并發送；對收到的數據包解碼還原為視頻、音頻、數據和控制信息。

終端設備包括視頻采集前端（廣播級攝像機或云臺一體機）、顯示器、解碼器、編譯碼器、圖像處理設備，控制切換設備等。

2）視頻會議服務器（MCU）

作為視頻會議服務器，MCU為兩點或多點會議的各個終端提供數據交換、視頻音頻處理、會議控制和管理等服務，是視頻會議開通必不可少的設備。三個或多個會議電視終端就必須使用一個或多個MCU。MCU的規模決定了視頻會議的規模。

3）網絡管理系統

網絡管理系統是會議管理員與MCU之間交互的管理平臺。在網絡管理系統上可以對視頻會議服務器MCU進行管理和配置、召開會議、控制會議等操作。