多媒體系統

從狹義上分，多媒體系統就是擁有多媒體功能的計算機系統；

從廣義上分，多媒體系統就是集電話、電視、媒體、計算機網路等於一體的信息綜合化系統。

多媒體系統由兩部分組成：1、多媒體硬體系統；2、多媒體軟體系統。其中硬體系統主要包括：計算機主要配置和各種外部設備以及與各種外部設備的控制介面卡（其中包括多媒體實時壓縮和解壓縮電路），軟體系統包括多媒體驅動軟體、多媒體操作系統、多媒體數據處理軟體、多媒體創作工具軟體和多媒體應用軟體。

Android的多媒體系統主要包括Java框架層，C語言框架層（Media API）以及OpenCore。Java框架層上面和Java應用層相連，Java框架層和C語言框架層的中間是Java本地調用部分（Media JNI）。Android多媒體部分的C語言部分的核心是media庫，它主要提供了媒體播放器和媒體記錄器的框架。media庫向上層通過JNI提供介面，下層通過Packet Video等實現。

概述

多媒體信息包括文本、圖形、圖像、聲音、影視、動畫等多種不同的形式，不同類型的媒體由於內容和格式的不同，相應的內容管理和處理方法也不同，存儲量的差別也很大。

文字

文字是人們在現實世界中進行通信交流的主要形式，也是人與計算機之間進行信息交換的主要媒體。在計算機中，文字用二進位的編碼表示，即使用不同的二進位編碼來代表不同的文字。常用的文字包括西文與漢字。

(1)西文字元編碼。在計算機中，西文採用ASCII(American Standard Code for Information Interchange，美國信息交換標準代碼)碼錶示。ASCII碼包括大小寫英文字母、標點符號、阿拉伯數字、數學符號、控制字元等共128個字元，一個ASCII碼佔一個位元組，用7位二進位數編碼組成。

(2)漢字編碼。漢字編碼包括：漢字的輸入編碼、漢字內碼和漢字字模碼。

①漢字的輸入編碼。西文可以直接通過鍵盤輸入到計算機中，而漢字則不同，要使用鍵盤輸入漢字，就必須為漢字設計相應的輸入編碼方法，如微軟拼音輸入法、五筆字型輸入法等。

②漢字內碼。不管用什麼編碼輸入漢字，每個漢字在計算機內部都由唯一的編碼～漢字內碼來表示，漢字內碼是用於漢字信息的存儲、交換、檢索等操作的機內代碼。當前的漢字編碼有二位元組、三位元組甚至四位元組的。其中GB231280(國家標準信息交換用漢字編碼，簡稱國標碼)是二位元組碼，用兩個7位二進位數編碼表示一個漢字。在計算機內部，漢字編碼和西文編碼是共存的，為了能夠相互區別，國標碼將兩個位元組的最高位都規定為1，而ASCII碼所用位元組的最高位為0，然後由軟體(或硬體)根據位元組最高位來判斷。

③漢字字模碼。字模碼是用點陣表示的漢字字形代碼，它是漢字的輸出形式。根據漢字輸出的要求不同，點陣的多少也不同。簡易漢字為16×16點陣，提高型漢字為24×24點陣、32×32點陣，甚至更高。因此字模點陣的信息量是很大的，所佔存儲空間也很大。例如16×16點陣的每個漢字要佔用32個位元組，而32×32點陣的每個漢字要佔用128個位元組。

由此可見，漢字的輸入編碼、漢字內碼、字模碼是計算機中用於輸入、內部處理、輸出三種不同用途的編碼。

傳統的文字輸入方法是利用鍵盤進行輸入，可以通過手寫輸入設備直接向計算機輸入文字，也可以通過光學符號識別(OCR)技術自動識別文字進行輸入。較理想的輸入方法是利用語音進行輸入，讓計算機能聽懂人的語言，並將其轉換成機內代碼，同時計算機可以根據文本進行發音，真正地實現“人機對話”，這正是多媒體技術需要解決的問題。

圖形

圖形是指由點、線、面以及三維空間所表示的幾何圖。在幾何學中，幾何元素通常用矢量表示，所以圖形也稱矢量圖形。矢量圖形是以一組指令集合來表示的，這些指令用來描述構成一幅圖所包含的直線、矩形、圓、圓弧、曲線等的形狀、位置、顏色等各種屬性和參數。

圖像

圖像是一個矩陣，其元素代表空問的一個點，稱為像素(Pixel)，每個像素的顏色和亮度用二進位數來表示，這種圖像也稱為點陣圖。對於黑白圖用1位值表示，對於灰度圖常用4位(16種灰度等級)或8位(256種灰度等級)來表示某一個點的亮度，而彩色圖像則有多種描述方法。點陣圖圖像適合於表現比較細緻、層次和色彩比較豐富、包含大量細節的圖像。

聲音

聲音是多媒體信息的一個重要組成部分，也是表達思想和情感的一種必不可少的媒體。聲音主要包括波形聲音、語音和音樂三種類型。聲音是一種振動波，波形聲音是聲音的最一般形態，它包含了所有的聲音形式；語音是一種包含豐富的語言內涵的波形聲音，人們對於語音，可以經過抽象，提取其特定的成分，從而達到對其意義的理解，它是聲音中的一種特殊媒體；音樂就是符號化了的聲音，和語音相比，它的形式更為規範，如音樂中的樂曲，樂譜就是樂曲的規範表達形式。

影視

人類的眼睛具備一種“視覺停留”的生物現象，即在觀察過物體之後，物體的映像將在眼睛的視網膜上保留短暫的時間。因此，如果以足夠快的速度不斷播放每次略微改變物體的位置和形狀的一幅幅圖像，眼睛將感覺到物體在連續運動。影視(Video)系統(如電影和電視)就是應用這一原理產生的動態圖像。這一幅幅圖像被稱為幀(Frame)，它是構成影視信息的基本單元。

傳統的廣播電視系統採用的是模擬存儲方式，要用計算機對影視進行處理，必須將模擬影視轉換成數字影視。數字化影視系統是以數字化方式記錄連續變化的圖像信息的信息系統，並可在應用程序的控制下進行回放，甚至可以通過編輯操作加入特殊效果。

動畫

動畫和影視類似，都是由一幀幀靜止的畫面按照一定的順序排列而成，每一幀與相鄰幀略有不同，當幀以一定的速度連續播放時，視覺暫留特性造成了連續的動態效果。

計算機動畫和影視的主要差別類似圖形與圖像的區別，即幀畫面的產生方式有所不同。計算機動畫是用計算機表現真實對象和模擬對象隨時間變化的行為和動作，是利用計算機圖形技術繪製出的連續畫面，是計算機圖形學的一個重要的分支；而數字影視主要指模擬信號源(如電視、電影等)經過數字化后的圖像和同步聲音的混合體。在多媒體應用中有將計算機動畫和數字影視混同的趨勢。

超文本與超媒體

在當今的信息社會，信息不斷地迅猛增加，而且種類也不斷增長，除了文本、數字之外，圖形、圖像、聲音、影視等多媒體信息已在信息處理領域佔有越來越大的比重；如何對海量的多媒體信息進行有效的組織和管理，以便於人們檢索和查看，已成為重要課題。超文本/超媒體技術的出現，使這一課題得到了較好的解決，它已成為Internet上信息檢索的核心技術。

人類的記憶是以一種聯想的方式構成的網路結構。網狀結構有多種路徑，不同的聯想檢索必然導致不同的路徑。網狀信息結構用傳統的文本形式是無法管理的，必須採用一種比文本更高一次層的信息管理技術——超文本。

超文本(Hyper text)可以簡單地定義為收集、存儲和瀏覽離散信息，以及建立和表示信息之間關係的技術。從概念上講，一般把已組成網(web)的信息稱為超文本，而把對其進行管理使用的系統稱為超文本系統。

超文本具有非線性的網狀結構，這種結構可以按人腦的聯想思維方式把相關信息塊聯繫在一起，通過信息塊中的“熱字”、“熱區”等定義的鏈來打開另一些相關的媒體信息，供用戶瀏覽。

隨著多媒體技術的發展，超文本中的媒體信息除了文字外，還可以是聲音、圖形、圖像、影視等多媒體信息，從而引入了“超媒體”這一概念，超媒體一多媒體+超文本。“超文本”和“超媒體”這兩個概念一般不嚴格區分，通常可看做同義詞。

1．多媒體硬體系統目前最為普遍的多媒體硬體系統為基於IBMPC系列的多媒體個人計算機(MPC)和基於Apple Macintosh的系列計算機。

2．多媒體軟體系統軟體系統是多媒體技術的靈魂，作用是使用戶能方便而有效地組織和運用多媒體數據。多媒體的軟體按其功能可分為：①系統軟體，是個人計算機的基本操作系統，如Windows系列軟體；②編輯軟體，是用於採集、整理和編輯各種媒體數據的軟體，如文字處理軟體、聲像處理軟體等；③創作軟體，是用於集成彙編多媒體素材、設置交互控制的程序，包括語言型創作軟體如Visual Basic，工具型合作軟體如Tool Book等；④多媒體應用軟體，是指應用上述軟體編製出來的多媒體產品，用於教學的多媒體產品稱多媒體教學教材或多媒體課件。