OpenMAX是由Khronos组织所发布的一种开放标准

NTHURTLabTheImplementationofH.264DecoderBasedonOpenMAXTMforPACDSPWei-KuanShihNTHURTLabIntroduction•OpenMAX是由Khronos組織所發佈的一種開放標準，用來實現高效能的多媒體加速。KhronosGroup在2000年一月由一群media-centric公司所組成；包括3Dlabs,ATI,Discreet,Evans&Sutherland,Intel,NVIDIA,SGIandSunMicrosystems等等；•為了因應目前眾多的平台與開發裝置，在media上也需要製定開放標準的APIs，這就是KhronosGroup成立的目的。此外，這個KhronosGroup也是OpenGL的製定者，同時在著手製定的標準/規範還有OpenGLES,OpenVG,OpenEL等等，其中大多都是針對手持設備/嵌入式設備的。•OpenMAX是一個免費的跨平台API，適合用在multimediacomponents的開發；特色是可以在不同的平台上開發整合。•OpenMAX可以廣泛運用在如MPEG-4、H.264、音頻或影像的編解碼器、2D或3D圖像的視訊編解碼器中的多媒體處理進行標準化。OpenMAXAPI會根據處理器的演進來擴充資料庫，無須考慮底層的硬體架構，以求更有效的發揮更快的硬體加速效能，並加速跨OS和silicon平台的多媒體components的開發、整合。–目的：統合所有多媒體運算處理之介面、降低移植成本與複雜度–應用：多媒體(audio、video、image…)之編、解碼–優點：可相容不同平台上的多媒體程式P.2NTHURTLabOutline•Introduction•PACDSPOverview•OpenMAXTMOverview•H.264CodecFollowedOpenMAXDL•ConclusionNTHURTLabOpenMAX™OverviewDiversityofsiliconprocessorsDiversityofoperatingsystemsMediaEnginesCPUs,DSP,HardwareAcceleratorsetc.MPEG4H.264MP3AACLibrariesMediaPrimitivesApplicationOperatingSystemMediaFrameworkDiversityofsiliconprocessorsDiversityofoperatingsystemsMediaEnginesCPUs,DSP,HardwareAcceleratorsetc.DL-“DevelopmentLevel”MediaPrimitives-provideportabilityofsiliconaccelerationMPEG4H.264MP3AACMoreMediaLibrariesIL-”IntegrationLevel”MediaPrimitives-provideportabilitytodifferentoperatingsystemsApplicationOperatingSystemMediaFrameworkOpenMAXDLPortabilityAcrossProcessorsHotspotprimitivestoenableeasyportingacrosshardwarearchitecturesOpenMAXILPortabilityAcrossOSAbstractedInterfacesformedialibrariesintoOSmediaframeworksNTHURTLabOpenMAXApplicationLayerNTHURTLabScope•Itisanapplication-level,C-language,multimediaAPIdesignedforresource-constraineddevicesApplication---------------------------------OpenmaxALAPI-------------------------------------------ALEngineObjectObjectObjectObjectNTHURTLabOpenMAXALFeatures•Features：1.MediaPlayback2.MediaRecording3.Effectsandcontrols•Optionalfunctionalityincludes：1.MIDI2.AnalogRadio3.Vibrationdevice(“vibra”)NTHURTLabNotifications1.Usecallbackfunction2.Callbackfunctionsareregisteredper-interfaceandper-eventtypeNTHURTLabFunctionOverview•ObjectOverview1.EngineObject2.MediaObjects3.MetadataExtractorObject4.AudioOutputMixObjects5.CameraObjects6.LEDArrayObjects7.RadioObjects8.VibrationControlObjectsNTHURTLabFunctionOverview•AudioandVideoPlayback•AudioPlayback•RecordingAudio•ImagePlayer•VideoCamera•StillCamera•RadioPlayback•ReadingMetadataNTHURTLabOpenMAXILNTHURTLabOpenMAXILP.12NTHURTLabOpenMAXILOpenMAXILMediaFrameworkv1Give_Input_A(xxx.mp3)Give_Output_A()MP3_decoder_AMediaFrameworkv2Give_Output_B()MP3_decoder_BMediaFrameworkMP3_decoder_AnyOMX_Input(xxx.mp3)OMX_Output()Give_Input_B(xxx.mp3)P.13NTHURTLabFeatures•Abilitytoeasilypluginnewcomponent.•Easeofcommunicationbetweentheclientandthecomponentsandbetweencomponentsthemselves.•Standardizeddefinitionofkeycomponentssoallimplementationsofsuch“standardcomponents”exposethesameexternalinterface.i.e.audio_decoderclassInput:encodedaudioOutput:decodedaudio•audio_decoder.mp3•audio_decoder.amr•audio_decoder.aacOpenMAXILMediaFrameworkMP3_dec.AMR_dec.AAC_dec.OSP.14NTHURTLabOpenMaxILBellagioNTHURTLabBellagio執行環境•OpenMaxIL實作•RunonLinux(FC4)•安裝ffmpeglibrary–Havetoenablesharedlibraries(--enable-shared)•執行omxregister註冊Components•RunyourapplicationNTHURTLabIL架構NTHURTLabOpenMAX–GStreameronNomadikNTHURTLab•STn8815採用多核分布式架構，並在視頻編碼效率上展現一系列突破，實現了多種創新算法，使智能手機、多功能多媒體設備及播放器、手持網絡電視、便攜導航儀和移動電視能夠播放電視廣播，拍照錄像，以及與其它系統進行實時雙向可視電話通信。•在STn8815的軟硬件平台內預裝業內主流的OS和應用框架，有助於手機制造商加快產品上市時間，降低開發移動多媒體消費產品的成本。•STn8815包含一個ARM9核心及四個多媒體加速器，並增加了L2快取記憶體。