中文字幕日韩精品有码视频,а√在线中文在线新版,国产91亚洲精品一区二区三区

手机视频文�g格式解析�?3GP/MP4

马航 — Mon, 03 Oct 2011 02:54:00 GMT

前言�Q�做完了(ji��n)手机全能播放器的��目�Q?nbsp;又要告别几个月来�q�肩作战�Q�即��去北京发展的Manager zhu。准备把做过�?GP/FLV/AVI格式整理一遍， ��是对几个月辛苦成果的�ȝ��Q?nbsp;也�ؓ(f��)后来者提供一些参考�?/span>

1. 概述

��行的文件格式背后都有大公司的支持。FLV得益于ADOBE公司推动的网�l�视频分享风潮，而AVI则是MICROSOFT首创的RIFF卌��频和音频交织在一起同步播放�?nbsp;3GP/MP4是APPLE提出�q�得到ISO标准支持作�ؓ(f��)NOKIA�{�手机的默认视频格式�?GP是MP4格式在手��Z��的简化版。MP4的codec�l�合一般是mpeg4 + AAC, 3GP则按版本演进分�ؓ(f��)3gpp r5(h.263/mpeg4 + AMR-NB/AMR WB), 3gpp r6(增加h.264视频和aacPlus音频支持)�?/span>

有�h�?x��)把MP4和MPEG4搞�؜�Q?nbsp;前者是文�g容器(container)�Q�后者是视频�~�码格式�Q?nbsp;容器的作用是把压�~�编码后的视频和音频数据��可能紧凑的排布�Q�就好像阿甘的��y克力盒子�Q�你�q�不知道盒子里有什么，但你可以按照既定的线索解开文�g�Q�取��Z��需要的数据�?/span>

文�g格式一般包括以下三要素�Q?/span>

header: 标记文�g�c�d��Q�音视频码流的基本属性信�?/span>
index: 索引表，每个frame有对应的offset,size,timestamp.
stream: 真正的音视频��数据�?/span>
��M��文�g格式都应该有以上3要素�?nbsp;当然AVI视频没有索引也能播放�Q�但不能拖放seek�Q�需要自己重建烦(ch��)引。解析器(demuxer)�Ҏ(gu��)��frame_id扑ֈ�其在文�g中的offset和size,然后��d��出来解码�q�播放�?/span>

2. 文�g格式分析

下面来分析一�?GP/MP4文�g格式。APPLE的格式有2个特点，1. 排布紧凑几乎没有冗余数据(AVI则有很多junk数据)�Q?.韌��频码��数据可随意存放而不需按时间顺序排布�?/span>

3gp文�g�׃��p�d��的box(atom)�l�成。每个box的结构都�?字节的size,4字节的type, �q�有一些data数据。用mp4info查看3gp文�g的数据排布如下图�Q?/span>

如上�? ftyp是表�C�文件的版本信息�Q?nbsp;mdat存放文字�Q�音视频�{�数据。你可能要问�Q�这些音视频数据怎么扑ֈ�呢？是通过moov box里的子box trak�Q�里面存攄��韌��频的属性描�q�C��?qi��ng)每个sample的烦(ch��)引�?/span>

3. 关于sample atoms

video和audio的码��属�?如视频width/height,codec id, 音频采样率声道数�{?存放在stsd box里；下面着重介�l�MP4高效压羃的精华：(x��)stts,stss,stsc,stsz,stco五个box。对比AVI的烦(ch��)引表是每个sample都有对应的id,flag,offset,size�Q?GP的高效烦(ch��)引方式可以把AVI转码成同码率的MP4后，文�gsize减小成原来的20-30%!

1. stts atom(time to sample atoms�Q�见quicktime format 文档�?-28 标准文档点击下蝲): 存储�?ji��n)sample的时间信息。stts能让很方便的�Ҏ(gu��)��timestamp扑ֈ�对应的sample�Q�或者获取某个sample对应的timestamp. sttstable记录着有相同duration的sample的数量count和时长dutation�?/span>

2. stss atom(sync sample atom�Q�见文档�?-31): 存储�?ji��n)每个关键��的sample id�?nbsp;stss能让你很方便的找到当前��最�q�的关键帧�?/span>

3. stsc atom(sample to chunk atom): sample存放在chunk里�ؓ(f��)�?ji��n)允�怼�化的数据��d��。比如音频sample size都很��（amr-nb sample size�?2字节�Q�，每次��d��一个sample开销太大�Q?nbsp;可一�ơ性读所在chunk里一堆sample�?/span>

4. stsz atom(sample size atom): stsz可以描述每个sample的size.

5. stco atom(chunk offset atoms): stco描述�?ji��n)每个chunk在文件中的绝对偏�U�M��|�。该offset可以�?2位的

也可以是64位的�Q�后者用来支持处理超大文件�?/span>

4 .使用sample atoms来处理播放流�E?/span>

· 查找sample

1�Q�确定时��_(d��)��相对于媒体时间坐标系�l?/span>

2�Q�检查time-to-sample atom来确定给定时间的sample序号�?/span>

3�Q�检查sample-to-chunk atom来发现对应该sample的chunk�?/span>

4�Q�从chunk offset atom中提取该trunk的偏�U�量�?/span>

5�Q�利用sample size atom扑ֈ�sample在trunk内的偏移量和sample的大��?/span>

例如�Q�如果要扄��1�U�的视频数据�Q�过�E�如下：(x��)

1�Q?nbsp;�W?�U�的视频数据相对于此�?sh��)�?ji��ng)的时间�ؓ(f��)600

2�Q?nbsp;��(g��)查time-to-sample atom�Q�得出每个sample的duration�?0�Q�从而得出需要寻扄��600/40 = 15 + 1 = 16个sample

3�Q?nbsp;��(g��)查sample-to-chunk atom�Q�得到该sample属于�W?个chunk的第一个sample�Q�该chunk共有4个sample

4�Q?nbsp;��(g��)查chunk offset atom扑ֈ��W?个trunk的偏�U�量�?0472

5�Q?nbsp;�׃��W?6个sample是第5个trunk的第一个sample�Q�所以不用检查sample size atom�Q�trunk的偏�U�量��x(ch��ng)��该sample的偏�U�量20472。如果是�q�个trunk的第二个sample�Q�则从sample size atom中找到该trunk的前一个sample的大��，然后加上偏移量即可得到实际位�|��?/span>

6�Q?nbsp;得到位置后，卛_��取出相应数据�q�行解码�Q�播�?/span>

· 查找关键�?/span>

查找�q�程与查找sample的过�E�非常类��|��只是需要利用sync sample atom来确定key frame的sample序号

��定�l�定旉��的sample序号
��(g��)查sync sample atom来发现这个sample序号之后的key frame
��(g��)查sample-to-chunk atom来发现对应该sample的chunk
从chunk offset atom中提取该trunk的偏�U�量
利用sample size atom扑ֈ�sample在trunk内的偏移量和sample的大��?/span>

5 .3GP/MP4相关资源

quicktime file format specification: 最权威的格式文�?nbsp;点击下蝲
开源的3GP/MP4解析器：(x��) ffmpeg, GPAC, helix, google opencore�{?nbsp;

马航 2011-10-03 10:54 发表评论

马航 — Mon, 03 Oct 2011 01:47:00 GMT

Android开发又��带来新一轮热潮，很多开发者都投入到这个浪潮中��M��(ji��n)�Q�创造了(ji��n)许许多多相当优秀的应用。其中也有许许多多的开发者提供了(ji��n)应用开源项目，贡献��Z��们的智慧和创造力。学�?f��n)开源代码是掌握技术的一个最��x(ch��ng)��式。下面推荐几个应用开源项目，�q�些��目不仅提供�?ji��n)优�U�的创意，也可以直接掌�?Android内核的接口��用：(x��)

1、Android团队提供的示例项�?br style="word-wrap: break-word; padding: 0px; margin: 0px;" />
如果不是从学�?f��n)Android SDK中提供的那些样例代码开始，可能没有更好的方法来掌握在Android�q�个框架上开发。由Android的核�?j��)开发团队提供了(ji��n)15个优�U�的示例项目，包含�?ji��n)游戏、图像处理、时间显�C�、开始菜单快��h��式等�?br style="word-wrap: break-word; padding: 0px; margin: 0px;" />地址�Q?a target="_blank" style="word-wrap: break-word; color: #336699; text-decoration: underline; padding: 0px; margin: 0px;">http://code.google.com/p/apps-for-android/

2�?Remote Droid

RemoteDroid是一个Android应用�Q�能够让用户使用自己的无�U�网�l��用无�U�K��盘、触摸屏操作手机。这个项目�ؓ(f��)开发者提供了(ji��n)如网�l�连接、触摸屏手指�q�动�{�很好的样例�?br style="word-wrap: break-word; padding: 0px; margin: 0px;" />地址�Q?a target="_blank" style="word-wrap: break-word; color: #336699; text-decoration: underline; padding: 0px; margin: 0px;">http://code.google.com/p/remotedroid/

3�?TorProxy和Shadow

TorProxy应用实现�?ji��n)Android手机无线�는�(sh��)传通讯(TOR)�Q�和Shadow应用一起��用，可以使用手机匿名上网。从该项目源代码中，可以掌握socket�q�接、管理cookie�{�方法�?br style="word-wrap: break-word; padding: 0px; margin: 0px;" />地址�Q?a target="_blank" style="word-wrap: break-word; color: #336699; text-decoration: underline; padding: 0px; margin: 0px;">http://www.cl.cam.ac.uk/research/dtg/code/svn/android-tor/

4�?Android SMSPopup

SMSPopup可以截获短信内容昄��在一个��(ch��ng)泡�Ş状的�H�口中。从�q�个��目中可以掌握到如何使用内置的短信SMS接口�?br style="word-wrap: break-word; padding: 0px; margin: 0px;" />地址�Q?a target="_blank" style="word-wrap: break-word; color: #336699; text-decoration: underline; padding: 0px; margin: 0px;">http://code.google.com/p/android-smspopup/

5�?Standup Timer

Standup Timer应用用于控制站立�?x��)议旉��Q�类似秒表倒计�Ӟ��可以提醒每个人的讲话旉��已到�Q�从而保证每个与�?x��)者��用时间一栗��从该项目的代码中，可以学会(x��)如何使用旉��函数。另外，�q�个��目的代码是采用视图view、模型model严格分离的设计思�\�?br style="word-wrap: break-word; padding: 0px; margin: 0px;" />地址�Q?a target="_blank" style="word-wrap: break-word; color: #336699; text-decoration: underline; padding: 0px; margin: 0px;">http://github.com/jwood/standup-timer

6�?Foursquare

是Foursquare.com的一个客��L(f��ng)��应用�Q�该应用主要分�ؓ(f��)两个模块�Q�API(com.joelapenna.foursquare)和界面前�?(com.joelapenna.foursquared)两部分。从该项目代码中�Q�可以学�?x��)如何同步、多�U�程、HTTP�q�接�{�技术�?br style="word-wrap: break-word; padding: 0px; margin: 0px;" />地址�Q?a target="_blank" style="word-wrap: break-word; color: #336699; text-decoration: underline; padding: 0px; margin: 0px;">http://code.google.com/p/foursquared/

7�?Pedometer

Pedometer应用用于记录你每天走路步数的。尽��记录不一定精准，但是从这个项目中�Q�可以学�?f��n)几个不同的技术：(x��)加速器交互、语��x(ch��ng)��新、后台运行服务等�?br style="word-wrap: break-word; padding: 0px; margin: 0px;" />地址�Q?a target="_blank" style="word-wrap: break-word; color: #336699; text-decoration: underline; padding: 0px; margin: 0px;">http://code.google.com/p/pedometer/

8�?OpenSudoku-android

OpenSudoku是一个简单的�?ji��)宫格数独游戏。从代码中可以学�?f��n)到如何在视图中昄��表格数据�Q�以�?qi��ng)如何和一个网站交互等技术�?br style="word-wrap: break-word; padding: 0px; margin: 0px;" />地址�Q?a target="_blank" style="word-wrap: break-word; color: #336699; text-decoration: underline; padding: 0px; margin: 0px;">http://code.google.com/p/opensudoku-android/

9�?ConnectBot

ConnectBot是Android�q�_��的一个客��L(f��ng)��安全壛_��用。从该项目代码中�Q�可以学�?f��n)到很多Android安全斚w��的内容，�q�些是你在开发应用时�l�常需要考虑的安全问题�?br style="word-wrap: break-word; padding: 0px; margin: 0px;" />地址�Q?a target="_blank" style="word-wrap: break-word; color: #336699; text-decoration: underline; padding: 0px; margin: 0px;">http://code.google.com/p/connectbot/

10�?WordPress的Android应用

当然在最后不能不提WordPress的Android应用�?ji��n)，�q�是WordPress官方开发团队提供的一个项目。从代码中可以学�?f��n)到XMLRPC调用�Q�当然还有更多的优秀内容�Q��?br style="word-wrap: break-word; padding: 0px; margin: 0px;" />地址�Q?a target="_blank" style="word-wrap: break-word; color: #336699; text-decoration: underline; padding: 0px; margin: 0px;">http://android.svn.wordpress.org/trunk/

马航 2011-10-03 09:47 发表评论