质量控制:流媒体测量服务引领潮流
内容提供商通常都是盲目地流媒体. 最近,通过Arbitron和Measurecast提供的服务,从受众测量的角度来测量流媒体才刚刚开始成形. 现在,Keynote、Exodus和Streamcheck等公司正在衡量 质量 流媒体,长期以来一直被忽视.
这三家公司都在使用流媒体“代理”或模仿终端用户体验流媒体的软件. 这可以让流媒体网站深入了解流媒体是如何传输的. 代理捕获关键数据点,包括缓冲时间、净中断甚至每秒帧数.
周二,Keynote Systems (www.主题.com)推出了名为“Keynote 的角度来看”的质量测量订阅服务。. 微软还表示,将启动“Keynote流媒体索引”。, 哪一个类似于衡量静态网页下载时间的索引.
事实证明,衡量流媒体的质量很困难, 马特·帕克斯承认, Keynote流媒体服务的产品营销经理. 相对于静态网站的测量, 流媒体评估需要分析更多的变量, 包括屏幕大小和音视频质量. 由于这个过程非常复杂,Keynote花了数年时间来完善它的产品.
自8月初以来,Streamcheck一直在悄悄地提供高质量的测量服务. Streamcheck甚至安全广播.com创始人马克·库班(Mark Cuban)作为投资者,不过该公司不愿透露他的投资金额. Shai伯杰, Streamcheck总统, 他说,该公司已经有500家广播电台使用其每月服务,最近需求激增. “我们现在的客户发现这项服务非常宝贵,伯杰说, 并告诉我们,它很快就会成为他们流媒体解决方案中不可或缺的一部分."
第三家公司Exodus今年6月表示,它将推出自己的质量测量服务. 上周, 《百家乐软件》宣布 该公司正在开展流媒体咨询和设计业务, 但其流媒体质量服务尚未正式推出.
里克华雷斯, 罗伯逊斯蒂芬斯公司互联网基础设施服务总经理, 他说,测量数据流的质量可以帮助公司找到问题所在, 最终提高竞争力.“随着流媒体变得越来越流行,它对MTV等内容提供商来说绝对至关重要.com或c - span了解其流媒体会话的表现。.
“基调音阶”的推导
Keynote表示,推出流媒体质量指标对于推动行业发展非常重要. “你无法管理你无法衡量的东西,”帕克斯说. “我们需要一种简单、准确、可靠的方法来衡量音频和视频质量."
为此目的, 该公司创建了Keynote Scale, 哪个产生的数在1到10之间, 测量广泛的编码和传输数据. 该量表由三个指标组成:音频评分(占总分的40%), 视频分数(40%)和启动分数(20%). 帕克斯解释道, 该数字从最终用户的角度对流进行评级, so, 至少理论上是这样, 数字越高, 体验的质量和效果就越好.
在天平上, 剪辑根据其编码因子获得最大分数, 但要对启动时间过长和重新缓冲等错误进行扣除. “这就像体操或跳水一样,难度越大的动作就会获得更高的难度评级,他说.
如今,想要得到梦寐以求的“10”分几乎是不可能的, 因为这将要求流传输的“接近dvd质量”(5Mbps和每秒30帧). “我们故意把门槛设得很高,帕克斯说。, 因为这是人们习惯在电视上看到的.“目前可实现的最高视频质量排名约为5或6分, 他说, 这相当于每秒20帧的300Kbps的流. 音频流评级最高也在5或6左右.
不幸的是, 这也意味着那些不以尽可能高的比特率进行流媒体传输的公司将受到较低的整体排名的惩罚. 那些只使用音频的游戏也会获得较低的分数. 公园, 然而, 只是重申其规模旨在准确反映最终用户的体验. “你可以完美地传送低质量的流, 但这并不是一个好的终端用户体验,帕克斯说.
为了缓解这种情况, Keynote还使用“渲染”分数(以百分比表示)来反映流的交付情况. 所以如果一个流在28秒时传输完美.8Kbps时,它获得的渲染分数比流式传输100Kbps且有很多错误的网站要高.
主题演讲流媒体索引
基调量表, 呈现的分数, 和可用性是Keynote用来形成每周索引的关键标准, 主题演讲流媒体索引. 该指数, Keynote认为它代表了流媒体公司的标杆, 包含20个使用流媒体音频和视频的流行网站, 分为四类:音频电子商务, video, 财经音频和广播电台. 不幸的是, Keynote不会公布这些网站的排名, 在每个类别中,只有最顶级的流媒体. (见文章末尾的表格.)
该指数中的网站包括CDnow、亚马逊.com, MTV.com,举办.com、天气.以及旧金山的KGO等广播电台. 这些网站是根据其流量和媒体剪辑的持久力来挑选的. 帕克斯说,Keynote每周都会测量相同的剪辑,以获得更准确的表现. 为什么只有20家公司? 帕克斯说,这个数字是创建基准所需的最低数字. “可能更多的是为了获得更好的代表, 但我们不想把索引改变太多,他说.
有趣的是,该指数的平均质量排名是微不足道的1.10月8日至14日这一周87英镑. 平均渲染分数为86%.
最终结果? 更好的流
索引的最终结果, 说公园, 会有更好的流媒体质量吗, 因为公司将试图打破他们的数字,看看他们如何与公布的, 索引的公司. 他提到了Keynote广受欢迎的网页索引, 哪个标志着下载时间的减少, 自两年前推出以来.
帕克斯说:“现在的网页下载速度是1998年12月的两倍. 他将这种速度的增长归因于公布的指数, 是什么促使公司减少下载时间以获得更好的排名. 他说,流媒体也会出现同样的情况. “我们预计流媒体指数的收视率会有所提高, 就像Keynote的其他行业指数一样, 随着技术和网络操作的改进."
华雷斯同意. “人们正在关注,”他说. “公司可以将自己与指数公司进行比较,看看自己的处境."
Keynote的流媒体视角服务
类似的, Keynote的新流媒体视角服务提供的信息可能是信息的金矿. 订阅服务允许流媒体公司根据启动时间衡量其流媒体的总质量, 音频和视频质量和渲染/交付质量. 这包括有关连接时间的信息, 重定向, 初始缓冲时间, 视频帧率, 恢复/丢失和丢弃的数据包, 以及带宽利用率. 订阅者可以通过任何浏览器访问此信息,并且该服务不需要在服务器上安装或配置,因为它从最终用户的角度收集数据.
工程师可以使用这些数据来制定有关服务水平协议的决策. 在技术层面上, 它还允许流媒体公司比较竞争对手之间的内容交付网络, 比如Akamai和数字岛. 但帕克斯提醒说,该公司并没有公布来自每个内容交付网络的数据. “内容交付公司是我们的客户. 我们的业务不是比较一个ISP或CDN与另一个,”他说.
但如果你是Keynote的用户,同时使用Akamai和数字岛的网络, 例如, 您可以对它们进行测试,看看它们相互之间提供了什么样的性能. 公园表示:“我们让客户自己测试cdn.
华雷斯对此表示赞同,他说该指数揭示了内容交付公司的重要信息. “(看看指数),你可以看到MTV.Com超过了整体平均水平,”他说. “既然MTV.com使用Akamai和iBEAM进行内容交付,很明显它们的性能更好."
Keynote通过使用模仿玩家的特殊“代理”来收集数据并获取相关数据. 帕克斯说,Keynote在10个城市设有代理商,实际上在每个城市都购买了T1线路以进行测量. 这有助于IT经理发现特定城市是否存在问题, 由于骨干网差异或流量过载.
Keynote Streaming 的角度来看服务的定价从395美元到9美元不等,995 /夹子, 每个月, 取决于测量间隔和流的大小.
为竞争做好准备
上周,竞争对手出埃及公司(Exodus)www.《百家乐软件》.com)表示,将成立一个流媒体服务部门,帮助公司开始流媒体服务. 在面试中, 彼得·约克, Exodus的流媒体总监, 说现在开始定性测量还为时过早, 正如Keynote所做的那样. Exodus的流媒体质量测量只关注客观数据, 不进行主观分析. Keynote自然不同意这种做法.
帕克斯说:“当然,加入主观因素会让你受到批评. “一天结束的时候, 我们卖的是信誉, 所以我们必须确保我们的方法是防不胜防的."
另一个竞争对手Streamcheck (www.streamcheck.com), 提供了一项服务,允许用户输入他们的流url,通过Streamcheck的“扫描仪”网络进行性能测量。. 与Keynote的流媒体视角一样,Streamcheck也是一项月度订阅服务. 的区别, 伯杰说, Streamcheck支持RealPlayer和Windows Media吗, 以及所有带宽——不仅仅是宽带.
伯杰说,Streamcheck已经尝试在其方法中加入主观测量, 但这是一个“雷区”. “我认为它不能满足内容所有者或内容观众的需求,”他说. “虽然我们也想让流媒体更可靠, 把所有流媒体内容都变成DVD质量是错误的."
伯杰指出,Keynote会惩罚那些节约带宽的公司. “应该考虑到文件的内容和背景,”他说. “例如, 一个会说话的视频不需要是全屏和立体声的, 但音乐录影带可能需要."
Streamcheck使用类似于学校成绩的排名系统. 一个一个+, 例如, 意味着给定的片段以完美或近乎完美的质量交付, 无数据包丢失,启动时间短. 最大的区别是,一个片段不会因为在更高的带宽上编码而获得更高的排名——系统只是根据其编码方法来衡量文件的传输方式.
Berger明确表示,Streamcheck的目标是正确测量流, 确保文件按预期交付. 这种方式, 客户可以对他们的技术基础设施做出明智的决定, 内容交付合作伙伴和流托管提供商.
华雷斯遵循Keynote和Exodus, 但他表示,由于公司的独立立场,Keynote的产品更出色. Exodus因为拥有自己的数据和流托管中心,所以经常被认为是有偏见的. “这就像狐狸守着鸡舍,”华雷斯谈到《百家乐软件》时说. “你希望你的信息是真正独立的,就像JD Power或消费者报告一样."
更多的批评
毫无疑问,Keynote将因其排名而受到大量批评. 对Keynote产品的一个主要担忧是,它们只测量使用RealNetworks的网站. 公园表示,基于Windows media的评测将在30至60天内推出.
另一个抱怨是Keynote只从使用T1和T3线路的座席获取信息——它不能从调制解调器用户的角度衡量质量. 公园表示,Keynote方法“反映的是企业用户体验,而不是家庭用户.他说,未来的代理商最终可能会坐在DSL或电缆连接上, 但没有给出具体时间. 伯杰说,Streamcheck已经支持调制解调器、DSL和更快的连接.
更令人吃惊的是, 公园承认,许多内容交付公司都知道Keynote代理的位置. 从理论上讲, 公司可以将边缘服务器和缓存设备放置在离代理更近的地方,以获得更好的整体评级. 公园驳斥了这种担忧,他说Keynote从不同的骨干供应商那里购买t15. 如果内容交付公司试图作弊, 他说, 它还将有效地帮助使用该主干的每个人. 不过,帕克斯承认了Keynote与内容交付公司的关系. 许多主要的内容交付公司,包括Akamai, 数字岛, Adero, 英特尔, iBEAM和安然(Enron)是合作伙伴,为Keynote提供了帮助.
Keynote评级系统的另一个潜在问题是,它基于当前的编码技术. 当公司推出新的音频或视频编解码器时会发生什么? Keynote量表会考虑历史评分,还是会设计另一种量表? 帕克斯说,基调量表是一项不断发展的工作, 但他承认,对于这个困境,他没有确切的答案.
然而,与此同时,Keynote将自己视为流媒体行业的推动力. 帕克斯说:“这将流媒体带到了最前沿.
华雷斯对此表示赞同,他说Keynote的服务和索引是“非常好的东西”。. “对流媒体公司来说,让他们的钱物有所值是很重要的,”他说. “加, 这对Keynote公司来说是件好事, 因为他们开始流媒体了, 这是最热门的领域之一."
主题演讲流媒体索引 2000年10月8日至14日及15日至22日 |
| 流质量 | 呈现的分数 | 可用性 |
周: | 10/8 | 10/15 | 10/8 | 10/15 | 10/8 | 10/15 |
整体平均指数: | 1.87 | 1.19 | 86.0% | 54.9% | 78.9% | 78.2% |
最好的网站: | | | | |
音频电子商务: barnesandnoble.com | 1.89 | 1.33 | 99.0% | 69.3% | 65.3% | 69.1% |
| 2.09 | | 99.0% | 69.2% | 88.7% | 79.6% |
| 1.86 | 1.30 | 97.0% | 68.3% | 85.3% | 96.3% |
有线电视: MTV c - span | 3.46 | 2.21 | 79.0% | 62.5% | 83.1% | 83.9% |
结果是基于Keynote流媒体的测量结果 的角度来看 太平洋时间早上5点到晚上9点,每小时一班,从美国10个主要城市出发.S. 流媒体质量是基于流媒体的基调等级的排名, 在0到10的范围内, “10.0”表示DVD质量. |
来源:Keynote(纳斯达克“KEYN”). |