正在进行安全检测...

发布时间:2023-11-27 12:10:15

TECHNOLOGY 技术应用 DPl技术在宽带大提速中的应用 ◆沈俊 摘要:随着城市光网规模扩大,对宽带网络也提出了越来越高的要求,但运营商从新 增加的数据业务流量中获取收益却非常有限。本文利用DPI技术可以实现对用户上网流量统 计、应用分析、一拖N控制、网址访问分析等功能,发掘DPI应用需求,在宽带大提速中支 撑前端业务发展。 关键词:提速;DPI;一拖N;流量 DPl系统特点 互联网DPI信息服务业务是上海电信以INTERNET底层 流量的深度包检测平台为基础,通过HADOOP等先进互联网 技术,承载于上海电信云计算平台,实现的上海地区400万 互联网用户的全面行为数据的采集分析及信息推送服务。 (一)hadoop技术。Hadoop是Apache基金会下的一个开 源分布式计算平台,P2Hadoop分布式文件系统和MapReduce 分布式计算框架为核心,为用户提供了底层细节透明的分 布式基础设施。HDFS的高容错性、高伸缩性等优点,允 许用户将Hadoop部署在廉价的硬件上,构建分布式系统; MapReduce分布式计算框架则允许用户在不了解分布式系统 底层细节的情况下开发并行、分布的应用程序,充分利用大 规模的计算资源,解决传统高性能单机无法解决的大数据处 理问题。Hadoop是目前分析海量数据的首选工具主其具有方 便、弹性、健壮、简单等优势。 (二)1拖N共享检测控制技术。共享检测系统是通过采 集来自终端客户端发出的特征信息,运用多种计算方法加以 统计,分析得出检测结果,提供判定是否共享的检测依据。 系统目前主要支持IPNAT检测算法、QQ检测算法、 COOKIE检测算法和OS(操作系统)等检测算法,理论上这几 种算法均能够检测出内网的共享主机数,其准确率存在如下 关系IPNAT检测算法>QQ检测算法,而COOKIE检测算法、 操作系统检测算法,主要是做辅助判定。 IPNAT检测算法。通过检测用户内网的IP信息来确定用 户的共享情况,用户在使用一些常见的客户端软件时会带出 其内网IP,此类客户端有QQ,游戏,迅雷下载,视频播放 器,BT下载等。特点是各种情况下都比较准确,但需要一个 较长的检测周期才能检测出共享台数。 COOKIE检测算法。大部分网站会在用户的客户端记录 些数据,这些数据在一个相当长的时间内是不变的,而且 用户每次在访问这个网站时都会带出这些特征信息,分析并 统计这些特征信息可以计算出用户端的主机共享台数。特点 是检测的速度比较快,检测的准确率比较准。 QQ检测算法。检测同一账号下登录有多少个QQ账号, 从而辅助判定共享台数。特点是检测速度快,单台主机登录 88 信息系统工程 2014.6.20 多个QQ的情况比较普遍,但是当有很多QQ出现在一个账号 般可以定性有共享行为。 操作系统及设备类型检测。通过分析用户端主机发出的 HTTP请中带出的操作系统及设备标识来统计有几种操作系 统或者设备类型。这种检测算法不能准确的判定用户有几台 主机,但可以知道在使用几种操作系统,一般情况一台主机 是只装一种操作系统,并可以将PC和移动终端区分开。特点 是设备类型的检测能够比较准确的确定用户端使用WIFI上网 的手机或者平台电脑的操作系统及对应的设备类型。 二、拖N控制应用 针对商铺宽带、企业宽带等1拖N及校园网1拖N用户, DPI已经能够在全市范围内进行覆盖控制,校园网一拖N业务 明确了一个宽带账号同时仅支持一台电脑上网。一旦判定为 违反账户经营约定的行为,则对用户同一账号下所有上网终 端(包括PC及非Pc)的上网流量进行惩罚性控制,惩罚期 为若干分钟,用户WEB访问按一定比例将被弹出的告警窗口 替代,其他非wEB的TcP服务将被强行中断。在惩罚期内, 若用户未及时整改的,依旧使用约定台数以上PC终端访问互 联网,则惩罚期将累加,依此延续。用户恢复约定台数电脑 使用,则惩罚期后可以正常上网。 三、结论 数据网络引入DP1分析,通过对新旧业务流量分布、网 站分布、价值用户分布等进行分析,为市场业务推广、广 告、合作运营提供了依据,进而形成有效的营销策略。DP1 分析可以改变传统以流量为基础的粗放经营方式,细分网 络、业务、用户,注重用户业务体验,在宽带大提速中支撑 前端业务发展,使运营商向流量精细化运营转变。 呻 参考文献 董西成.Hadoop技术内幕:深入解析MapReduce架构设计与实现 原理【Mj.机械_-:k出版社. 2】蔡斌,陈湘萍.Hadoop技术内幕:深入解析Hadoop Common和 HDFS架构设计fM1.机械工业出版社. (作者单位:中国电信上海公司网络操作维护中心 (NOC)) 

正在进行安全检测...

相关推荐