4-3互联网舆情分析及应用研究

・业务研究・

互联网舆情分析及应用研究

许　鑫1,章成志2、3(11华东师范大学信息学系,上海200241;21南京理工大学信息管理系,江苏南京210094;31中国科技信息研究所,北京100038)摘　要:分析了互联网舆情研究的现状,给出互联网舆情分析的基本思路与方法,说明了其中涉及到的几个关键技术问题。基于该思路与技术,作者给出互联网舆情研判平台构建的思路与实现,对互联网舆情分析的应用具有参考价值。关键词:互联网舆情;信息采集;垂直搜索引擎;信息抽取;内容分析中图分类号:G202 文献标识码:A 文章编号:1007-7634(2008)08-1194-07ResearchonApplicationandAnalysisofInternet-MediatedPublicSentiment

XUXin1,ZHANGCheng-zhi2、3(1.DepartmentofInformatics,EastChinaNormalUniversity,Shanghai200241,China;2.DepartmentofInformationManagement,NanjingUniversityScienceandTechnology,Nanjing210094,China;3.InstituteofScientific&TechnicalInformationofChina,Beijing100038,China)Abstract:AfterbrieflyanalyzingtheresearchactualityofInternet-MediatedPublicSentiment,theauthorsgivethebasalthinkingandmethodabouttheanalysisofInternet-MediatedPublicSentiment.Thensomekeytechnologyissuesareresearchedindetail.Basedonthemethodandkeytechnology,theauthorsintroducethedesignandimplementabouttheplatformofInternet-MediatedPublicSentiment.ThispaperisexpectedtohavethevaluetoapplytheInternet-mediatedpublicsentimentanalysis.Keywords:internet-mediatedpublicsentiment;informationcollection;verticalsearchengine;informationex2traction;contentanalysis

收稿日期:2007-11-06作者简介:许　鑫(1976-),男,江苏东台人,讲师,博士,从事管理信息系统、互联网应用技术

、数字化校园建设等研究;章成志(1977-),男,安徽望江人,讲师,博士后,从事信息检索、数据挖掘与自然语言处理研究. 舆情是指在一定的社会空间内,围绕中介性社会事件的发生、发展和变化,民众对社会管理者产生和持有的社会政治态度。它是较多群众关于社会中各种现象、问题所表达的信念、态度、意见和情绪等等表现的总和。

1　研究现状分析

2007年7月中国互联网络信息中心CNNIC公布了第20次中国互联网发展统计调查报告,报告中显示,截至2007年6月中国网民人数已经达到1162亿,仅次于美国2111亿的网民规模,位居世界第二;而且网民人数比2006年年末新增了2500万,与2006年同期相比网民数一年内增加了3900万,中国网民年增长率达到3117%,步入新一轮的快速增长阶段。中国互联网用户数的大幅跃升,使得网民在网络上有意识或者无意识表达出来的民情民意越来越值得研究。第26卷第8期2008年8月情　报　科　学Vol.26,No.8August,2008我们进行文献调研发现,利用“网络舆情”或者“互联网舆情”对CNKI、维普等学术期刊电子资源进行检索,只发现符合检索查询式的记录10余条,其中1/3强的论文作者来自于天津社会科学院。天津社会科学院舆情研究所承担了2005年天津市哲学社会科学研究课题“网络舆情研究概论”,从整体上系统的引入和探讨了网络舆情。其中张丽红同志在《从网络舆情传播的角度谈文化安全》一文从文化角度谈了其对网络舆情的理解,关注舆情、社会心态与网络,论述了网络舆情传播给中国文化安全带来的主要挑战【1】;毕宏音同志在《舆情视野中的网民上网行为分析》一文从社会行为学的角度对网民的网络行为进行了分析【2】;而刘毅同志则分别在《略论网络舆情的概念、特点、表达与传播》【3】、《内容分析法在网络舆情信息分析中的应用》【4】、《网络舆情与政府治理范式的转变》【5】、《突发性群体事件中舆情信息的汇集与分析》【6】等几篇论文中运用社会学和传播学中的一些研究方法对网络舆情的某些领域进行了探讨。此外,南开大学徐晓日同志在《网络舆情事件的应急处理研究》一文中从公共管理,特别是与政治生活的秩序和社会稳定的影响密切相关的事件的网络应对策略角度进行了研究【7】;姜胜洪同志《网络舆论引导和管理的舆情视角》一文则是从网络管理角度本身关注舆情的引导和管理【8】;周如俊和王天琪在《网络舆情:现代思想政治教育的新领域》【9】、中山大学教育学院王丽荣等人的《网络道德舆论与大学生价值观的塑造》【10】从教育学,特别是德育教育领域关注了网络舆情。再有深圳报业集团丘盘连等人从传播角度探讨了《从网络舆情中“淘宝”服务和谐社会建设》【11】,总政治部宣传部白牧川同志针对军网细分领域发表了《军网的舆情监测和舆论引导》【12】。互联网舆情分析除了上述的宏观研究角度研究外,在具体的分析与实现方法上信息技术领域也有相关学者进行初步探索。上海交通大学谢海光和陈中润发表的《互联网内容及舆情深度分析模式》【13】、秦州的《新闻搜索中的舆情“峰值”————中国近年来重大矿难报道WEB页面数分析》【14】等文章,特别是前者主要从统计学的角度,构建了互联网内容与舆情的热点(热度)、重点(重度)、焦点(焦度)、敏点(敏度)、频点(频度)、拐点

(拐度)、难点

(难度)、疑点(疑度)、粘点(粘度)和散点(散度)等10个分析模式。中科院计算所、哈工大等信息检索和自然语言处理领域的研究者从话题检测与跟踪、事件跟踪、新闻局类等方面进行了与互联网舆情分析相关的一些技术研究。从总体来看,

国内现阶段的互联网舆情研究还是很薄弱的,文献资料也不够丰富,虽已吸引了各个学科领域的一些专家学者的关注,但是深入研究其机制以及相关技术支撑的并不多见。国外的情况总体比国内要好,这其中有对舆情关注历史和文化的沿袭因素,也有大量机构和大量专业分析人员的关注因素。在美国,对于互联网舆情研究,特别是与政治生活密切相关的总统选举和国会中期选举的选情分析和研究已达到了很高的水平。2　思路与方法

此研究本身体现着跨学科的交叉特性,所以我们在研究中借鉴和融合了社会学、新闻传播学、统计学、管理学等方面的研究视角和研究方法,但同时我们更多的是从情报学特有的研究方法和范式出发,关注信息本身,并且以技术手段作为支撑,充分利用计算机和互联网技术。具体而言,互联网舆情研究是情报学研究领域中信息采集、信息组织、信息分析方法的具体应用。在网络时代,互联网舆情作为一种具有传播速度快、影响面广的信息对其传播机制、处理技术以及分析方法都不同于传统的信息组织与分析,我们对互联网舆情分析的研究将对情报学领域中的信息组织理论与方法的进一步深化与应用起到促进作用。在此基础上加深我们对互联网这一新兴媒介的认识,把握互联网舆情传播规律,从而更好的把握民情、体贴民意、倾听民声。我们研究思路还体现在结合应用,环环相扣。互联网舆情分析流程与关键技术解决方案如表1所示。表1　互联网舆情分析流程与关键技术解决方案步骤互联网舆情分析流程研究所涉及关键技术解决方案①互联网信息采集基于垂直搜索引擎的互联网舆情采集技术②互联网信息预处理基于统计与规则相结合的信息过滤技术③舆情关键信息抽取基于语义信息抽取的智能节点识别技术④网络舆情内容分析基于机器学习的舆情分析技术⑤舆情研判平台构建与服务党政舆情研判平台的框架模型与实现技术 除了上述的一些关键技术以外,互联网舆情59118期 互联网舆情分析及应用研究分析中还涉及大量的相关技术,比如事情检测与跟踪系统、自然语言处理特别是中文信息处理、数据挖掘等。我们的研究希望通过开发相关的接近实用化程度的系统,把部分成果用于各类实际项目中,研究中使用具有情报学特点的研究方法主要有:(1)内容分析法。内容分析法是一种对文献内容作客观系统的定量分析的专门方法,其目的是弄清或测验文献中本质性的事实和趋势,揭示文献所含有的隐性情报内容,对事物发展作情报预测。它实际上是一种半定量研究方法,其基本做法是把媒介上的文字、非量化的有交流价值的信息转化为定量的数据,建立有意义的类目分解交流内容,并以此来分析信息的某些特征。内容分析法可以揭示文献(包括保存的网页)的隐性内容,和舆情研究结合起来可以揭示网络宣传的技巧、策略,

衡量互联网内容的可读性,发现作者或者评论者的个人风格,分辨不同时期不同环境的舆情特征,反映个人与团体的态度、兴趣,揭示大众关注的焦点等。需要指出的是内容分析法具有的特点正是我们从情报学视角研究互联网舆情分析的关键所在。(2)实证分析法。实证分析法是通过分析大量案例和相关数据后试图得出某些结论的一种常见研究方法,本课题采用的社会调查法和网络计量法都属于实证分析范畴。社会调查法是有目的、有计划、有系统地搜集有关研究对象社会现实状况或历史状况材料的方法,它可以用谈话、问卷、个案研究、

测验或实验等科学方式,对有关社会现象进行有计划的、周密的、系统的了解,并对调查搜集到的大量资料进行分析、综合、比较、归纳,借以发现存在的社会问题,探索有关规律。在我们课题研究中可以充分发挥互联网的优势,拟通过网络进行一系列的问卷调查或通过即时通信工具在线聊天的方式了解网民针对某类问题的看法。社会调查法可以为我们研究舆情提供第一手材料和数据,揭露现实社会存在的问题,暴露矛盾;也可整理调研数据形成报告为有关部门制定政策、规划、改革提供事实依据,为实现不同层次和不同要求的管理和预测服务;再者通过对舆情的研判深入了解社会现状,发现新的研究专题

、先进的经验或存在的问题,并提出解决问题的新见解、新理论,从而推进该领域工作的科学化。网络计量法是将传统信息计量方法应用在Web分析上,就诸如语言、单词、词汇、频次、作者特征、用户行为等进行计量研究。网络计量法可用于研究互联网的知识结构、领域性质、信息组织特征,研究网络环境下的信息交流规律,研究网络用户的信息需求和网络查寻行为,指导网络管理和网站建设。此外,互联网上站点和网页之间的链接关系和文献计量学中的引用关系非常相似,可以通过研究超链接来研究网络上的信息组织规律和传播方式。在互联网舆情研究中,网络计量学的研究方法、内容及其应用方面的价值将被充分体现。

3　若干技术问题研究