互联网信息收集分析系统（doc X页）

互联网信息收集分析系统 项目前期报告一、概述 现代社会是一个信息社会，掌握必要的 信息是发现问题、 解决间 是的前所。 如何汇集网络民情信息呢? 需要建立网络民情信息收 集机 构和民情监控系统，对重点网站的民情、重点论坛进行信息收集，全 方位、多角度了 解社情民意。 《互联网信息收集分析系统》将提供信息汇集服务，机构及工作 人员可以充 分利用计算机网络自动信息采集功能收集相关信息， 系 统根据用户信息需求，设定主题 目标,使用人工参与和自动信息采集 相结合的方法完成信息收集。 《互联网信息收集分析 系统》是指通过对网络各类信息汇集、分 类、合、短选等技术处理，再形成对网络热点、 动态、网民意见等 实时统计报表的软件系统平台。 二、项目研发背景 随者互联网的快速 发展，网络媒体作为一种新的信息传播形式， 已深入人们的日党生活。网友言论活跃已达 到前所未有的程度，不论 是国内还是国际重大事件，都能马上形成网上导论，通过这种网 络来 表达观点、传播思想，进而产生巨大的与论压力，达到任何部门、机 构都无法忽视的 地步。可以说，互联网已成为思想文化信息的集散地和社会全论的放大器。 随着网络的不 断发展，网络民情越来越受到社会的关注。如何利 用网络了解民情，汇聚民智，以便科学 决策? 有必要建立网络民情分 析机制。为了能够全方位保证网络民情信息收集系统的日常 运作， 政府需 要从物质、制度、资金、人员等方面加以保障。 信息汇集机制。现代社会 是一个信息社会，掌所必要的信息是发 现问题、解决问题的前提。如何汇集网络民情信息 昵? 需要建立网络 民情信息收集机构和民情监控系统, 对重点网站的民情、重点论坛进 生 信息收集，全方位、多角度了解社情民意。信息收集机构及工作人 员应充分利用计算机网 络自动信息采集功能来收集相关信息， 根据用 户信息需求，设定主题目标，使用人工参与 和自动信息采集相结合的 方法完成信息收集。为了能够全方位保证网络民情信息收集系统 的日 常运作，政府雷要从物质、制度、资金、人员等方面加以保障。 信息决策机制。 收集 信息以后，必须对社会民情信息进行针对性 分析，以作为决策的依据。对收集到的信息素 材进行分类，提取关键 词，按照主题重新组织信息，攻生成民情信息。通过对所收集信息 进 行深入分析，理清思路,采用定性分析与定量分析相结合,进行计算 机决策模拟与人工 决策相结合的决策方式。 同时，要建立科学的决策 程序。 运用信息反馈机制不断完善分析 决策。 以按需定制的方式将民情 信息提供给相关人或民情监控部门, 在民情分析系统运行 过程中，民情监控部门可以对已有的信息进行评估，又会产生新的信息需求，进 而规划新 的民情监控重点，开始新的民情监控，形成一个具有生命特 征的周期往复的社情民意反馈 机制。 问题解决机制。网络民情是社会变化的畏雨表，网络民情的变化 反映了人们对政府 的态度，研究和分析网络民情目的是为了解决间 题, 促进社会和谐。 一是建立民主参与平 台。 政府部门可以通过政府网站对关系到群众切身利益的政策举行听证会 与老百姓对 话， 获取信息， 征求意见。 领导干部可以通过网络，开辟个人主页，建立博客，公布自 己的电子 邮箱，专门收集百姓意见,接受网上群众信访,定期与群众进行面对 面沟通和交 流，了解百姓所震所求，帮助群众解决实际问题。进而可 以探索通过网络参与决策的新形 式，如民意测星、电子投票、电子问 责制等民主手段。为有效防止公职人员的越权行为， 我们可以把革些 工作制度，利用信息技术设计国定程序,在群众的注视之下，由机器 来执 行，从而把制度执行过程中的人为干扰降低到最低限度，消除以 权谋私的机会。 二是建立 危机干预于台。通过网络民情分析系统，在第一时间内 获得最新网络民情.并对这些民情进 行有是够时间的研判特别是发现 社会风险苗头，再决定采用何种方式进行化解。 设计网 络民情应急预案。预则立，不预则废。为了有效防控危机 《或社会风险) 的发生，应该结 合本地实情，借鉴成功案例，涯眼未 来，制定详细而周密的应急预案，以保证危机 (或社 会风险) 发生时临危不避,获得最大限度的主动权。制定网络民情预警预案时，可以 将危机 《或社会风险) 分为三级,即 1 级(重大)、2 级(较大)、3 级(一 般)。根据具体等级类别， 采取相应的对策，调动与之对应的资源和 力量处理危机。 运用技术手段引导控制。 网管机  构要利用互联网的监控技术，实 施对 瑟 地址的监测、跨踪，实行网管全天候值班监测,对 “黄赠毒”和 有损国家人民利益等负面信息进行及时清除 运用智能型软件进行敏 感词 组的自动过滤，部分重要论坛实行实名认证制度，通过对论坛发 由的延时审查及发布等措 施净化网络环境，维护社会和谐稳定。 三、项目方案 《互联网信息收集分析系统》 通过 对热点问题和重点领域比较集 中的网站信息，如。 网页、论坛、BBS 等，进行 24 小时监 控，随时 下载最新的消息和意见。 下载后完成对数据格式的转换及元数据的标 引。对下 载本地的信息，进行初步的过下和预处理。对热点问题和重 要领域实施监控，前提是必须 通过人际交互建立贵情监控的知识亩， 用来指导智能分析的过程。 对热点问题的智能分析， 首先基于传统基 于向量室间的特征分析技术上，对抓取的内容做分类、聚类和摘要分 林， 对信息完成初步的再组织。然后在监控知识库的指导下进行基于 微情的语义分析，使管理 者看到的民情民意更有效，更符合现实。 最 后将上控的结果，分别推送到不同的职能部门， 供制定对策使用。《互联网信息收集分析系统》 是利用搜索引擎技术和网络信息控 气技术， 通过网页内容的自动采集处理、 敏感词过泪、 智能聚类分类、 主题检测、专题聚依、统 计分析，实现各单位对自己相关网络奥情监 督管理的需要， 最终形成与情简报、 与情专 报、 分析报告、 移动快报， 为决策层全面掌兵情动态，做出正确与论引导，提供分析 依据。 《互联网信息收集分析系统》是征对在一定的社会空间内，围绝 中介性社会事件的 发生、发展和变化，民众对社会管理者产生和持有 的社会政治态度于网络上表达出来意愿 集合而进行的计算机监测的 系统统称。“网络典情”是较多群众关于社会中各种现象、问 题所表达的信念、态度、意见和情绪等等表现的总和。网络与情形成迅速,对社会 影响巨 大, 加强互联网信息监管的同时,组织力量开展信息汇集整理 和分析， 对于及时应对网络 突发的公共事件和全面掌握社情民意很有 意义。 《一)、它包括以下几个主要子系统， 它 包括以下几个主要子系统。 1、 生悄分析引人擎系统 与情分析引擎为系统的核心功能，其主 要包括以下功能， 热点识 别能力、自动分类、聚闫分析、倾向性分析与统计、主题跟啼、 信息 自动摘要功能、截取证据、趋势分析、突发事件分析、报警系统、统 计报告。 2、 百 联网信息采集系统 采用元搜索与信息雷达技术。智能信息抽取技术主要是针对特殊客户进 行特定领域的信息采集。 3、 搜索引擎数据管理系统 搜索引擎数据管理功能主要包括以下 功能。 对收集到信息进行预 处理; 对搜索引擎数据集进行阶段性的数据维护; 支持系统多 用户分 级管理系统， 包括用户逐级进行审核功能。 支持信息服务:最新报道、 热点新 他、分类阅读、熏情简报、信息检索、RSS 订阅等服务;信息 文档转换技术，可以对信息 进行传统文件格式转换。如。 Doc、Excel、 Aceess、Rss 等文件生成。可生成报表， 功能简壕 、 热点识别能力 可以根据新闻出处权威度、 评论数量、发言时间密集程度等参 数，识别出给定时间段内的热门话题。 领向性分析与统计 对信息的阐述的观点、主和进行 倾向性分析。以提供参考分析依据。分析的依据可根据信息的转载量、评论的回言信息