危害公共安全事件的关联关系挖掘及预测.ppt
《危害公共安全事件的关联关系挖掘及预测.ppt》由会员分享,可在线阅读,更多相关《危害公共安全事件的关联关系挖掘及预测.ppt(30页珍藏版)》请在三一文库上搜索。
1、危害公共安全事件的关联 关系挖掘及预测 OmniEye , 上海交通大学 团队:陈夏明(队长),强思维,王海洋,孙莹,石开元 指导老师:上海交通大学网络信息中心金耀辉 教授 赛题 概况 数据 介绍 方案 设计 结果 输出 2 赛题 概况 数据 介绍 方案 设计 结果 输出 l 赛题背景 l 竞赛任务 3 赛题背景 2014年7月17日至24日,北京于7天内发生6起 危害公共安全事件。 媒体大规模报道、网民舆论负面信息传 播泛滥的温床。 了解危害公共安全事件在互联网上的触发、传 播机理,找到相关事件间的影响关系和共性, 是意义重大的研究课题。 4 竞赛任务 基本任务 1.数据清洗,剔除杂质 2
2、.自定义标签,事件提取 核心任务(可选) 3.同系列事件间相互触发关 系研究 4.不同系列事件间共性分析 5.事件预测 5 原始数据集 HDFS 事件集 CKAN 特征集 CKAN 预测模型 建立 新闻/微博数据 数据预处理 Processing 新闻分类 Spark 事件聚类 Spark 特征 提取 关联分析 可视分析 异常点 剔除 特征降维 模型训练 模型预测 预处理 (任务1) 事件提取 (任务2) 关联分析 (任务3、4) 事件预测 (任务5) 6 赛题 概况 数据 介绍 方案 设计 结果 输出 l 数据集 l 数据预处理 7 数据集及预处理 8 GDP 民族节日 城市坐标 新闻/微博
3、数据(54万条) 媒体/用户数据(24万条) 数据清洗:去重和纠错 数据扩充(Data Enrichment) l 新闻分类 l 事件聚类 l 关联分析 l 事件预测 赛题 概况 数据 介绍 方案 设计 结果 输出 9 新闻分类 公交车 爆炸事件 暴恐 事件 校园砍 杀事件 10 媒体名称发发布时间时间新闻标题闻标题 新华网2013-12-14河南光山县发生校园伤害案 22名学生被砍伤 新浪微博2013-12-15目前,22名被砍伤的学生中,有7名学生因伤势严重转院治疗。 此外,还有1名群众及1名小学生因伤势严重,仍在光山县人民医 院的重症监护室进行治疗。愿平安! 新闻分类 挑战一:不同媒介(
4、体)的报道方式不同 公交车 爆炸事件 暴恐 事件 校园砍 杀事件 11 新闻分类 挑战一:不同媒介(体)的报道方式不同 挑战二:新闻媒体报道角度不同 媒体名称发发布时间时间新闻标题闻标题 网易新闻2013-07-28新疆莎车县发 生暴恐案件,造成37人死亡,13人受伤 人民网2013-07-28新疆莎车:暴恐分子袭击军警击毙暴徒59人 四川在线2013-07-28新疆莎车暴恐袭击案件告破 公交车 爆炸事件 暴恐 事件 校园砍 杀事件 12 媒体名称发发布时间时间新闻标题闻标题 第一金融网2013-04-26新疆巴楚15名警察社区工作人员遭暴徒袭杀 人民网2013-04-26习近平批示新疆巴楚县
5、暴力事件 对案件善后作指示 人民网2013-04-27习近平:要使暴力恐怖分子成为“过街老鼠 人人喊打“ 新闻分类 挑战一:不同媒介(体)的报道方式不同 挑战二:新闻媒体报道角度不同 挑战三:新闻事件和衍生事件的关联 公交车 爆炸事件 暴恐 事件 校园砍 杀事件 13 语境过滤的新闻分类算法 News Classification with Context Filtering 已分类新闻 语境过滤 (相似度Sd) 事件分类器 扩充语料库 置信度 =CI 置信度p max(c)p 14 语境过滤 事件描述的语境特征 以无监督的方式自主学习(基于Google word2vec) 从传统词频统计到词
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 危害 公共安全 事件 关联 关系 挖掘 预测
链接地址:https://www.31doc.com/p-3564894.html