大数据非结构化数据文本分析.pdf

非结构化数据的文本分析 演讲人：陈鸿 品质 速度 创新 Copyright © ePanel All rights reserved. 从大量社会化、碎片化信息中洞察消费者 客服记录 意见信箱 微博  非结构化数据 论坛 社交网站  数据量大 留言 购物网站  口头化行文方式 博客 聊天记录 品质 速度 创新 Copyright © ePanel All rights reserved. 2 当前分析非结构化数据信息的方式 优点 缺点 人工编码分析 1. 能根据语境准确分词，进行语义 1. 人工分析速度慢 分析 2. 很难支持数据量较大的信息 人工逐条阅读分析素材，根据语 2. 对数据形式要求低，可对口头化 分析工作 行文数据分析 义进行编码统计与分析 优点 缺点 软件统计分析 1. 对规范化的行文数据分析速度快 1. 对数据形式要求高，对口头 化行文数据分析效果差 2. 支持数据量较大的分析工作 利用软件导入分析素材，可进行 2. 无法结合语境对语义进行分 析与快速查询 词频分析、词性分析、关联分析 品质 速度 创新 Copyright © ePanel All rights reserved. 3 有没有结合两种优点的分析方法 品质 速度 创新 Copyright © ePanel All rights reserved. 4 益派提供一个小案例演示供大家参考 2013年3月，我们在益派在线调查社区对消费者洗碗行为进行了话题讨论连续性研究，现摘取 其中1个话题的分析结果作为案例演示分享 企业方 招 审 转 调 会 查 员 应 管 用 理 募 核 化