从行业大数据里发现投资亮点综述.pptx

基于大数据的机器学习 在金融投资行业的应用 1 投研领域的挑战 2、仅依靠人工很难跟踪来自新闻、公告、研报、社交网络等各种来源的海量信息 ? ? A股上市公司已经超过2600家，注册制推出后上市公司数量还将大幅增加 新闻网站、微博/雪球大V、微信公众号、论坛、股吧等社交媒体信息 ? 电商数据、招聘信息、司法、诉讼，行业上下游关联等非结构化数据 发现线索 人工 处理各类信息： 如公告、新闻、 年报、商品价格 等等 搜集资料 人工 搜集整理行业数据、 产品价格、公司历 史资料、各种技术 等 分析判断 人工 综合分析各种信息 及资料，形成对公 司未来判断，盈利 预计等 投资决策 人工 形成清晰的投资逻 辑、估值判断、买 卖决策等 后续跟踪 人工 对重点公司保持持 续追踪，买卖时点 的把握等 投研管理业务场景及痛点 1、基本面投资流程很长、需处理的信息量极大、种类繁多 4 挑战也是机会： 大数据如何变成投研团队可以迅速吸收并用于投资活动的小数据？ 重点是：如何把与证券有关信息中的“关联关系”展现出来 2 架构 实体识别 知识图谱 智能事件 深度学习 在线学习 …… 底层：各类数据库 …… 行业数据 社交网络数据 财务数据 专业论坛数据 智能有哪些信誉好的足球投注网站资 讯 研究 股票跟踪 在线研报 工作流 …… 人工智能、大数据分析 通联智能投研平台架构 通联智能投研平台定位于构建一个开放、分享、高效的基本面投研平台，通过自 然 语 言 处 理 和 机 器 学 习 等 技术，高效地从海量的信息中提炼对研究员有价值的信息；同时，该平台实现投研流程 中的过程数据和结果数据管理，满足客户在证券研究过程中对信息响应、研究协作的迫切需求， 使得碎片化的研究成果得以沉淀积累，为投资决策提供重要支持。 专业投资者 资讯中心 ?新闻资讯 ?公司公告 ?微信订阅 ?分享中心 股票管理 ?私有股票池 ?公共股票池 研究中心 ?内部研究 ?晨会研究 ?外部研究 监控中心 ?宏观监控 ?行业监控 ?我的监控 ?内部监控 主 要 功 能 个人空间 ?我的研究 ?我的收藏 ?我的笔记 ?自定义数据 深入洞察行业、 创造卓越价值 大数据分 析 研究过程 与结果沉 淀 智能投研 分析工具 通联投研平台主要功能 Zabbix ELK CMDB dns, ntp, yum/atp，ad，等基础服务 IaaS 基础设施即服务 数据API 数据库 实时行情 数据服务 PaaS 平台即服务 通联投研平台SaaS服务架构 SaaS 软件即服务 平台管理 租户用户 应用管理 三方集成 计费支付 消息通知 租户A 租户B 投研系统 其他系统 租户C 数据源 交易 通道 共享服务 大数据 3 投研分析中的机器智能揭秘 通联数据投研平台机器学习技术框架 交易策略算法层 ? ? 索引行情、状态识别 自动化学习策略 投研产品策略层 ? ? 智能研报服务 智能提醒服务 数据整理层 ? ? 分类、标记 实体识别、事件抽取 逻辑整理层 ? ? 知识图谱 事件序列 机器学习技术应用层 ? ? 深度学习技术 增强学习技术 大数据分析方法论 ? ? 回测技术框架 分析实验设计 有哪些信誉好的足球投注网站推荐服务层 ? ? 有哪些信誉好的足球投注网站相关技术 推荐相关技术 数据采集层 ? ? 爬虫技术 数据清洗与质控 机器学习技术基础层 ? ? 特征抽取、聚类技术 关联分析、排序技术 资讯 通联数据机器学习 投资研究的目的是选择 合适的投资标的 数据可视化 数据有哪些信誉好的足球投注网站 数据清洗 资讯有哪些信誉好的足球投注网站 资讯分类 资讯聚类 资讯去重 公司 数据 数据?资讯 资讯推荐数据 行业数据提取 公司?资讯 公司资讯推荐 公司情感分析 产品数据挖掘 从资讯中寻找投资 线索 公司?数据 公司数据推荐 公司财务模型 数据客观描述宏观/ 行业/公司景气程度 资讯：公司资讯推荐 背景：浏览某个公司相关的资讯 挑战：实体语义消歧 据工信部网站消息，12月18日-19日，由中国机器人（300024）产业联盟、 中国电子信息产业发展研究院、广州工业机器人制造和应用产业联盟…… 东吴证券(13.550, -0.16, -1.17%)分析师徐力认为，中国联通与电信合作的红利 将会逐渐体现，成本优势将愈加明显 苹果与苹果公司？ 提到还是相关？ 资讯：公司资讯推荐 方法：NER（命名实体识别）；提到的是一个公司还是一个普通词组 效果：解决bad case中60%的例子，包括常见上市公司名称，如机器人、 农产品、新能源 常见的NER方法：隐马尔科夫模型 据工信部网站消息，12月18日-19日，由中国机器人（300024）产业联盟、 中国电子信息产业发展研究院、广州工业机器人制造和应用产业联盟…… 苹果与苹果