企业级大数据知识图谱产品的构建及应用

【实例简介】
企业级大数据知识图谱产品的构建及应用
明略鹚据 MININGLAMP 企业级大数据做啥? Big data is like teenage sex Everyone talks about it, nobody really knows how to do it Everyone thinks everyone else is doing it, so everyone claims they are doing it too Simon matthews 卖平台? 卖数据? 卖服务? 做咨询? ??? Arch Summit全球架构师峰会 Powered by InfoQ 明略据 · MININGLAMP 从业务的角度看 公安 公安 搜索 团伙挖掘 重大事件 预 金融 报表计算 用户画像 实时交易 反欺诈 历史数据 精准营销 设备故障造业 查询 预测 电商 税务 数据整合 数据治理 推荐系统 税务反欺诈 社交,O20 大数据 商业智能 数据驱动的 平台 (BI 资源变现 普通需求 中高级需求 高级且痛点需求 普通需求很通用,基本无行业属性,但业务附加值低 越高级的需求,行业属性越明显,越难落地或做岀好效果,但业务附加值高 能解决高级需求的产品或方案,往往也能解决普通、中级高级需求,但反之未必 Arch Summit全球架构师峰会 Powered by InfoQ 明略据 · MININGLAMP 明略之道 多种多样的需求 公安 金融 制造业 需求 需求 需求 升级思考 降维打击 交互式 服务 批量式可视化业机 务 公安金融 构建数据之间的关联 知学 数据数据 简洁统一的数据模型 只习 降维打击最关键的两点:数据治理/整合和关联计算 业务知识和机器学习(数据挖掘)会贯穿整个流程 普适的方案,目标是解决各行业最难的业务需求 Arch Summit全球架构师峰会 Powered by InfoQ 明略鹚据 · MININGLAMP 构建大数据知识图谱产品 企业级大数据简析 构建大数据知识图谱产品 应用浅谈 Arch Summit全球架构师峰会 Powered by InfoQ 明略据 · MININGLAMP 知识图谱是什么? o 8 以图为载体 点代表“实体” 边代表“关系 ●●a 88● 结合特定行业数据和领域知识,得到的则是领域內知识图谱 比如,银行+交易数据+人员信息=>以人为核心(交易为关系)的知识图谱 Arch Summit全球架构师峰会 Powered by InfoQ 明略鹚据 ·· MININGLAMF 个简单的工商企业的知识图谱 轮胎 生产 总经理 公司 A 人 属于 法人 公司 关联 万物互联 子公司 制造业 产品 属于 法人 公司 == B 行业 手套 图上每个点皆为“实体”,边为“关系”(具有不同的类别) 实体和关系可以有多个属性(如人年龄,性别,关系类别/开始时间 万物互联”,数据种类越多,数据量越大,越能还原真实世界的面貌 Arch Summit全球架构师峰会 Powered by InfoQ 明略据 · MININGLAMP 如何落地知识图谱产品? 交互式服务|批量式服务|可视化服务 提供各类服务接口,支撑业务场景 数据挖掘与机器学习 业务模型,自然语言处理,全量数据机器学习 图数据库 知识图谱的物理载体,提供各类图相关服务 关联计算 基于规则的关联计算,建立实体之间的关系 数据治理与整合 结构化与非结构化数据智能治理与整合 他 统一数据视图 建立行业特定的知识图谱所需的数据模型 Arch Summit全球架构师峰会 Powered by InfoQ 明略据 · MININGLAMP 多规融合数据模型 姓 张三 人 车 张二 实体 手机 公司 产品 特别的,对于实体,需要 融合实体各方面的信息 D 110105**实大 交易流水 人员 地 址 XX市XX街道 酒店入住 事件 火车出行 手 机 159*为**为 民航出行 139**大 直系关系 关系 人户关系 信 XXX 人案关系 Arch Summit全球架构师峰会 Powered by InfoQ 【实例截图】
【核心代码】