大数据技术介绍、数据挖掘与分析

大数据_云计算 / 2020-04-26 15:15:52
大数据技术介绍、数据挖掘与分析
    马上咨询

    俞志鹏  资深数据库专家 兼 BI 主管 

    14 年的行业经验（电信、移动、互联网、证券行业），曾先后就职于 3 家上市公司，主要负责系统架构设计、数据库管理、数据仓库规划设计、数据挖掘、项目管理等工作，资深 BI 主管，资深数据库(DBA)专家，资深数据分析专家，有 11 年以上大型数据库系统架构规划设计经验，精通产品规划、产品设计、产品研发及软件设计模式，有丰富的业务模型设计、数据分析经验，具有行业数据仓库建设、数据质量管理以及信息统计方面的成功经验；精通数据挖掘工具 SPSS，数据库建模工具 Power Designer。

    课程简介

    本课程培训周期为 2 天

    培训特色

    本课程通过了解当前数据增长，出现海量数据的情况下，我们需要用到大数据的分析技术，同时认识在运营环境下数据分析和数据挖掘的特点，主要介绍了大数据的相关思想及相关技术和应用案例，数据挖掘的基本理论和实际应用技术，包括数据分析方法、案例以及数据挖掘中的关联分析技术、分类和预测技术、聚类分析技术等。解释了如何将数据挖掘应用于解决实际问题，从而使你能将数据挖掘技术应用于自己的实际工作中去。课程还着重介绍了数据挖掘模型的建立与测试，以及数据挖掘结果的解释与验证以及数据分析和数据挖掘在相关行业的应用实例等内容。本课程不是简单的数据挖掘的概念讲解，把技术、案例、问题结合起来，把理论实践化，让学者能深入体会数据挖掘的应用。

    目标收益

    通过本课程的教学，使学员充分了解和认识大数据的相关知识（大数据的应用范围及相关技术思想）同时学会用主流的数据挖掘软件完成数据挖掘建模任务，使学员掌握数据挖掘方法论 CRISP-DM 的本质。通过几个具体的、典型的数据挖掘案例，使学员在掌握这些案例所用的技巧的同时，充分理解数据挖掘的方法论，实现举一反三的效果，提高学员分析问题解决问题的实际能力。

    课程大纲

    第一部分 大数据的介绍
    1.   什么是大数据？
        海量非结构化数据本身+处理方法
    2.   大数据为什么重要及大数据带来的机遇
        决定了公司是否有未来和业务可延伸范围
    3.   对大数据的深层理解
        大数据的组成及特点介绍
    4.   大数据的相关技术与应用案例
        大数据的相关技术 如：
        数据采集：ETL 工具
        数据存取：关系数据库；NoSQL；SQL 等
        基础架构支持：云存储；分布式文件系统等
        计算结果展现：云计算；标签云；关系图等
    第二部分：数据分析基础
    1.   认识数据分析：
        1)数据分析的含义
        2)数据分析主要做什么？
    2.   为什么要学习做好数据分析
        1）从数据分析的描述问题、对比问题、分析问题 到最后解决问题说明为什么要做好
        2）通过案例说明一般人员与数据分析师的区别
    3.   数据分析的误区和分析的关键
    4.数据分析的 6 个步骤，3 大方向（理清思路，寻找答案，观点表达）
        步骤 1：需求明确--理清思路
        步骤 2：数据收集--理清思路
        步骤 3：数据处理--寻找答案
        步骤 4：数据分析--寻找答案
        步骤 5：数据展示--观点表达
        步骤 6：报表撰写--观点表达
        分别对以上 6 个步骤以案例的方式详细说明。
        实践：以**数据分析项目为引子，学习怎样将数据分析的技能与具体业务项目结合起来应用于实际的工作之中
    第三部分：数据挖掘基础
    1、数据挖掘概述
        数据挖掘基本理念
        数据挖掘历史发展进程
        数据挖掘主要功能
        数据挖掘的发展趋势
    2、数据挖掘方法论
        CRISP-DM
        SEMMA
    3、数据处理过程
        变量和数据
        变量的分类及类型
        数据的质量
        数据理解过程
        数据准备过程
    第四部分：数据挖掘及数据分析技术
    1.数据挖掘主要分析方法：
        1.聚类分析（Clustering）
        2.分类分析（Classification）
        3.关联分析（Association）
        4.预测分析（Prediction）
        5.回归分析
        6.相关分析
        7.数据比较分析
        8.数据挖掘的可视化
    2.数据挖掘的实施
    3.分析图形： 正态性检验 描述性统计 箱型图、区间图、时序图 介绍
    4.数据挖掘的关键技术:数据预处理
    5.数据挖掘效果的评估
        实践：S SPSS
    第五部分：构建数据挖掘分析体系
    1、分析团队建设
    2、分析工作管理
    3、数据分析核心能力建设
    4、分析工作与业务协同
    第六部分. . 数据挖掘应用
    1.   数据挖掘及管理经验
    2.   数据挖掘在   *** 行业领域的应用举例
        2.1   客户行为与潜在客户分析
        2.2   用户信用度分析
        2.3   趋势预测
        2.4   新产品交叉营销分析 等
    3.   数据挖掘实践举例: : 客户流失、趋势发展分析等（结合 S SPSS   软件）
        实践：内容包括 从设计－> > 形成模型- -> > 应用
    第七部分 数据挖掘工具及未来研究的方向和热点
    1.几种数据挖掘工具比较
    2.典型工具介绍及使用范围
    3.如何选择数据挖掘工具
    4.数据挖掘的方向和热点

    最新动态

    点击阅读更多内容
    返回顶部