第三章大数据金融行业应用
视频问题：
保险1：数据分析在保险行业有着较大的应用前景，尤其是在产险方面，其在美国已经有了较为成熟的应用。（是）
保险2：金融行业可以利用大数据实现涅槃重生。中国保险行业的渗透率只有3%，大大低于西方发达国家20%左右的渗透率。（否）
证券：中国大数据IT应用投资规模以五大行业最高，其中以互联网行业占比最高，占大数据IT应用投资规模的28.9%，其次是电信领域（19.9%），第三为金融领域（17.5%），政府和医疗分别为第四和第五。（是）
银行1：银行每创造100万美元的收入，一家银行平均产出约820GB的数据（是）银行2：大数据在银行的七个业务板块分别是零售银行业务，公司银行业务，资本市场业务，交易银行业务，资产管理业务，财富管理业务以及风险管理业务。（是）
在线考试：
1、2011年5月美国对冲基金Derwent Capical Markets通过分析Twitter的数据来感知市场营销，在首月的收益率为1.85%，让平均为0.76%的其他对冲基金相形见绌。（是）
2、客户生命周期管理包括新客户获取、客户防流失和客户赢回等。（是）
3、精准营销包括实施营销、交叉营销、个性化推荐以及客户生命周期管理。（是）
4、对于银行以及银行产品的舆论上，银行可以通过爬虫技术，抓取社区、论坛和微博上相关信息，并通过自然语言处理技术进行正负面判断，做到及时处理问题。（是）
5、在大数据时代，针对市场波动对证券公司IT建设的影响，一个聪明的证券公司会在行情比较清淡的时候加强基础建设替换老系统，因为在在大牛市行情好时做一些系统变更的风险系数非常高。（是）
6、招商信诺电销对信用卡客户的数据分析，主要思路是通过持卡人的行为，建立客户购买保险产品倾向性的模型，以提高电销的成功率。（是）
7、摩根大通银行可以利用大数据技术追踪盗取客户账号或侵入自动柜员机（ATM）系统的罪犯。（是）
8、客户画像指的是个人客户画像，包括人口统计写特征、消费能力数据、兴趣数据、分险偏好等。（否）
9、大数据的发展使国内的不少银行也开始尝试通过大数据来驱动业务运营，如中信银行信用卡中心使用大数据实现实时营销；招商银行利用大数据发展小型微贷等。（是）10、没有好的数据基础，可能建模过程就会中途夭折，但是建模成功的话，就能得到如意的结果。（否）
11、大数据是依托新的数据处理技术，对海量、高速增长、多样性的结构和非数据结构数据进行加工挖掘，找寻数据背后的规律，以提高分析决策能力，优化流程和科学配置资源的管理工具。（是）
12、2012年海通证券自主开发的“给予数挖掘算法的证券客户行为特征分析技术”主要应用在客户深度画像以及基于画像的用户流失概率预测。（是）
13、股票、投资理财、投诉服务等各个业务涉及到交易、风控、清算等系统的数据都是用户在各个触电，场景下的痕迹，对这些数据进行拉通和分析，可以掌握用户在该券下商所
处的是生命周期，从而可以对用户进行针对性经营。（是）
14、强大的客户信息数据仓库及数据库是良好实施数据分析的基础。（是）
15、数据分析是为了提取有用信息和形成结论而对数据加以详细研究的过程。（是）
16、中国大数据IT应用投资规模中，金融领域占的比例最？（否）
17、数据分析在处理客户关系管理上只是流失客户的预测。（否）
18、证券公司要在竞争激烈市场中保持领先地位，需要在满足监管层合规审计的要求下，以客户为中心，对内深化运营和服务，对外实时了解市场和上市企业的信息，加强跨界合作。（是）
19、下面哪一项不是构建数据港（）答案：数据创造
20、在保险行业中，确定保单的费率关键问题是找出“影响赔付支出的风险因素或变量”，例如驾驶员的年龄、驾龄、性别、汽车的新旧程度等，这些都可以通过（）确定的。
答案：数据分析
21、医疗保险诈欺与滥用通常在于（）。答案：A.非法骗取保险金 B.在保额限度内重复就医 C.浮报理赔金额
22、随着互联网时代的发展，大数据在保险行业上的挑战体现在（）。
答案：A.行业的渗透率低 B.互联网保险产品有但优势不足 D.起步晚，数字化程度不高
23、数据在银行的应用主要体现在（）。答案：ABCD
A.客户画像.
B.运营优化
C.精准营销
D.风险管控
24、大数据在保险行业中的创新体现在（）。答案：ABCD
A.大数据有助于精确保险行业市场定位
B.大数据成为保险行业市场营销的利器
C.大数据支撑保险行业收益管理
D.大数据创新保险行业需求开发
25、证券行业中，（）数据需要纳入到大数据平台？答案：ABCD
A.股票交易系统
B.理财交易系统
C.用户开户系统
D.客服系统
26、数据分析是在保险行业的应用主要体现在（）。答案：ABCD
A.确定保单的费率
B.获得新客户
C.保留旧客户
D.检测诈骗索赔
27、数据分析在证券行业中的应用包括（）。
答案：A.股价预测 B.客户关系管理 C.投资景气指数
28、在大数据面前，未来银行所面临的挑战有（）。
答案：A.银行对于客户的了解程度，相对越来越弱
B.客户不断流失难以挽回
C.客户维系成本不断攀升
29、风险管控在包括（）。
答案：A.中小企业贷款风险评估 B.实时欺诈交易识别 C.反洗钱分析
30、运营优化具体体现在（）。
答案：A.市场渠道分析优化 B.产品和服务优化 D.舆论分析
2017 年公需科目《大数据前沿技术及应用》 第八章：大数据发展趋势答案 1、大数据预测能够分析和挖掘出人们不知道或没有注意到的模式，确定判断某件事情必然发生。（3 分） A. 是 B. 否正确选项：B 2、大数据的发展趋势中的智能化关键技术包括感知技术、自然语言技术、交互技术以及决策等。（3 分） A. 是 B. 否正确选项：A 3、大数据分为“结构化数据“与”非结构化数据” 。（3 分） A. 是 B. 否正确选项：A 4、2011 年，IBM 的“沃森”超级计算机在美国著名智力竞赛节目《危险边缘》上击败两名人类选手而夺冠。（3 分） A. 是 B. 否正确选项：A 5、2012 年 7 月国务院发布的《“十二五”国家战略性新兴产业发展规划》中明确提出支持海量数据存储、处理技术的研发和产业化。（3 分） A. 是 B. 否正确选项：A 6、机器学习就是通过算法，使得机器能从大量历史数据中学习规律，从而对新的样本做智能识别或对未来做预测。（3 分） A. 是 B. 否正确选项：A
7、由于大数据处理多样性的需求，目前出现了多种典型的计算模式，包括大数据查询分析计算、批处理计算、流式计算、图计算等。（3 分） A. 是 B. 否正确选项：A 8、大数据开发的根本目的是以数据分析为基础，帮助人们做出更明确的决策，优化企业和社会运转。（3 分） A. 是 B. 否正确选项：A 9、人工智能够和人一样进行感知、认知、决策、执行的人工程序或系统。（3 分） A. 是 B. 否正确选项：A 10、知识图谱是一种基于图的数据结构，由节点和边组成。（3 分） A. 是 B. 否正确选项：A 11、大数据成熟催化了人工智能的进步，深度学习带来算法上的突破则带来了人工智能浪潮。（3 分） A. 是 B. 否正确选项：A 12、当前，企业提供的大数据解决方案大多基因 Hadoop 开源项目。（3 分） A. 是 B. 否正确选项：A 13、北京航空航天大学创办了国内第一个“大数据科学与应用”软件工程硕士专业。（3 分） A. 是 B. 否正确选项：A 14、数据结构”是指不存储数据库之中的，包括电子邮件、文本文件、图像、视频等数据。（3 分）
工业大数据分析技术与前沿技术趋势 工业大数据具有实时性高、数据量大、密度低、数据源异构性强等特点，这导致工业大数据的分析不同于其他领域的大数据分析，通用的数据分析技术往往不能解决特定工业场景的业务问题。工业过程要求工业分析模型的精度高、可靠性高、因果关系强，这样才能满足日常工业生产需要，而纯数据驱动的数据分析手段往往不能达到工业场景的要求。工业数据的分析需要融合工业机理模型，以“数据驱动+机理驱动”的双驱动模式来进行工业大数据的分析，从而建立高精度、高可靠性的模型来真正解决实际的工业问题。因此，工业大数据分析的特征是强调专业领域知识和数据挖掘的深度融合。本节主要对时序模式分析技术、工业知识图谱技术、多源数据融合分析技术等三种典型的工业大数据分析技术进行介绍。 1 时序模式分析技术 伴随着工业技术的发展，工业企业的生产加工设备、动力能源设备、运输交通设备、信息保障设备、运维管控设备上都加装了大量的传感器，如温度传感器、振动传感器、压力传感器、位移传感器、重量传感器等，这些传感器在不断产生海量的时序数据，提供了设备的温度、压力、位移、速度、湿度、光线、气体等信息。对这些设备传感器时序数据分析，可实现设备故障预警和诊断、利用率分析、能耗优化、生产监控等。但传感器数据的很多重要信息是隐藏在时序模式结构中，只有挖掘出背后的结构模式，才能构建一个效果稳定的数据模型。
工时序数据的时间序列类算法主要分六个方面：时间序列的预测算法如ARIMA，GARCH 等；时间序列的异常变动模式检测算法，包含基于统计的方法、基于滑动窗窗口的方法等；时间序列的分类算法，包括SAX 算法、基于相似度的方法等；时间序列的分解算法，包括时间序列的趋势特征分解、季节特征分解、周期性分解等；时间序列的频繁模式挖掘，典型时序模式智能匹配算法（精准匹配、保形匹配、仿射匹配等），包括MEON 算法、基于motif 的挖掘方法等；时 间序列的切片算法，包括AutoPlait 算法、HOD-1D 算法等。 工业大数据分析的一个重要应用方向是对机器设备的故障预警和故障诊断，其中设备的振动分析是故障诊断的重要手段。设备的振动分析需要融合设备机理模型和数据挖掘技术，针对旋转设备的振动分析类算法主要分成三类：振动数据的时域分析算法，主要提取设备振动的时域特征，如峭度、斜度、峰度系数等；振动数据的频域分析算法，主要从频域的角度提取设备的振动特征，包括高阶谱算法、全息谱算法、倒谱算法、相干谱算法、特征模式分解等；振动数据的时频分析算法，综合时域信息和频域信息一种分析手段，对设备的故障模型有较好的提取效果，主要有短时傅里叶变换、小波分析等。 2 工业知识图谱技术 工业生产过程中会积累大量的日志文本，如维修工单、工艺流程文件、故障记录等，此类非结构化数据中蕴含着丰富的专家经验，利用文本分析的技术能够实现事件实体和类型提取（故障类型抽取）、事件线索抽取（故障现象、征兆、排查路线、结果分析），通过专家知
第三章大数据金融行业应用 视频问题： 保险1：数据分析在保险行业有着较大的应用前景，尤其是在产险方面，其在美国已经有了较为成熟的应用。（是） 保险2：金融行业可以利用大数据实现涅槃重生。中国保险行业的渗透率只有3%，大大低于西方发达国家20%左右的渗透率。（否） 证券：中国大数据IT应用投资规模以五大行业最高，其中以互联网行业占比最高，占大数据IT应用投资规模的28.9%，其次是电信领域（19.9%），第三为金融领域（17.5%），政府和医疗分别为第四和第五。（是） 银行1：银行每创造100万美元的收入，一家银行平均产出约820GB的数据（是）银行2：大数据在银行的七个业务板块分别是零售银行业务，公司银行业务，资本市场业务，交易银行业务，资产管理业务，财富管理业务以及风险管理业务。（是） 在线考试： 1、2011年5月美国对冲基金Derwent Capical Markets通过分析Twitter的数据来感知市场营销，在首月的收益率为1.85%，让平均为0.76%的其他对冲基金相形见绌。（是） 2、客户生命周期管理包括新客户获取、客户防流失和客户赢回等。（是） 3、精准营销包括实施营销、交叉营销、个性化推荐以及客户生命周期管理。（是） 4、对于银行以及银行产品的舆论上，银行可以通过爬虫技术，抓取社区、论坛和微博上相关信息，并通过自然语言处理技术进行正负面判断，做到及时处理问题。（是） 5、在大数据时代，针对市场波动对证券公司IT建设的影响，一个聪明的证券公司会在行情比较清淡的时候加强基础建设替换老系统，因为在在大牛市行情好时做一些系统变更的风险系数非常高。（是） 6、招商信诺电销对信用卡客户的数据分析，主要思路是通过持卡人的行为，建立客户购买保险产品倾向性的模型，以提高电销的成功率。（是） 7、摩根大通银行可以利用大数据技术追踪盗取客户账号或侵入自动柜员机（ATM）系统的罪犯。（是） 8、客户画像指的是个人客户画像，包括人口统计写特征、消费能力数据、兴趣数据、分险偏好等。（否） 9、大数据的发展使国内的不少银行也开始尝试通过大数据来驱动业务运营，如中信银行信用卡中心使用大数据实现实时营销；招商银行利用大数据发展小型微贷等。（是）10、没有好的数据基础，可能建模过程就会中途夭折，但是建模成功的话，就能得到如意的结果。（否） 11、大数据是依托新的数据处理技术，对海量、高速增长、多样性的结构和非数据结构数据进行加工挖掘，找寻数据背后的规律，以提高分析决策能力，优化流程和科学配置资源的管理工具。（是） 12、2012年海通证券自主开发的“给予数挖掘算法的证券客户行为特征分析技术”主要应用在客户深度画像以及基于画像的用户流失概率预测。（是） 13、股票、投资理财、投诉服务等各个业务涉及到交易、风控、清算等系统的数据都是用户在各个触电，场景下的痕迹，对这些数据进行拉通和分析，可以掌握用户在该券下商所
大数据在金融行业的应用与发展展望 现如今，人们的生活中无不充斥着互联网的痕迹，越来越多的行为和事件被大数据记录又被大数据影响，金融行业因其安全性的重要更是与大数据技术息息相关。 金融业务对于数据应用的广泛性与质量要求 在互联网发展日新月异的时代背景下，人们的生活、工作、消费、活动的习惯与行为特点在被不断重塑，大量数据被留存记录，各行业对于数据的挖掘和使用有了适应时代发展的新特点，这在银行等金融机构的业务中尤为凸显。获客、信用风险控制、留存客户、触发客户消费是金融行业的几大痛点，而以集奥聚合(北京集奥聚合科技有限公司简称)为代表的大数据技术公司引领的大数据行业的发展正好满足了这些需求，有效克服了目前金融机构数据来源单一、覆盖率不足、数据挖掘程度不深等问题。 金融行业既涉及宏观国民经济的方方面面，又与微观社会主体的经济生活密切相关，中国是一个人口大国，也是社会活动多样性的代表性国家，金融机构为了在纷繁的条件下做出正确的商业判断越发需要依据海量的高质量数据进行分析，但这也与相关数据覆盖人群不足、信息孤岛尚未联通等社会大环境形成了相对矛盾。例如，在个人信用风险控制方面，过去金融机构主要依托从各金融机构上报的信贷类数据的集中管理者——人民银行征信中心调取相关数据对于个人
进行信用评价，但人民银行征信中心的数据并未对中国全部人口有实质性的广泛覆盖，甚至可以说只覆盖了偏少一部分有信贷、信用卡消费记录的人群，加之考虑到因互联网金融日益发展等因素而对金融产品需求愈发多样的人群，仅基于信贷类数据评价这些人群可能会误伤很多暂时还没有信贷纪录的中低收入人群，利用不同来源的“大数据”及相关技术(以下统称大数据)解决个人客户信用评价的全面性与客 观性问题的重要作用凸显出来。 有价值大数据汇聚具备的特点 有价值的大数据的汇聚具备以下特点，这也是金融业应用大数据时要考虑的关键： 一、数据的联通性。由于很多数据是基于不同渠道、场景和主键进行的汇聚，要把这些碎片化数据进行准确整合，需要有很强的ID MAPPING能力，数据的联通解决不同数据是否归属于同一主体的能力。问题举例，10条行为信息，究竟是10个不同主体产生的，还是1个人在10个不同渠道留下的，不同的判断会直接影响数据分析的结果。 二、数据的连续性。数据汇聚需要在“约定“的频率下持续不断、全面地进行才能产生集合价值。首先，数据连续性要求数据源本身具备稳定提供数据的能力、数据全面和质量可靠的能力。就完整和可靠而言，金融机构是公认的最完整和可靠的数据来源。就稳定性而言，
大数据技术与应用专业建设 调研报告 自党的十八大以来，我国提出了实施国家大数据战略的重大决策。国务院和相关部门先后印发了《促进大数据发展行动纲要》、《大数据产业发展规划（2016～2020年）》等指导性文件。各部门、各地方高度重视，据不完全统计，我国已有20多个省级地方和10余个部委出台了本地区、本行业大数据发展规划，我国大数据发展已经正式驶入快车道。 2015年9月5日经李克强总理签批，国务院印发《促进大数据发展行动纲要》（以下简称《纲要》），系统指导我国大数据发展的国家顶层设计和总体部署大数据发展工作。《纲要》提出从政府大数据、新兴产业大数据、安全保障体系三个方面着手推进大数据领域十大工程建设，将我国大数据发展推向了另一个制高点。 职业教育服务经济与社会发展，必须紧跟产业发展步伐，随着经济增长方式转变而“动”，跟着产业结构调整升级而“走”，围着企业技能型人才需求而“转”，适应市场的需求而“变”。在大数据技术飞速发展的今天，职业教育必须紧跟大数据产业发展步伐。为了更好地了解相关行业企业对大数据人才的需求，促进大数据技术与应用专业教学及专业建设，大数据技术与应用专业教学资源库建设团队在国内外针对大数据在行业企业的需求开展了调研。
一、调研目的 1、了解大数据行业企业对大数据技术与应用专业人才的需求倾向、人才需求规格预测、就业预测、人才的市场定位等； 2、了解大数据行业企业对大数据技术与应用专业人才培养模式、培养目标的意见，以及对专业知识、岗位分工、职业技能等的要求； 3、了解往届相关专业毕业生在工作单位的表现及用人单位对往届毕业生的工作、岗位能力评价； 4、与相关企业建立校企合作模式，促进教学与社会实践的联系，为大数据技术与应用专业教学资源库的专业建设、课程体系建设及培养模式寻找更完善的发展方向。 二、调研方式 1.问卷调查：印制问卷涵寄或面交，请企业相关人员作答。 2.实地调研：教师到企业和用人单位实地调研。 3.座谈调研：邀请用人单位的技术人员、管理人员到系里开展座谈交流。 4.网上调查：到网上搜索有关人才需求、课程设计、教学计划等信息。 三、国内外大数据发展现状 （一）大数据产业呈现爆炸式增长 由IDC和EMC联合发布的《The Digital Universe of Opportunities : Rich Data and the Increasing Value of Internet of Things》研究报告中指出，2011年全球数据总量已达到1.8ZB，并将以每两年翻一番的速度增长，
大数据技术与应用专业详细解读 大数据技术与应用专业是新兴的“互联网+”专业，大数据技术与应用专业将大数据分析挖掘与处理、移动开发与架构、人软件开发、云计算等前沿技术相结合，并引入企业真实项目演练，依托产学界的雄厚师资，旨在培养适应新形势，具有最新思维和技能的“高层次、实用型、国际化”的复合型大数据专业人才。 专业背景 近几年来，互联网行业发展风起云涌，而移动互联网、电子商务、物联网以及社交媒体的快速发展更促使我们快速进入了大数据时代。截止到目前，人们日常生活中的数据量已经从TB(1024GB=1TB)级别一跃升到PB(1024TB=1PB)、EB(1024PB=1EB)乃至ZB(1024EB=1ZB)级别，数据将逐渐成为重要的生产因素，人们对于海量数据的运用将预示着新一波生产率增长和消费者盈余浪潮的到来。大数据时代，专业的大数据人才必将成为人才市场上的香饽饽。当下，大数据从业人员的两个主要趋势是：1、大数据领域从业人员的薪资将继续增长；2、大数据人才供不应求。 图示说明：2012-2020年全球数据产生量预测 专业发展现状 填补大数据技术与应用专业人才巨大缺口的最有效办法无疑还需要依托众多的高等院校来培养输送，但互联网发展一日千里，大数据技术、手段日新月异，企业所需要的非常接地气的人才培养对于传统以培养学术型、科研型人才为主要使命的高校来说还真有些难度。幸好这个问题已经被全社会关注，政府更是一再提倡产教融合、校企合作来创办新型前沿几
乎以及“互联网+”专业方向，也已经有一些企业大胆开始了这方面的创新步伐。据我了解，慧科教育就是一家最早尝试高校校企合作的企业，其率先联合各大高校最早开设了互联网营销，这也是它们的优势专业，后来慧科教育集团又先后和北京航空航天大学、对外经济贸易大学、贵州大学、华南理工大学、宜春学院、广东开放大学等高校在硕、本、专各个层次开设了大数据专业方向，在课程体系研发、教学授课及实训实习环节均有来自BAT以及各大行业企业一线的技术大拿参与，所培养人才能够很好地满足企业用人需求。 专业示例 笔者在对慧科教育的大数据技术与应用专业做了专门研究，共享一些主要特色给大家参考： 1.培养模式 采用校企联合模式，校企双方（即慧科教育集团和合作校方）发挥各自优势，在最大限度保证院校办学特色及专业课程设置的前提下，植入相应前沿科技及特色人才岗位需求的企业课程。 2.课程体系 笔者对慧科教育的大数据技术与应用做了专门研究，现分享一下慧科专业共建的课程给大家参考。慧科教育集团的专业课程重在培养学生的理论知识和动手实践能力，学生在完成每个学期的理论学习后，至少有两个企业项目实战跟进，让学生在项目中应用各类大数据技术，训练大数据思路和实践步骤，做到理论与实践的充分结合。 大数据专业的课程体系包括专业基础课、专业核心课、大数据架构设计、企业综合实训等四个部分。
1、下面哪种不是数据库的分类？ A、层次式数据库 B、开放式数据库 C、网络式数据库 D、关系式数据库 2、下面哪种不属于硬盘？（） A、SSD盘 B、HDD盘 C、混合硬盘 D、光盘 3、（）用于存放计算机运行期间的大量程序和数据。 A、高速缓冲存储器 B、主存储器 C、外存储器 D、CPU寄存器 4、推动大数据分析平台的发展不包括以下哪项技术？（） A、云存储技术 B、数据管理技术 C、数据抓取技术 D、数据可视化技术 5、不属于光盘的优点是（）。 A、单位存储容量成本低，携带方便，数据查询时间短
B、容量大，保存时间长 C、数据读取、写入数据快，操作方便 D、可重复删除写入数据 6、不属于基于大数据的威胁发现技术的优点是哪项？（） A、分析容的围更大 B、对已知威胁的检测 C、分析容的时间跨度更长 D、攻击威胁的预测性 7、（）是指数据的组织形式或数据之间的联系。 A、数据库结构 B、数据结构 C、存储结构 D、数据对象结构 1 【单选】（）用于存放计算机运行期间的大量程序和数据 ? A. 高速缓冲存储器 ? B. 主存储器 ? C. 外存储器 ? D. CPU寄存器 ? A
? B ? C ? D ?正确答案： B 2 【单选】下列哪条不属于隐私保护防护策略( ) ? A. 确保身份安全 ? B. 安全检查 ? C. 密钥管理的不良状况 ? D. 安全步骤 ? A ? B ? C ? D ?正确答案： B 3 【单选】（）是指数据的组织形式或数据之间的联系。 ? A. 数据库结构 ? B. 数据结构 ? C. 存储结构 ? D. 数据对象结构 ? A ? B ? C
大数据在金融行业的发展应用 一、金融行业大数据发展概述 数据显示，中国大数据IT应用投资规模以五大行业最高，其中以互联网行 业占比最高，占大数据IT应用投资规模的28.9%，其次是电信领域（19.9%），第三为金融领域（17.5%），政府和医疗分别为第四和第五。金融行业位居第三，主要是由于大数据在金融行业的应用起步相对稍晚，其应用深度和广度还有很大的扩展空间。 根据国际知名咨询公司麦肯锡的报告显示：在大数据应用综合价值潜力方面，信息技术、金融保险、政府及批发贸易四大行业潜力最高高。具体到行业内每家公司的数据量来看，信息、金融保险、计算机及电子设备、公用事业四类的数据量最大。
不同行业应用大数据技术潜在价值评估 数据来源：麦肯锡《大数据的下一个前沿：创新、竞争和生产力》报告可以看出，无论是投资规模和应用潜力，信息行业（互联网和电信）和金融行业都是大数据应用的重点行业。 金融行业的大数据应用有很多的障碍需要克服，比如银行企业内各业务的数据孤岛效应严重、大数据人才相对缺乏以及缺乏银行之外的外部数据的整合等问题。可喜的是，金融行业尤其是以银行的中高层对大数据渴望和重视度非常高，相信在未来的两三年内，在互联网和移动互联网的驱动下，金融行业的大数据应用将迎来突破性的发展。
二、金融行业大数据应用 当前，数据是重要资产的观念已经在金融行业成为共识，随着金融业务的载体与社交媒体、电子商务的融合越来越紧密，仅对原有15%的结构化数据进行分析已经不能满足发展的需求，急需借助大数据战略打破数据边界，囊括85%的大数据分析，来构建更为全面的企业运营全景视图。大数据能够解决金融领域海量数据的存储、查询优化及声音、影像等非结构化数据的处理。金融系统可以通过大数据分析平台，导入客户社交网络、电子商务、终端媒体产生的数据，从而构建客户视图。依托大数据平台可以进行客户行为跟踪、分析，进而获取用户的消费习惯、风险收益偏好等。针对用户这些特性，银行等金融部门能够实施风险及营销管理。总结可以看出，金融机构大数据应用主要在四个领域：风险管理、渠道优化、客户管理及运营优化。
1. 【多选题】大数据技术领域的发展得到国家的高度重视，近年来不断推出了些促进这些领域创新和产业发展的指导意见、发展规划和行动纲要，主要有哪些？【ABCDE】 A: 2015年8月31日：《促进大数据发展行动纲要》B: 2015年12月29日：《“互联网＋”行动的指导意见》 《新一代人工智能发展规划》 D: C: 2017年7月8日： 2017年4月10日：《云计算发展三年行动计划（2017－2019年）》 E: 2015年5月8日：《中国制造2025》2. 【判断题】人工采集效率低、成本高、错误多。自动化采集靠技术实现，效率高、采集的数据量大。【对】3. 【多选题】大数据分析平台软件由（）（）（）（）（）大关键技术实现。【ABCDE】 A: 云存储 B: 云计算 C: 算法库D: 工作流引擎 E: 开放接口 4. 【多选题】数据资源向信息、知识、价值转换的流程可以概括成5个环节：（）（）（）（）（）正确答案:[A,B,C,D] A: 数据采集 B: 数据存储 C: 数据处理 D: 数据分析与挖掘 E: 知识应用 5. 【多选题】计算机系统的发展经历了这样几个阶段：（）（）（）（）（）正确答案:[A,B,C,D] A: 大型机 B: 小型机 C: 个人计算机 D: 互联网 E: 云计算
6. 【判断题】数据是所表达的对象或事件的信息的载体， 记录了对象的属性特征。正确答案:[对] 7. 【多选题】数据采集可以划分为（）和（）。【AB】 A: 人工采集 B: 自动化采集 8. 【判断题】数据自动化采集技术的发展产生了大数据。 对 9. 【多选题】云服务应用的部署模型有：（）（）（）（）。【ABCD】 A: 公有云Public cloud B: 私有云 Private cloud C: 社区云Community cloud D: 混合云 Hybrid cloud 10. 【多选题】教育大数据指的是学生在学习过程中产生 的大数据，教育大数据应用主要体现在三个主要方面（）（） （）【ABC】 A: 学生学习分析 B: 学生的分类管理 C: 教学效果分析
附件： 2017年大数据技术与及用人才培养方案 一、培养目标 本专业培养适应生产、建设、服务和管理第一线需要的，德、智、体、美等方面全面发展的，具有大数据行业对应岗位必备的科学文化知识及相关专业知识，以大数据系统运维与管理、数据处理、数据分析、应用系统开发能力为目标，系统掌握大数据技术与应用专业基本理论、大数据分析挖掘与处理、移动开发与架构、软件开发、云计算技术等前沿技术，旨在培养适应新形势下新兴的“互联网+”专业，具有良好职业道德和敬业精神的高素质技能型专门人才。 二、学制及招生对象 （一）学制：三年 （二）招生对象：高中毕业生和中职毕业生 三、人才培养规格 （一）职业面向、预期工作岗位名称 1.主要岗位 本专业大数据基础类岗位：大数据文档编写、大数据采集清洗与转换； 大数据技术类岗位：大数据系统搭建与运维、海量数据库管理、大数据软件开发、大数据可视化、大数据分析； 2.相关岗位 大数据销售服务类岗位：大数据营销、大数据呼叫、大数据售后服务。 3.进阶岗位 大数据技术公司管理岗位和高级技术岗位 （二）起薪标准 4500元/月 （三）人才质量标准 1.知识要求 毕业生应具有大数据技术与应用专业必要的基础理论知识，掌握从事本专业领域实际工作的基本能力和基本技能；具备适应生产、管理、服务一线岗位需要的工作能力，具备良好的职业道德与素养。
①掌握本专业培养目标所要求的基础理论知识、专业知识和技能； ②具备一定的英语知识，能够借助工具书阅读理解本专业所使用的常用计算机英语， 包括技术性文档和资料； ③掌握计算机方面的专业基础知识，能适应信息化建设； ④掌握Linux平台下大数据平台搭建，数据库系统搭建、优化、管理等方面的专业技 能； ⑤掌握大数据技术与应用专业基本的专业技能，能满足大数据岗位的基本素质。 2.能力要求 通过三年的学习，学生应具备从事本专业领域相关工作的能力。 ①熟练操作办公自动化软件； ②具备计算机组装、计算机软硬件故障的判断与定位以及故障排除的能力。 ③具备办公自动化设备维护的能力；具备数据库系统管理维护的能力； ④具备非结构化数据处理能力； ⑤具备数据仓库管理基本能力； ⑥具备OOP程序设计能力； ⑦具备Web应用开发能力； ⑧具备Linux Server、Hadoop项目管理维护的能力； ⑨具备数据挖掘、数据清洗、数据可视化的处理能力。 3.素质要求 ①政治思想素质： 热爱祖国，拥护党的基本路线。遵纪守法，善于独立思考，勇于创新的精神。具备良好的职业道德与素养。 ②文化素质： 具有一定的文化素质修养，诚实守信、礼貌待人、为人谦逊的文明习惯；具有自尊自强、爱岗敬业、勤奋好学、追求进步的品格；具备良好的人际交往与勾通和工作协调能力。 ③业务素质： 掌握大数据技术与应用专业的基础理论知识；掌握计算机组装与维护、办公自动化软件操作、办公自动化设备维护、计算机网络系统维护及管理、关系型/非关系型数据库系统维护及管理、Windows/Linux服务器系统配置管理等方面、各类大数据平台搭建管理维护的专业技能的能力。
第三章：大数据金融行业应用 第1 题 强大的客户信息数据仓库及数据库是良好实施数据分析的基础。（3分） A. 是 B. 否 答题情况：正确选项：A 你答对了! 第2 题 2011年5月美国对冲基金Derwent Capical Markets通过分析Twitter的数据来感知市场营销，在首月的收益率为1.85%，让平均为0.76%的其他对冲基金相形见绌。（3分） A. 是 B. 否 答题情况：正确选项：A 你答对了! 第3 题 摩根大通银行可以利用大数据技术追踪盗取客户账号或侵入自动柜员机（ATM）系统的罪犯。（3分） A. 是 B. 否 答题情况：正确选项：A 你答对了! 第4 题 没有好的数据基础，可能建模过程就会中途夭折，但是建模成功的话，就能得到如意的结果。（3分） A. 是 B. 否 答题情况：正确选项：B 你错选为：A 第5 题 中国大数据IT应用投资规模中，金融领域占的比例最。（3分） A. 是 B. 否 答题情况：正确选项：B 你错选为：A
2012年海通证券自主开发的“给予数挖掘算法的证券客户行为特征分析技术”主要应用在客户深度画像以及基于画像的用户流失概率预测。（3分） A. 是 B. 否 答题情况：正确选项：A 你答对了! 第7 题 客户画像指的是个人客户画像，包括人口统计写特征、消费能力数据、兴趣数据、分险偏好等。（3分） A. 是 B. 否 答题情况：正确选项：B 你错选为：A 第8 题 客户生命周期管理包括新客户获取、客户防流失和客户赢回等。（3分） A. 是 B. 否 答题情况：正确选项：A 你答对了! 第9 题 数据分析在处理客户关系管理上只是流失客户的预测。（3分） A. 是 B. 否 答题情况：正确选项：B 你答对了! 第10 题 大数据是依托新的数据处理技术，对海量、高速增长、多样性的结构和非数据结构数据进行加工挖掘，找寻数据背后的规律，以提高分析决策能力，优化流程和科学配置资源的管理工具。（3分） A. 是 B. 否 答题情况：正确选项：A 你答对了!
大数据技术与应用专业 建设方案 北京四合天地科技有限公司 2018年6月
目录 1项目背景 (4) 1.1行业背景 (4) 1.2政策导向 (5) 2人才培养方案 (6) 2.1行业人才需求 (6) 2.2大数据岗位设置 (9) 2.2.1Hadoop运维工程师 (9) 2.2.2大数据开发工程师 (9) 2.2.3数据采集工程师 (10) 2.2.4系统开发工程师 (11) 2.3大数据人才基本技能要求 (11) 2.4人才培养目标 (12) 2.5人才培养策略 (12) 3教学现状分析 (13) 3.1教学科研难以保证 (13) 3.2实训环境缺失 (13) 3.3实训内容不足 (13) 4课程体系建设 (14) 4.1培养目标 (14) 4.2课程设置 (14) 5实训室建设 ............................................................................................... 错误!未定义书签。 5.1设计理念..................................................................................................... 错误!未定义书签。 5.1.1以就业为导向...................................................................................... 错误!未定义书签。 5.1.2以能力为本.......................................................................................... 错误!未定义书签。
2017年继续教育公需课《大数据前沿技术及应用》答案（八章全） 【每年很多单位都需要完成公需课的继续教育学习任务共18个学时，以下答案全部是本人完成学习任务时，把每一章最后部分的“在线考试”的题目完成后，把题目和答案复制下来整理而成。可能每个人看到的题目顺序不相同，但是每一章都是这些题目，只要打开本文档，按Ctrl+F组合键，即可打开搜索对话框，把你看到的题目复制一部分到“查找容”框中再点“查找”，即可搜索到对应的答案。】 第一章：大数据行业生态答案 1、大数据的数据类型包括网络日志、音频、视频、图片、地理位置信息等等。（5分） A.是 B.否 正确选项：A 2、大数据的起始计量单位至少是MB。（5分） A.是 B.否 正确选项：B 3、大数据最早由麦肯锡在编写《大数据时代》中提出，指不用随机分析法（抽样调查）的捷径，而是采用所有数据进行分析处理。（5分） A.是 B.否 正确选项：B 4、生产成本只有材料费和人工费。其中材料费的控制主要是防止不必要的浪费；人工费的控制只要是提供工人的生产效率。（5分） A.是 B.否 正确选项：B 5、“大数据”是需要新处理模式才能具有强大的决策力、洞察发现力和流程优化能力来适应海量、高增长率和多样化的信息资产。（5分） A.是 B.否 正确选项：A 6智能电表通过电网收集每隔五分钟或十分钟收集一次数据，收集来的这些数据可用来预测客户的用电情况等，从而推断出未来几个月时间里，整个电网的用电量。（5分） A.是 B.否 正确选项：A 7、早在2004年，Facebook联合创始人，克里斯？休斯就建议扎克伯格在上推出相关服务，帮助总统候选
【编者按】本文作者傅志华先生（公众号：傅志华）曾为腾讯社交网络事业群数据中心总监以及腾讯公司数据协会会长。在腾讯前，曾就职于艾瑞市场咨询、易观国际、中国互联网协会，并任DCCI互联网数据中心副总裁。 数据显示，中国大数据IT应用投资规模以五大行业最高，其中以互联网行业占比最高，占大数据IT应用投资规模的28.9%，其次是电信领域（19.9%），第三为金融领域（17.5%），政府和医疗分别为第四和第五。 根据国际知名咨询公司麦肯锡的报告显示：在大数据应用综合价值潜力方面，信息技术、金融保险、政府及批发贸易四大行业潜力最高高。具体到行业内每家公司的数据量来看，信息、金融保险、计算机及电子设备、公用事业四类的数据量最大。 不同行业应用大数据技术潜在价值评估
数据来源：麦肯锡《大数据的下一个前沿：创新、竞争和生产力》报告 可以看出，无论是投资规模和应用潜力，信息行业（互联网和电信）和金融行业都是大数据应用的重点行业。由于上一篇《BAT互联网企业大数据应用》（关注微信公众号：傅志华，即可通过历史文章查阅）已经重点介绍了互联网行业的大数据应用情况，本文将讲点介绍行金融行业大数据应用情况，下一篇文章将重点介绍电信行业的大数据应用情况。 金融行业大数据应用投资分布
从投资结构上来看，银行将会成为金融类企业中的重要部分，证券和保险分列第二和第三位。接下来，我们将分别介绍银行、保险和证券行业的大数据应用情况。 Part1 银行大数据应用 国内不少银行已经开始尝试通过大数据来驱动业务运营，如中信银行信用卡中心使用大数据技术实现了实时营销，光大银行建立了社交网络信息数据库，招商银行则利用大数据发展小微贷款。总的来看银行大数据应用可以分为四大方面：
大数据技术与应用专业 人才需求分析和预测性调研报告 一、调研情况分析 (一)政府发展规划与政策动态 推动大数据产业持续健康发展，是党中央、国务院作出的重大战略部署，是实施国家大数据战略、实现我国从数据大国向数据强国转变的重要举措。日前，工业和信息化部正式印发了《大数据产业发展规划（2016－2020年）》（以下简称《规划》），全面部署“十三五”时期大数据产业发展工作，加快建设数据强国，为实现制造强国和网络强国提供强大的产业支撑。 2018年，贵州提出“万企融合”大行动，计划用五年时间，带动10000家企业通过应用大数据技术，提升企业数字化、网络化、智能化水平，实现发展新增长、服务升级。有预测称，这次行动将在贵州形成超过1200亿美元的市场。 (二)市场需求和行业发展趋势 1）大数据市场需求 大数据经过前几年的概念热炒之后，逐步走过了探索阶段、市场启动阶段，当前已经在接受度、技术、应用等各个方面趋于成熟，开始步入产业的快速发展阶段。大数据巨大的应用价值带动了大数据行业的迅速发展，行业规模增长迅速。截至 2014 年，全球大数据市场规模已经成长到300 亿美元的空间，预测到2017 年全球大数据技术和服务市场的2018 年的复合年增长率将达到26.4%，规模达到415 亿美元，是整个IT 市场增幅的6 倍。大数据市场规模在2020 年有望达到611.6 亿美元，符合年增长率将达到26%。 中国大数据产业起步晚，发展速度快。物联网、移动互联网的迅速发展，使数据产生速度加快、规模加大，迫切需要运用大数据手段进行分析处理，提炼其中的有效信息。“大数据”已成为一个热门词语高频出现在各种场合，其专门人才已不能满足市场需求。经过专门调研数据显示，大数据人才岗位缺口2018年高达150万，俱预测2025年中国大数据人才缺口达到200万，这给高校和人力资源企业的一个很大的优惠。未来几年人才需求将持续走俏。引进和培养1000
2017年公需科目《大数据前沿技术及应用》参考答案 （适用于华医网） 大数据概述及基本概念（一） C以下哪个数据单位最大（） C大数据技术的战略意义是（） C信息技术是指有关信息的收集、 B\美国哈佛大学的研究小组给出了著名的资源三角形,不包括（） D\哪种不属于互联网上出现的海量信息（） 大数据概述及基本概念（二） B（）主要承担了搭建大数据平台上层建筑的任务。 B（）主要利用分布式数据库，或者分布式计算集群来对存储于其内的海量数据进行普通的分析和分类汇总等。 B大数据技术的出现实现了巨大的社会价值,下列哪项不属于产生的社会价值（） C大数据平台的三个重要的技术部分不包括（） D下列哪项不属于商业大数据的类型（） 大数据概述及基本概念（三） D以下那个观点是错误的()
D企业大数据分析不包括（） D维度上的分析需求，主要需要三方面的数据分析技术，不包括（）A（）指的是数据本身所承载的信息内容 大数据体系结构（一） D\物理资源实体的提供层包括（） D\SaaS模式的优点有（） D\云计算的优势包含下面哪几个方面（） B\提供资源的网络被称为（） A\（）是通过使计算分布在大量的分布式计算机上， 大数据体系结构（二） D分布式数据库的特点不包括（） B下面哪点不是HDFS优点（） C大数据的分析挖掘是（），需要巨大的计算能力 D计算任务容错的关键问题不包括（） D下面哪点不是HDFS缺点（） 大数据体系结构（三） C大数据处理框架-Spark的优点不包括（） C\Spark的核心组件有几个部分（） B\大数据处理框架-Spark最大的集群来自（）
DHadoop的缺点不包括（） A\大数据处理框架-Spark诞生于（） 大数据分析与数据挖掘（一） B（）就是从大量的、不完全的、有噪声的、模糊的、随机的实际应用数据中，提取隐含在其中的、人们事先不知 数据分析主要作用不包括（） 功能设备创建或生成的数据被称为（） A用户评论文本数据以及客服系统的语音数据和评价文本数据，可以统称为（） A数据挖掘需要的人员不包括（） 大数据分析与数据挖掘（二） D用户属性分析不从下列哪方面进行分析（） C大数据的真正意义是（） C商业智能技术提供使企业迅速分析数据的技术和方法，不包括() D参与度分析的指标包括（） B\商业智能的概念在()年最早由加特纳集团（Gartner Group）提出大数据分析与数据挖掘（三）
当前作业测试题已完成（最后得分：100 分）！ 完成时间：2017-10-21 17:04:04 提交次数：2次 《大数据前沿技术应用与发展》在线测试题 1、在大数据时代，我们需要设立一个不一样的隐私保护模式，这个模式应该更着重于（A）为其行为承担责任(单选题) A.数据使用者 B.数据提供者 C.个人许可 D.数据分析者 2、关于大数据在国家治理中作用，以下理解不正确的是（A）(单选题) A.大数据的应用能够杜绝抗生素的滥用 B.大数据的运用能够提升应急管理的快速反应 C.大数据的运用能够维护社会治安 D.大数据的运用有利于实现以人为本的社会管理
3、大数据是指不用随机分析这样的捷径，而采用（A ）的方法(单选题) A.所有数据 B.绝大部分数据 C.适量数据 D.少量数据 4、第一个将大数据上升为国家战略的国家是（B）(单选题) A.中国 B.美国 C.英国 D.法国 5、大数据的核心是（B ）(单选题) A.告知与许可 B.预测 C.匿名化 D.规模化
6、下面哪一项不属于大数据系统的必备要素（D）(单选题) A.云平台 B.物联网 C.数据 D.数据库 7、下面哪项关联不属于购物篮分析（D ）(单选题) A.啤酒和尿布 B.湿巾和烧烤 C.咖啡和咖啡伴侣 D.飓风和蛋挞 8、信息时代的三大定律不包括（C ）(单选题) A.摩尔定律 B.吉尔德定律 C.达律多定律 D.麦特卡尔夫定律 9、最早提出大数据时代概念的公司是（D）(单选题)
A.微软公司 B.谷歌公司 C.脸谱公司 D.麦肯锡公司 10、下面陈述不正确的是（C ）(单选题) A.大数据将实现科学决策 B.大数据使政府决策更加精准化 C.大数据彻底将群体性事件化解在萌芽状态 D.大数据将实现预测式决策 11、GBCP和谐三角指的是哪三个角色（ACD ）(多选题) A.政府 B.社会组织 C.企业 D.公众 12、下面例子属于大数据技术公司的是（ABCD ）(多选题)
大数据在金融行业四大创新性应用随着网络和信息技术的不断普及，人类产生的数据量正在呈指数级增长，而云计算的诞生，更是直接把我们送进了大数据时代。“大数据”作为时下最时髦的词汇，开始向各行业渗透辐射，颠覆着很多特别是传统行业的管理和运营思维。在这一大背景下，大数据也触动着金融行业管理者的神经，搅动着金融行业管理者的思维；大数据在金融行业释放出的巨大价值吸引着诸多金融行业人士的兴趣和关注。探讨和学习如何借助大数据为金融行业经营管理服务也是当今该行业管理者面临的挑战。 大数据应用，其真正的核心在于挖掘数据中蕴藏的情报价值，而不是简单的数据计算。那么，对于金融行业来说，管理者应该如何来借助大数据为金融行业的运营管理服务呢？同时大数据应用又将如何突出其在金融行业的情报价值呢？对此，xx大数据情报信息中心从以下四个方面整理总结了大数据在金融行业的创新性应用。 一、大数据有助于精确金融行业市场定位 成功的品牌离不开精准的市场定位，可以这样说，一个成功的市场定位，能够使一个企业的品牌加倍快速成长，而基于大数据的市场数据分析和调研是企业进行品牌定位的第一步。金融行业企业要想在无硝烟的市场中分得一杯羹，需要架构大数据战略，拓宽金融行业调研数据的广度和深度，从大数据中了解金融行业市场构成、细分市场
特征、消费者需求和竞争者状况等众多因素，在科学系统的信息数据收集、管理、分析的基础上，提出更好的解决问题的方案和建议，保证企业品牌市场定位独具个性化，提高企业品牌市场定位的行业接受度。 企业想进入或开拓某一区域金融行业市场，首先要进行项目评估和可行性分析，只有通过项目评估和可行性分析才能最终决定是否适合进入或者开拓这块市场。如果适合，那么这个区域人口是多少？消费水平怎么样？客户的消费习惯是什么？市场对产品的认知度怎么样？当前的市场供需情况怎么样？公众的消费喜好是什么等等，这些问题背后包含的海量信息构成了金融行业市场调研的大数据，对这些大数据的分析就是我们的市场定位过程。 企业开拓新市场，需要动用巨大的人力、物力和精力，如果市场定位不精准或者出现偏差，其给投资商和企业自身带来后期损失是巨大甚至有时是毁灭性的，由此看出市场定位对金融行业市场开拓的重要性。只有定位准确乃至精确，企业才能构建出满足市场需求地产品，使自己在竞争中立于不败之地。但是，要想做到这一点，就必须有足够量的信息数据来供金融行业研究人员分析和判断。在传统情况下，分析数据的收集主要来自于统计年鉴、行业管理部门数据、相关行业报告、行业专家意见及属地市场调查等，这些数据多存在样本量不足，时间滞后和准确度低等缺陷，研究人员能够获得的信息量非常有限，使准确的市场定位存在着数据瓶颈。随着大数据时代的来临，借助数
附件25： 高职电子信息大类大数据技术与应用赛项 技能竞赛规程、评分标准及选手须知 一、竞赛容 赛项名称：大数据技术与应用 赛项容：以大数据技术与应用为核心容，重点考察参赛选手在Hadoop平台环境下，对于大规模并行数据处理以及存计算技术的应用能力。具体包括： 1. 掌握Hadoop平台环境部署与基本配置，了解基于大数据计算平台的常见应用； 2．综合利用numpy、pandas、matplotlib、scikit 模块和MapReduce技术、分布式存储系统HDFS、分布式计算框架MapReduce/Yarn、数据仓库Hive、Python 等开发语言工具和技术，匹配和连接数据源，实现大数据的采集，提取、清洗、转换、分析、挖掘操作，产生分析结果，并且实现可视化呈现。 3．依据项目应用需求和分析结果，完成数据分析报告的编写。 二、竞赛方式 本赛项为团体赛，每支参赛队由3名参赛选手组成。 三、竞赛时量 竞赛时间4小时，竞赛连续进行。 四、名次确定办法 名次确定办法原则上按照竞赛总成绩从高分到低分排序确立选手名次。总成绩相同时，完成时间较短者名次列前；成绩和完成时间均相同时，操作过程较规者名次列前。 五、评分标准与评分细则 1．评分标准 本赛项总分为100分，采取分项计分制（表1）。
2．评分细则 竞赛成绩评定实行“裁判长合权负责制”，负责组织评分裁判进行成绩评定。评分裁判负责对参赛队伍（选手）的比赛作品、比赛表现按赛项评分标准进行评定。成绩评定根据竞赛考核目标、容对参赛队或选手在竞赛过程中的表现和最终成果做出评价。 本赛项的评分方法为现场评分和结果评分，现场评分为5分，由现场裁判根据参赛队的操作规以及综合表现情况进行评分；结果评分为95分，依据赛项评价标准，对参赛选手提交的竞赛成果进行评分。