人工智能技术应用导论第7章人工智能与大数据.docx

《人工智能技术应用导论第7章人工智能与大数据.docx》由会员分享，可在线阅读，更多相关《人工智能技术应用导论第7章人工智能与大数据.docx（22页珍藏版）》请在优知文库上搜索。

1、闸免推齐Jt法S不同.推希方法包怙如下几类:“于内容的依第与制电过捡*KIaIMA.三MjF内B的疲苟关注的品!本身的“征.特征亲找到厢像的桂R：的冏过斌指KN保用户与IM句冷”系.与物国自，普征及太关寿.购物推荐系统应用一个完整的推律系统通常包含3个维成懵块I 用户建模收快 推谷对象建懵模块99U 推H鼻法极快推弄系统的送行娱内对刖户迸行建模.根搪用户行为收密和MtI依据来分析用户第兴燃料需求,同时时程蒋对象迸行建模.垩于用户特征加品杼征,采用搐稗狭计肾御和用户可能感爽建的对数Q播富推程靖景对推冷结果进行一定程序的过&和谓整将指希恰黑腰示给用户.推尊系统可再细分成翕找计net分融实川计一电分

2、，高战计It群分对于败据,算法复杂度,阿间颊划均较少，可得出山高It修度能搐种结果.实时计M第分取要求髭快速响应懵落读求,健容忍相对收低篦抬蒋漱碘度.通过将实时推神结祟与岛纹推神结果相结合,报程系统版为用户糖供高质的推#站I1.购物推荐系统应用常齐累统第四师模式：过迁看过,过还买过、买过还过、买过还买过.常用的It1.I为法：pjii4M.小于用户的协同汉城算法的同过速算法基于物品的怫目过滤H法,基于用户的协同过滤算法:找即“俘”兴趣爱好相关庾更高的用户乩然后将该用户K欢的,但是你并不如我酒过的物品/内容燧并给mW二力购物推荐系统应用基于用户的协同过注算法MrbX法的实现主要总括两个少：线剜却

3、目标用户兴相似的用户1合.找到该集合中的用户所贰第、且目标用户*骑过过的将品椎荐修目标用户.【实例】例设再用户a.EC和捌品A.B.C.D,K中用户a.C整欢物品AW拗品C.因就认为这两个用户IM但用户，于J1.将IRPcIKnttftD（指睛D笈羯户a还未按般过的）N9ttnPa.。购物推荐系统应用，基于物品的协同过滤算法:概掘用户当前消费能对象.来号找用户可能喜次的其他物品.WM后的相关慢国高，“燧希后穗次第可艇在就越大. JCI1.用户购买了一款回而伦的CO(-t三三).商家为用户抵葬一张周寿伦的Co(我很忙用户是不是更的买 mi1.用户购买了柯南道尔的福尔所投案全集.窗凉为用户推tn山

4、刚昌的名像覆阿命)，用户是不是更容易的买.购物推荐系统应用三o基于物品的协同过滤算法ItHJ1.法与3CF算法类似.计电分为网步：计算穗品之间立冏以度.唐亮物品的相归度Ia用户的历史行为.给用户生成榷再列我.【实例】帆设有用户0b.C和物品缸B、C20应用.具我强大第横向扩展健力.数据种类繁多大依据的收据来源众多，科学研究、企业应用和cb应用等都在源豢不新地产生数据，大数富的数据类显丰富，包括统构化和非结构化敏据，ta梅化Htth占io%左右.主要Hi存储在关系依靠座中的依掘尊缘内化败:占前、左右，和类多.包括却件.ft*.依.他馍、e博.位信息,依按信息,手机呼叫慎息、M络日志等.许M在拳关

5、琴型歌操本(HotOn1.ySQ1.NOSQo中.大数据的特征大敷播的价值：1）对大消捞者提供产品或服务的企业可以利用大数据进行精准营俏；2）锹小而美模式的中小微企业可以利用大数据做凰务转型；3）面IS互联网压力之下必须转型的传故企业隽要与时俱进充分利用大数抠的价值.大数据的关键技术A大数据技术俘大数据的果集.懵处我、存储.分析和应用的相关技术,是一系列使用非作筑的工从来对大量的结构化.半姑归化和和姑构化Iiigi三行处理从而快用分析和懵测结果的系列数据处序和分析技术.其技本（柒如图所示I大数据关键技术,大数据技术的不同层面及其功能技术居面功能跤第果与用处螳利用ET1.工具将分布的.异构玄朦算

6、中的帙掘.知关系依窜,平曲K裾文件罪.植股到临计中同层后透行Ji洗,外换.管成，I1.后加蚊刎敏零金库或心擀集市中成为网机分析处庠.被比册鹿的4班也可以利用日本来修工具：如一5、n答）箔实时采集的K娼作为流计J1.原故的入.塔行实时爱理分析败筹存懂和管现利用分布式文件系统、数榭仓霹、关系收零库、Nq1.依零用、云依M座等.实现对结内化,率结构化蚪非结构化海敏里的存储和管理依嘉於理与分析利用分布式并行修构懵型相计-枢量,结合机制学习Io玄树花蛆算法.女现对海取据第处理和分析对分析结熏塔行可观化M双，用助人们更好岫理窜依梃、分析据依更安全构建私保护在从大依呢中挖崎I1.在的巨大商业夕值和学术价值篦

7、向阳，构建戏礼我免保沪停昂和依描安至体系.有效保护个人建M和致据安全大数据关键技术A大数据计算模式大6套计靛模式解决阿Ii功批处理讳H的对大城幡航榭的批处理U*pRMuc.Spark1.f流计圻对演太靠的实时计HStrofiS4,F1.une.Stre*vsPtna%DStr2、SuperVario、钳薄承效IM勉理平台骅图计算针对大炽模图除构K据的处理Prg1.tGraphXtGiraphPowerGraph.Hg,GoIdenOrbW青阂分析计H大规模效过的存信管理M杳询分析Drotie1.Hive.Cseandra.IrQaIa等大数据与云计算、物联网,云计算云计J1.实现了通过网络提供

8、可伸缩的、廉价的分布式计算能力,用户只需要在具备网络接入条件的地方,就可以随时随地获得所需的各种IT资源rwTM*“口大数据与云计算、物联网,云计算岛*rtR存用为MtiMWR.Zft4”风|或从三中”程114匕依mT.AFftttM*.3St%由H-)9WR.Ht1.KGOApp*.MCfOM41-S1.hf8vBMfTr(o11r.GoogAppEn9.Forc*AmwonEC2.BWZCkHrt8nGrW0大数据与云计算、物联网物联网物以网是物物相连的互联网,是互联网的延伸，它利用局部网络或互联网等通信技术把传SS.15W.机累、人员和物等通过新的方式联在一起,形成人与物.物与物相联.实

9、现信息化和运程管理控3B28WAVv&r布，1.VUWBteM*atf*r*0大数据与云计算、物联网物联网各个层次的结构层次功Ie后果把物取网系统比为人体.那么后工层就好比人体能标标,用家麽如管理的#,采集来臼族理&内的各好他,电.这个舄国含了大的传SU代期Z1.田虎传星X、应力竹型Zhm速度代第、B国拓后力除ARE、气体浓度传ten、士*始分传IRiI、二蟆日标芥、射瑕识别(RadioFreQUenCyIdentification.RFID)标笺和读EMkIi像头、邱设备等10当于人体的!鳏中他.E到信息传修的作用.网恪层包含各椅大堂的网堵后网恪.如互以回、杵动通信网络、工孑通恺网络普龄.良

10、相当于人体的大M1.起创存W1.O处理*作用包精收售存留、.理M分殁理房研平台直接面启用户，淌足各种应用需求，知智熙交通.的M衣业,智M医疗.应用层IISIi1.kWI大数据与云计算、物联网A物联网产业偌完整的物联网产业徒主要包括搐心感应备件提供SS知层末靖设备悝供陶、网络提供商，欣件与行业解次方案展供曲，系统集成商，运营及服务提供自等六大环节0大数据与云计算、物联网大数据、云计算和物联网三者之间的关系与区别I大数据与云计算物联网A工业物联网与大数据、云计算、物联网的关系。案例简介及环境安装0步理一：设定原取目标步骤二：批下我J6文件O步骤三：javascript解析。步我四：将爬取数据存储成CSV文件案例简介及环境安装大数次分析*核C的就是数榭的采集.在政气量庞大的今天.W何高效地狡取所需要的效取.井利用s燃氏*女的情况,是技术人员不断翳力的方向.大效鼐分析的数第来有税多,包就公司或者机构的内解:东和外康东海.，案例简介及环境安装结果出知EB1.取2345天气修网280点历史天气总也值总（2345天气陵报官网，imp:内hmq1.234W）-3.三三=三i三iiiii三k!H三三*三三三F&M三rrw案例简介及环境安装环境要求1） QythoC3.6环境2）舲等访同网络3）导入所熏的麻，C