《移动互联网产品策划与设计》课件.ppt

1、第一章第一章 移动互联网产品策划与设计概论移动互联网产品策划与设计概论第一章第一章 移动互联网产品策划与设计概论移动互联网产品策划与设计概论1.1移动互联网产品概念概念：移动互联网产品是基于移动互联网方式向用户提供的信息化应用系统。基本特征：n采用移动互联网作为信息传输通道n采用智能手机、PAD等作为业务呈现或数据采集终端n有时还要用到各种传感器，包括音视频、射频识别、温度、湿度等传感器。优势：随身性、可鉴权、可身份识别。目前，移动互联网应用已经从最初简单的文本浏览、图铃下载等简单业务形态，发展到与互联网业务深度融合的业务形态，并正在向两个方向迅速迈进：一个方向是与人们生活日益紧密的各种办公应

2、用、社交应用、娱乐应用，使人们的网络虚拟世界更加纷繁和随时随地；另一个方向是与物联网、传感系统、控制系统等更深入的结合，使得社会管理和生产更加现代化。第一章第一章 移动互联网产品策划与设计概论移动互联网产品策划与设计概论1.2移动互联网产品分类（1）移动WebWeb具有技术开放、标准相对统一、应用开发和使用门槛低等优点，HTML5实现了传统互联网网页和手机网页的融合，大大降低了手机网页开发的门槛，HTML5的很多新特性为通过手机网页实现游戏、计算等客户端丰富的功能提供了手段。（2）手机APP 手机APP通过调用手机操作系统的API 来实现各种功能，向第三方开发者开放终端、网络、云服务的各种能力

3、，运行在上层的程序可通过API获取下层平台拥有的各种能力与信息。（3）微信小程序微信小程序则是一种不需要下载安装即可使用的应用。用户不用关心是否安装太多应用的问题。对于开发者而言，小程序开发门槛相对较低，难度不及APP，能够满足简单的基础应用，适合生活服务类线下商铺以及非刚需低频应用的转换。（4）综合类产品 综合类产品除了采用B/S或者C/S技术外，还要用到视频采集、物理信号传感等其它各类信息化软硬件技术，移动互联网功能仅作为其中一个重要环节。第一章第一章 移动互联网产品策划与设计概论移动互联网产品策划与设计概论1.2移动互联网产品价值定位移动互联网产品能否成功的关键是如何向用户提供有价值的产

4、品和服务。1个人用户价值（1）生活需要（2）免费（3）虚荣心（4）惰性（5）好奇心（6）好胜心（7）安全需要（8）社交需要个人用户即公众用户，数量庞大，有共性也有个性。2行业用户价值（1）提高工作效率（2）解决实际困难（3）节省成本（4）创造新的收入增长点（5）打造亮点行业用户指各类政府机构和企事业单位，不同类型用户的价值诉求差异很大。第一章第一章 移动互联网产品策划与设计概论移动互联网产品策划与设计概论1.3移动互联产品策划与设计总体框架 互联网产品的策划与设计是一项非常复杂的工作，既有商业模式方面的策划与设计，也有产品本身功能的策划与设计，甚至还要延伸到产品上线后的运营。第一章第一章 移动

5、互联网产品策划与设计概论移动互联网产品策划与设计概论1.4产品经理1.4.1.产品经理在团队中的职责2.产品规划及设计 主要包括产品规划、需求管理、商业模式策划与设计以及编写产品需求文档。1.市场调研及用户研究 产品经理需要研究市场以了解用户需求、竞争状况及市场力量，发现并掌握目标市场和用户需求的变化趋势，对未来几年市场上需要的产品和服务做出预测。3.项目管理 产品经理要带领来自不同团队的人员在预算内按时开发并发布产品。4.产品运营 产品经理要负责组织客服、运营维护部门，建立相关的工作流程、分工、响应时间要求，解答或协调解决客户提出的产品问题，并与公司领导、相关部门协调资源、沟通产品发展规划、

6、现状及存在的问题，对产品运营过程中出现的故障、问题进行总结、分析并制定解决方案纳入产品改进计划中。第一章第一章 移动互联网产品策划与设计概论移动互联网产品策划与设计概论1.4.2.必备技能1.领导能力2.项目管理能力3.业务经验和能力4.技术能力第一章第一章 移动互联网产品策划与设计概论移动互联网产品策划与设计概论1.4.3.产品运营1.渠道管理 渠道管理对于移动互联网来说尤为重要，因为渠道资源也是有限且昂贵的，如何更加有效地利用渠道就成为渠道管理的重中之重。2.市场监控 监控产品行业的发展动态，分析竞争产品的相关数据，如：装机量与活跃用户数等，并提供相应的策略3.活动营销 策划相应产品线上或

7、线下的推广活动方案，以达到提升装机量、活跃用户数等相关数据的目的。4.产品分析 组织团队进行产品调研，并提供用户反馈，针对用户行为进行细致分析，提同合理的产品改进建议。需要说明的是，一切产品运营具体工作的基础都是数据，只有准确地跟踪数据，并进行有针对性的分析，才能进行其他运营工作。第二章第二章 移动互联网产品技术基础移动互联网产品技术基础第二章第二章 移动互联网产品技术基础移动互联网产品技术基础 移动互联网和传统互联网一样，基础都是TCP/IP协议。而要理解TCP/IP协议，就必须先理解OSI模型，因为TCP/IP协议是参考OSI模型设计的。OSI模型的全称是开放系统互连参考模型（Open S

8、ystem Interconnection Reference Model，OSI/RM），它由国际标准化组织（International Standard Organization，ISO）提出，用于网络系统互连，所以又称为ISO/OSI模型。OSI参考模型自发布后，并没有形成实际的产品，但是它成为包括TCP/IP协议在内的很多重要通信协议的思想基础，对于理解TCP/IP的运作机制必不可少。1.每一层都为其上一层提供服务，并为其上一层提供一个访问接口或界面。2.不同主机之间的相同层次称为对等层。如主机A中的表示层和主机B中的表示层互为对等层，主机A中的会话层和主机B中的会话层互为对等层。3.

9、对等层之间互相通信需要遵守一定的规则，如通信的内容、通信的方式等，称为协议。1.OSI模型OSI参考模型2.1 移动互联网技术2.1.1.互联网技术第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.TCP/IP模型 TCP/IP模型也是层次结构，分为四个层次：应用层、传输层、网络互连层和网络接口层。在TCP/IP模型中，去掉了OSI模型中的会话层和表示层，这两层的功能被合并到应用层实现，同时将OSI模型中的数据链路层和物理层合并为网络接口层。TCP/IP模型层次结构第二章第二章 移动互联网产品技术基础移动互联网产品技术基础TCP/IP模型下的各层协议 通过以太网包装的IP报文格式

10、第二章第二章 移动互联网产品技术基础移动互联网产品技术基础 IPv4与IPv6 按照TCP/IP协议，每个连接在互联网上的主机都应该有一个唯一的地址，这个地址就作为该主机的标志，叫IP地址。1.IPv6使用更小的路由表。IPv6的地址分配一开始就遵循聚类原则，这使得路由器能在路由表中用一条记录表示一片子网，大大减小了路由器中路由表的长度，提高了路由器转发数据包的速度。2.IPv6增加了增强的组播支持以及对流的控制，这使得网络上的多媒体应用有了长足发展的机会，为服务质量控制提供了良好的网络平台。3.IPv6加入了对自动配置的支持。这是对DHCP协议的改进和扩展，使得网络的管理更加方便和快捷。4.

11、IPv6具有更高的安全性。在使用IPv6网络中用户可以对网络层的数据进行加密并对IP报文进行校验，极大地增强了网络的安全性。IP地址：地址长度地址数量IPv432IPv61283221282第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.1.2移动互联网技术1.移动互联网概念 工信部电信研究院认为，移动互联网是以移动网络作为网络接入方式的互联网及服务，它包括三个要素：移动终端、移动网络和应用服务。中国电信认为，移动互联网是移动通信和互联网从终端技术到业务全面融合的产物。一般而言，电信行业所指的移动互联网主要是指狭义角度，包括通过2G/3G/4 G网络使用互联网服务。2.移动互联网

12、特点（1）终端移动性（2）终端智能感知能力（3）个性化（4）业务私密性第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.1.3 C/S与B/S模式1.首先，服务器进程启动起来以后，就一直在监听某一TCP端口，比如FTP默认为21端口，Web默认为80端口，接收这一端口的请求信息。2.如果某个客户，如客户甲，需要查询某个学生的个人信息时，它就向服务器发出请求（a），告知这个学生的编号及要查询信息的内容。3.服务器进程监听到这一请求后，启动一个线程，该线程从关联的数据库、文件等资源库中搜索到该学生的信息，经过相关处理后，把结果返回客户甲（b）。4.如果客户乙、客户丙也需要查询某个学生的

13、个人信息，那么服务器则分别启动另外两个线程，处理两个客户的请求。5.依次类推，如果有N个客户请求，服务器进程就启动N个线程处理客户的请求。由于计算机的CPU和内存等资源是有限的，因此，N的大小是受到限制的。一般把N叫做该服务器能够处理的最大并发用户数。1、C/S模型工作原理第二章第二章 移动互联网产品技术基础移动互联网产品技术基础3、B/S模式与C/S模式的优劣势比较（1）B/S模式比C/S模式维护和升级更简单（2）B/S模式比C/S模式成本更低（3）B/S模式服务器负载更重（4）B/S模式客户端不如C/S模式功能强大 B/S是一种特殊的C/S，人们也常把C/S结构和B/S结构并列起来，似乎B

14、/S结构和C/S结构分属两种不同的结构，这样当然是不准确的。但是由于人们经常这样称呼，因而这时，我们应该把C/S理解为除B/S结构外其余的C/S结构。2、B/S模式与C/S模式的关系第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.1.4 HTML51.HTML（Hypertext Markup Language，超文本标记语言）是用于描述网页文档的一种标记语言，它通过标记符号来标记要显示的网页中的各个元素。网页文件本身是一种文本文件，通过在文本文件中添加标记符，可以告诉浏览器如何显示其中的内容。2.HTML5是HTML的最新版本，HTML5不仅大幅提升Web 应用在交互、系统能力

15、调用、多媒体、语义化等方面的能力，用户无需安装纷繁的插件就可以获得更为丰富的Web 应用。3.HTTP是超文本文件传输协议，是属于TCP/IP协议族中的一个，是用来控制HTML在IP网络中传输的。第二章第二章 移动互联网产品技术基础移动互联网产品技术基础Android：Android是Google公司于2007年11月5日宣布的基于Linux平台的开源手机操作系统，由操作系统、中间件、用户界面和应用软件组成，同年制造出第一款Google手机HTC G1。到2010年，Android系统就发展成为最具潜力智能操作系统。Android系统架构为四层结构，从下到上分别是Linux内核层、系统运行库层

16、、应用程序框架层和应用程序层。iOS：iOS是由苹果公司为自有的iPhone、iPod touch及iPad开发的专用操作系统，具有封闭性的特点。iOS的系统架构从下到上也分为四个层次：核心操作系统层、核心服务层、媒体层和触摸层。Android与iOS的对比：1、Android开放，iOS封闭，Android拥有更多共享资源和支持者2、Android对应用的审核不如iOS严格，应用在运行性能方面保障不如iOS3、iOS应用上线需要审核，不如Android方便。4、目前，Android比iOS用户数量比例要大得多。2.1.5 手机操作系统第二章第二章 移动互联网产品技术基础移动互联网产品技术基础

17、2.2卫星定位与GIS技术2.2.1.卫星定位技术1.卫星定位 卫星定位系统由绕地球运行的多颗卫星组成，能连续发射一定频率的无线电信号。只要持有便携式信号接收设备，无论身处陆地、海上还是空中，都能接收到卫星发出的特定信号。这就是卫星定位的原理。接收设备通常选取4颗卫星发出的信号进行计算，就能确定接收设备持有者的位置。目前的智能手机基本上都配有卫星定位模块，该模块实际上就是卫星定位信号的接收设备。2.混合定位 混合定位采用两种或两种以上系统用于定位，比如混合使用GPS和移动通信站，或者混合使用GPS和WiFi，或者同时使用GPS和北斗卫星，等等。混合定位有利于克服某一种单独的定位系统定位不准的难

18、题，进一步提高定位精度。1.美国：GPS(Global Positioning System，全球定位系统)2.俄罗斯：GLONASS(Global Navigation Satelite System，全球卫星导航系统)3.中国：北斗卫星导航系统4.欧洲：伽利略定位系统当前国际上主要的四种卫星定位系统第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.2.2.北斗卫星导航系统 北斗卫星导航系统由空间段、地面段和用户段三部分组成。空间段由若干地球静止轨道卫星、倾斜地球同步轨道卫星和中圆地球轨道卫星三种轨道卫星组成混合导航星座。地面段包括主控站、时间同步/注入站和监测站等若干地面站。用

19、户段包括北斗兼容其他卫星导航系统的芯片、模块、天线等基础产品，以及终端产品、应用系统与应用服务等。北斗卫星导航系统建设遵循以下原则：1.开放性：北斗卫星导航系统的建设、发展和应用将对全世界开放，为全球用户提供高质量的免费服务，积极与世界各国开展广泛而深入的交流与合作，促进各卫星导航系统间的兼容与互操作，推动卫星导航技术与产业的发展。2.自主性：中国将自主建设和运行北斗卫星导航系统，北斗卫星导航系统可独立为全球用户提供服务。3.兼容性：在全球卫星导航系统国际委员会(ICG)和国际电联(ITU)框架下，使北斗卫星导航系统与世界各卫星导航系统实现兼容与互操作，使所有用户都能享受到卫星导航发展的成果。

20、4.渐进性：中国将积极稳妥地推进北斗卫星导航系统的建设与发展，不断完善服务质量，并实现各阶段的无缝衔接。1.北斗卫星导航系统介绍第二章第二章 移动互联网产品技术基础移动互联网产品技术基础（1）北斗卫星导航系统的劣势 跟GPS相比，北斗卫星导航系统因为发展较晚，因而应用普及性较低，当前支持北斗卫星导航系统的模块厂家相对较少，模块价格较高。不过，随着北斗卫星导航系统在国内和附近国家、友好国家的不断推广，这一劣势势必会越来越减小。其次，北斗卫星导航系统目前覆盖的范围还不如GPS，GPS已经是覆盖全球的系统，而北斗还处于发展之中，只能覆盖全球部分地区。（2）北斗卫星导航系统的优势 作为后起的北斗卫星导

21、航系统，也有着显著的后发优势，在很多功能和性能方面超过了GPS。安全：对国内而言，安全是北斗最大的优势。GPS是美国的，信号是可以加密或关闭的，因此在国防方面，使用北斗卫星导航系统有着天然的安全优势。即使在民用领域，对安全的考虑也是非常重要的。三频信号：北斗使用的是三频信号，GPS使用的是双频信号，是全球第一个提供三频信号服务的卫星导航系统，这是北斗的后发优势。虽然GPS从2010年5月28发射第一颗三频卫星，但等到GPS卫星全部老化报废更换为三频卫星还好几年，这几年就是北斗的优势期。三频信号可以更好的消除高阶电离层延迟影响，提高定位可靠性，增强数据预处理能力。而且如果一个频率信号出现问题，可

22、使用传统方法利用另外两个频率进行定位，提高了定位的可靠性和抗干扰能力。有源定位及无源定位：有源定位就是接收机自己需要发射信息与卫星通信，无源定位不需要。北斗二代使用的是无源定位，当能观测到的卫星质量很差时，且数量较少时(至少要4颗卫星)，仍然可以实现定位。短报文通信服务：短报文服务提供了传统通信方式难以覆盖的地区或者紧急情况下的一种通信能力。基于这个功能，北斗还有一个好处是，不但能知道自己的位置，而且还能让别人知道你自己的位置信息。当然，这个功能也是有容量限制的，所以并不适合作为日常通信功能，而是作为紧急情况通信比较合适。2.北斗卫星导航系统与GPS的对比第二章第二章 移动互联网产品技术基础移

23、动互联网产品技术基础1.提高管理资源的能力：GIS系统能够通过一些基于位置的数据(如地址等)将数据集关联在一起，帮助各个相关部门共享数据。通过建立共享数据库，一个部门可以从其他部门的工作中获利，数据只用被收集和整理一次，但可以被不同部门多次使用。2.为决策提供直观依据：GIS可以用地图的形式，把所有数据都简洁而清晰地显示出来，或者出现在相关的报告中，使得决策制定者不必在分析和理解数据上再浪费精力，而可以直接关注真实的结果，为决策提供更直观的依据。3.灵活地绘制地图：用GIS技术绘制地图比用传统的手工操作或自动制图工具更加灵活。GIS系统从数据库中提取数据创建地图，现有的纸质地图也同样可以数字化

24、并转化进GIS系统。基于GIS的绘图数据库可以是连续的，也可以以任意比例尺显示。也就是说可以生产以任意地段为中心，任意比例尺的地图产品，并且可以有效地选择各种符号高亮显示某些特征。只要拥有一定的数据，就可以用任意比例尺多次创建某地图。1 GIS原理与优势 GIS(Geographic Information System，地理信息系统)是在计算机软硬件系统支持下，对现实世界各类空间数据及描述这些空间数据特性的属性进行采集、储存、管理、运算、分析、显示和描述的技术系统。使用GIS技术会带来很多好处，比如：2.2.3 GIS技术第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.GIS使

25、用模式1.对“在什么地方”绘图2.对数量绘图 3.对密度绘图 4.查询某区域里面或者紧邻有什么5.对变化绘图 第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.3 云计算技术2.3.1.云计算定义及特征1.云计算概念起源 互联网 谷歌公司：从技术角度来看，云计算是一种以按需、可扩展方式获得所需要资源的架构；从商业角度来看，云计算是一种按需付费的商业方式。微软公司：未来的互联网世界将会是“云+端”的组合，其中“端”指各种终端设备。在这个以“云”为中心的世界里，用户可以便捷地使用各种终端设备访问云中的数据和应用。Sun公司：提出“网络就是计算机”这一理念，同时认为云计算就是下一代的网络

26、计算。工信部电信研究院：云计算具备四个方面的核心特征，一是宽带网络连接，“云”不在用户本地，用户要通过宽带网络接入“云”并使用服务，“云”内节点之间也通过内部的高速网络相连；二是对ICT 资源的共享，“云”内的ICT 资源并不为某一用户所专有；三是快速、按需、弹性的服务，用户可以按照实际需求迅速获取或释放资源，并可以根据需求对资源进行动态扩展；四是服务可测量，服务提供者按照用户对资源的使用量进行计费。2.代表性公司和机构对于云计算的理解或定义：在互联网界，人们常用一团云来表示一个网络，其含义是尽管实际的网络具有非常复杂的构成，但对于作为网络终端的PC机来说，并“看不见”构成实际网络的这些设备及

27、其复杂的相互连接方式。PC机能够透过这网络设备直接“看见”服务器，就好象PC机和服务器之间只有透明的空气。因此有时也用“透明”来表述这种意思，比如，说网络对于PC机和服务器来说是“透明”的。“透明”的本质，是通信协议的层次性和下层协议内部对上层协议的不可见性。云计算则是Google公司受到“云”这个网络界术语的深刻影响，在总结和概括自己的搜索服务基础上最早提出来的概念 第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.3.2 传统应用系统体系结构及其存在问题存在问题：烟囱式，专机专用，硬件高配低用，整合困难 传统应用系统体系结构是“烟囱式”的，或者叫做“专机专用”系统，如图所示，在

28、这种架构中，新应用系统上线的时候需要分析该应用系统对于资源的需求，确定基础架构所需的计算、存储、网络等设备规格和数量。第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.3.3 云计算服务类型及体系结构 IaaS（Infrastructure as a Service），即把基础设施作为服务。服务器、存储系统、交换机、路由器和其它系统均共用。1、IaaS 常见的云服务类型主要包括三类，即IaaS、PaaS、SaaS。此外，还有DaaS和IDC服务，也可以广义地归为云服务类型。第二章第二章 移动互联网产品技术基础移动互联网产品技术基础 PaaS（Platform-as-a-Servic

29、e），即把平台作为服务，是将一个完整的应用系统平台，包括应用设计、应用开发、应用测试和应用托管，都作为一种服务提供给客户。2、PaaS第二章第二章 移动互联网产品技术基础移动互联网产品技术基础 SaaS（Software-as-a-Service），即把软件作为服务。客户不需要将软件产品安装在自己的电脑或服务器上，而是按某种服务水平协议直接通过网络向专门的提供商获取自己所需要的、带有相应软件功能的服务。3、SaaS 第二章第二章 移动互联网产品技术基础移动互联网产品技术基础 DaaS（Data as a Service），即把数据（信息）作为服务，是指服务提供者承担数据采集、数据处理、数据分析

30、等工作，然后集约化地把处理后的数据（或信息）提供给用户，而DaaS用户则无需关心这些数据实际上来自于哪些系统、经过了哪些处理。DaaS和SaaS在体系结构上基本相同，只是在提供给用户的服务接口上，提供的是经过处理的数据，而不是集应用功能和数据于一体。4、DaaS5、IDC 电源、机架、通风等机房环境本身是比计算机与网络设施更底层的基础设施，不能归于云计算体系结构。但在具体形态上，这些机房设施也和计算机与网络系统一样，可以集约化地提供给用户，减少用户自行建设机房环境设施的成本。这一业务也早已开展了十多年，称为IDC（Internet Data Center,互联网数据中心），其理念和云计算是完全

31、一致的，因此也把IDC作为一类特殊的云服务。第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.3.4.云计算优势1.缩短运行时间和响应时间：应用程序可以很方便地临时使用大量服务器（比如1000台）的计算能力，把任何CPU密集型的任务外包给云计算所提供的虚拟机，有助于缩短响应时间，同时还能根据需求进行伸缩，从而满足客户需求。2.最大限度地减小基础设施投资风险 IT 机构可以利用云计算技术来降低购置物理服务器所固有的风险，可以通过向公用云发送超负荷工作来扩大其处理工作负荷尖峰情况的能力。3.降低入市成本 由于基础设施是租用而不是购买的，因而成本得以有效控制。同时，云提供商基础设施的巨大

32、规模，也有助于因集约化而最大限度地降低成本，进而有助于降低租用成本。降低进入新兴市场的成本有助于使竞争各方处于同一起跑线，使新创企业可以快速而低成本地部署新的产品。4.加快创新步伐：第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.4 大数据技术2.4.1.大数据的概念与意义1、大数据的概念百度百科：大数据（Big Data）是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要通过新的处理模式才能使其具有更强决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。在维克托迈尔-舍恩伯格及肯尼斯库克耶编写的大数据时代：大数据是指不用随机分析法（抽样

33、调查）这样捷径，而采用所有数据进行分析处理。IBM：大数据具有5V特点，即Volume（大量）、Velocity（高速）、Variety（多样）、Value（低价值密度）、Veracity（真实性）。麦肯锡全球研究所：一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合，具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。实际上，上述关于大数据的概念都或多或少有着互联网的烙印，有其合理性的一面，但过分强调了“大”和“高速”的一面，把很多现实生活中的应用场景排除在外，如数据量没那么大的场合，数据产生没有那样高速的场合，等等。第二章第二章 移动

34、互联网产品技术基础移动互联网产品技术基础2、大数据的意义马云：未来的时代将不是IT时代，而是DT的时代。大数据的价值并不在“大”，而在于“有用”，价值含量、挖掘成本比数量更为重要。对于很多行业而言，如何利用这些大规模数据是赢得竞争的关键。而当物联网发展到达一定规模时，借助条形码、二维码、RFID等能够唯一标识产品，传感器、可穿戴设备、智能感知、视频采集、增强现实等技术可实现实时的信息采集和分析，这些数据能够支撑智慧城市，智慧交通，智慧能源，智慧医疗，智慧环保的理念需要。未来的大数据除了将更好的解决社会问题，商业营销问题，科学技术问题，还有一个可预见的趋势是以人为本的大数据方针。“大数据”在经济

35、发展中的巨大意义，并不代表其能取代一切对于社会问题的理性思考，科学发展的逻辑不能被湮没在海量数据中。著名经济学家路德维希冯米塞斯曾提醒过：“就今日言，有很多人忙碌于资料之无益累积，以致对问题之说明与解决，丧失了其对特殊的经济意义的了解。”第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.4.2 大数据主要分类从数据结构角度分类从内容来源角度分类结构化数据：指已经结构化的数据，每条记录的每个字段都有着确定的意义。结构化数据通常就是数据库数据。半结构化非结构化数据互联网大数据政务大数据企业大数据个人大数据互联网的很多数据是以网页等方式存在的，具有分布广、格式多样、半结构化或者非结构化的

36、特点。百度的用户搜索需求数据、阿里巴巴的交易数据和信用数据、腾讯的用户关系数据和基于此产生的社交数据。企业在业务管理和运营当中产生和使用的各类巨量数据。与个人相关联的各种数据，。目前，个人信息分散在各个系统中，比如派出所有个人身份信息，淘宝有很多人的购物记录，教育机构有每个人的学习记录，等等。是政府部门在对整个社会活动进行管理过程中产生并使用的各类巨量数据，包括工业数据、农业数据、工商数据、纳税数据、环保数据、海关数据、土地数据、房地产数据等。第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.4.3 大数据应用总体框架 完整的大数据应用开发过程分为需求分析、数据采集、数据处理、数据

37、分析与挖掘、数据应用等前后贯通的五个环节。需求分析是所有系统开发的出发点，通过技术专家与行业专家及未来使用者的深入交流，全面掌握对于系统所需要实现的功能和性能。行业专家一般只能提出对于系统能实现功能的需求，具体采集什么数据以及如何采集，需要由技术专家和行业专家在交流基础上共同确定。行业专家主要负责确认所要采集数据对于系统是否合理，所要采用数据采集方式在用户场景是否可行；技术专家主要负责确认数据的采集方法和技术是否可行。第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.4.4 大数据存储与处理技术1.大数据存储技术路线第一种：采用MPP架构的新型数据库集群，重点面向行业大数据，采用S

38、hared Nothing架构，通过列存储、粗粒度索引等多项大数据处理技术，结合MPP架构高效的分布式计算模式，完成对分析类应用的支撑，运行环境多为低成本PC Server，具有高性能和高扩展性的特点，在企业分析类应用领域获得极其广泛的应用。第二种：是一种基于Hadoop的技术扩展和封装，围绕Hadoop衍生出相关的大数据技术，应对传统关系型数据库较难处理的数据和场景，如针对非结构化数据的存储和计算等，充分利用Hadoop开源的优势，目前最典型的应用场景就是通过扩展和封装Hadoop来实现对互联网大数据存储、分析的支撑。这种技术包含几十种NoSQL技术，适合于对于非结构、半结构化数据处理、复杂

39、的ETL流程、复杂的数据挖掘和计算模型。第三种：称为大数据一体机，是一种专为大数据的分析处理而设计的软、硬件结合的产品，由一组集成的服务器、存储设备、操作系统、数据库管理系统以及为数据查询、处理、分析用途而特别预先安装及优化的软件组成，高性能大数据一体机具有良好的稳定性和纵向扩展性。第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.Hadoop与Spark的区别与联系作用不同：Hadoop是一个分布式数据基础设施，它将巨大的数据集分派到一个由多台普通计算机组成的集群中的多个节点进行存储，并索引和跟踪这些数据，让大数据处理和分析效率达到前所未有的高度。Spark则是一个专门用来对那些

40、分布式存储的大数据进行处理的工具，它并不会进行分布式数据的存储。两者可合可分：Hadoop除了提供HDFS分布式数据存储功能之外，还提供了名为MapReduce的数据处理功能，完全可以抛开Spark。而Spark也不是非要依附在Hadoop身上才能生存，Spark可以选择Hadoop的HDFS，也可以选择其他基于云的数据系统平台，但Spark一般还是用在Hadoop上面。数据处理速度迥异：Spark因为其处理数据的方式不一样，比MapReduce要快得多。Hadoop和Spark是目前大数据处理领域主流的技术，都是大数据框架，但是各自存在的目的不尽相同，二者既有密切联系，又有着本质区别：第二章

41、第二章 移动互联网产品技术基础移动互联网产品技术基础2.4.5 传统数据分析与挖掘技术1、传统数据分析2、传统数据挖掘 建立在关系数据模型之上的，主体之间的关系已经在系统内被创立，而分析也在此基础上进行。同时，传统分析是定向的批处理，需要定期等待提取、转换和加载（ETL）以及转换工作的完成。传统的数据挖掘算法主要有聚类、分类和回归：（1）聚类：聚类又称群分析，是研究（样品或指标）分类问题的一种统计分析方法，针对数据的相似性和差异性将一组数据分为几个类别。属于同一类别的数据间的相似性很大，但不同类别之间数据的相似性很小跨类的数据关联性很低。（2）分类：分类类似于聚类，但是目的不同，分类可以使用聚

42、类预先生成的模型，也可以通过经验数据找出一组数据对象的共同特点，将数据分成不同的类，其目的是通过分类模型将数据项映射到某个给定的类别中，代表算法是CART（分类与回归树）。（3）回归：回归反映了数据的属性值得特征，通过函数表达数据映射的关系来发现属性值之间的一般依赖关系。它可以应用到对数据序列的预测和相关关系的研究中。（1）执行效率低，传统数据挖掘技术都是基于集中式的底层软件架构开发，难以并行化，因而在处理TB级以上数据的效率低。（2）数据分析精度难以随着数据量的提升而得到改进，特别是难以应对非结构化数据。3、传统数据分析与挖掘技术的局限性第二章第二章 移动互联网产品技术基础移动互联网产品技术

43、基础2.4.6 大数据分析技术3、Web数据挖掘分析 1、神经网络2、深度学习 典型的神经网络分为三类：第一类是用于分类预测和模式识别的前馈式神经网络模型，其主要代表为函数型网络、感知机；第二类是用于联想记忆和优化算法的反馈式神经网络，以Hopfield的离散型和连续型为代表。第三类是用于聚类的自组织映射方法，以ART模型为代表。深度学习源于人工神经网络的研究，其概念由Hinton等人于2006年提出，是机器学习中一种基于对数据进行表征学习的方法。目前，深度学习在语音识别、图像识别、自然语言处理等领域获得突破性进展。Web数据挖掘是一项综合性技术，可以从文档结构和使用集合中发现隐藏的从输入到输

44、出的映射过程。目前，较为常用的Web数据挖掘算法主要PageRank算法、HITS算法和LOGSOM算法。第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.5 物联网技术 物联网（Internet of things，Iot）是指物与物相连的网络。国际电信联盟（ITU）对物联网的定义：通过二维码识读设备、射频识别（RFID）装置、红外感应器、全球定位系统和激光扫描器等信息传感设备，按约定的协议，把任何物品与互联网相连接，进行信息交换和通信，以实现智能化识别、定位、跟踪、监控和管理的一种网络。2.5.1 物联网概念 物联网的概念有两层意思：其一，物联网的网络核心和基础仍然是互联网，是

45、在互联网基础上延伸和扩展的网络；其二，其用户端延伸和扩展到了任何物品与物品之间。物联网通过智能感知、识别技术与普适计算等技术，广泛应用于众多领域。物联网是互联网的扩展，与其说物联网是网络，不如说物联网是业务和应用，应用创新是物联网发展的核心，以用户体验为核心的创新是物联网发展的灵魂。第二章第二章 移动互联网产品技术基础移动互联网产品技术基础2.5.2 物联网体系结构 物联网的体系结构如图所示，自下而上分为感知层、网络层和应用层三个层次。也有人把物联网分为五个层级，即支撑层、感知层、传输层、平台层以及应用层。两种分层方式没有本质区别，只是后一种分得更细而已。第二章第二章 移动互联网产品技术基础移

46、动互联网产品技术基础2.5.3 物联网应用分类 物联网应用按照其用途，可以归结为三种基本模式 1、用于对象的身份识别、位置定位和管理 通过RFID、二维码等技术标识特定的对象，来实现对对象身份的识别。通过智能标签还可以用于获得对象物品所包含的扩展信息，如智能卡上的金额余额，二维码中所包含的网址和名称等。2、用于对现场环境进行监控 利用多种类型的传感器和分布广泛的传感器网络，实现对某个对象的实时状态的获取和特定对象行为的监控。如使用分布在市区的各个噪音探头监测噪声污染；通过二氧化碳传感器监控大气中二氧化碳的浓度；通过GPS标签跟踪车辆位置，通过交通路口的摄像头捕捉实时交通流量等。3、用于对象的智

47、能控制 物联网基于云计算平台和智能网络，可以依据传感器网络获取的数据进行决策，改变对象的行为，或进行控制和反馈。例如根据光线的强弱调整路灯的亮度，根据车辆的流量自动调整红绿灯的时间间隔等。第二章第二章 移动互联网产品技术基础移动互联网产品技术基础1传感器技术2.RFID技术 3嵌入式系统（1）物理传感器：物理传感器应用的是物理效应，诸如压电效应，磁致伸缩现象，离化、极化、热电、光电、磁电等效应。被测信号量的微小变化都将转换成电信号。（2）化学传感器：化学传感器包括那些以化学吸附、电化学反应 等现象为因果关系的传感器，被测信号量的微小变化也将转换成电信号。能够感受规定的被测量（信号）并按照一定的

48、规律转换成可用输出信号的器件或装置，通常由敏感元件和转换元件组成。射频识别（Radio Frequency Identification，RFID）别是一种非接触式的自动识别技术，它通过射频信号自动识别目标对象并获取相关数据。RFID系统由电子标签、读写器、读写器天线和计算机等组成。电子标签是RFID系统的信息载体，是一个微型的无线收发装置。读写器是RFID系统信息的控制和处理中心，分为“只读”和“读/写”两种。读写器天线是一种以电磁波形式把前端射频信号功率接收或辐射出去的设备。以应用为中心，以计算机技术为基础，软硬件可裁剪，适应应用系统对功能、可靠性、成本、体积、功耗等严格要求的专用计算机系

49、统。嵌入式系统的出现最初是基于单片机的。从80年代早期开始，嵌入式系统的程序员开始用商业级的“操作系统”编写嵌入式应用软件，这样可以获取更短的开发周期、更低的开发资金和更高的开发效率，“嵌入式系统”真正出现了。90年代以后，随着对实时性要求的提高，软件规模不断上升，实时核逐渐发展为实时多任务操作系统（RTOS），并作为一种软件平台逐步成为目前国际嵌入式系统的主流。感知层主要技术2.5.4 物联网关键技术 第二章第二章 移动互联网产品技术基础移动互联网产品技术基础（1）WiFi（3）Zigbee Zigbee是基于网络底层802.15.4的短距离数据通讯网络协议，主要用于距离短、功耗低且传输速率

50、不高的各种电子设备之间进行数据传输以及典型的有周期性数据、间歇性数据和低反应时间数据传输的应用。（4）NFCLoRa是美国Semtech公司采用和推广的一种基于扩频技术的超远距离无线传输方案，作为低功耗广域网（LPWAN）的一种长距离通信技术，近些年受到越来越多的关注。WiFi是一种短程无线传输技术，通常有效距离不超过一百米。随着IEEE 802.11a 及IEEE 802.11g等标准的相继出现，IEEE 802.11 这个标准族已被统称为WiFi。当WiFi工作在2.4GHz频段时，所支持的速度最高可达54Mbps。能够访问WiFi 网络的地方被称为热点，当一台支持WiFi 的设备遇到一个