Linux最新ICT技术发展趋势,AI、大数据和云计算的概述及存储应用技术【2】 ...

宁睿  金牌会员 | 2024-6-9 08:24:32 | 来自手机 | 显示全部楼层 | 阅读模式
打印 上一主题 下一主题

主题 567|帖子 567|积分 1709

末了的话

最近许多小伙伴找我要Linux学习资料,于是我翻箱倒柜,整理了一些优质资源,涵盖视频、电子书、PPT等共享给大家!
资料预览

给大家整理的视频资料:

给大家整理的电子书资料:

如果本文对你有帮助,欢迎点赞、收藏、转发给朋友,让我有持续创作的动力!
网上学习资料一大堆,但如果学到的知识不成体系,遇到标题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。
需要这份系统化的资料的朋友,可以点击这里获取!
一个人可以走的很快,但一群人才气走的更远!岂论你是正从事IT行业的老鸟或是对IT行业感爱好的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、口试辅导),让我们一起学习成长!


  • ICT团体结构已定,只待个别大模块成熟和完备对接;围绕IOT,5G,NFV/SDN,云数据中心,大数据模块内新技术日新月异快速发展。
  • 云DC面临3大挑战:接入流量剧增,数据处理剧增,应用服务剧增。
  • 物联网(英语:Internet of Things,缩写IoT)是互联网、传统电信网等信息承载体,让所有能行使独建功能的平凡物体实现互联互通的网络。
  • SDN:Software Defined Network,即软件界说网络。
  • NFV,Network Function Virtualization,即网络功能捏造化。
  • Cloud RAN(也被称为C-RAN和Centralized-RAN)是用于未来移动网络基础结构的一种新型蜂窝网络架构。



  • 基础办法融合:通过云操作系统将数据中心内多厂家异构的计算、存储、网络设备资源进行统一整合与自动化调理管理
  • 代价驱动力:更低的TCO,更高效的业务摆设 ,更敏捷的客户需求相应能力。



  • 建设:
  • 原有网络对接和演进
  • 安全隔离和安全防护
  • 构建差异化资源池,满足差异业务需求
  • 管理:
  • 原有资源池的纳管
  • 捏造化、物理资源的统一管理
  • 制定资源池管理规范,资源利用规范化
  • 业务迁移:
  • 老旧物理机业务和数据平滑迁移
  • 老旧捏造机业务和数据平滑迁移
云计算概述




  • 云计算(cloud computing)是基于互联网的相关服务的增加、利用和交付模式,通常涉及通过互联网来提供动态易扩展且经常是捏造化的资源。云是网络、互联网的一种比喻说法。已往在图中往往用云来表现电信网,后来也用来表现互联网和底层基础办法的抽象。狭义云计算指IT基础办法的交付和利用模式,指通过网络以按需、易扩展的方式获得所需资源;广义云计算指服务的交付和利用模式,指通过网络以按需、易扩展的方式获得所需服务。这种服务可以是IT和软件、互联网相关,也但是其他服务。它意味着计算能力也可作为一种商品通过互联网进行流通。
  • 云计算的资源是动态易扩展而且捏造化的,通过互联网提供。终端用户不需要相识“云”中基础办法的细节,不必具有相应的专业知识,也无需直接进行控制,只关注自己真正需要什么样的资源以及怎样通过网络来得到相应的服务。
  • 云计算的关键特征:
  • 按需自助服务(On-demand Self-service):消费者可以按需摆设处理能力,如服务器和网络存储,而不需要与每个服务供应商进行人工交互。
  • 无处不在的网络接入(Ubiquitous network access):通过互联网获取各种能力,并可以通过尺度方式访问,以通过各种客户端接入利用(例如移动电话,笔记本电脑,PDA等)。
  • 与位置无关的资源池(Location independent resource pooling):供应商的计算资源被集中,以便通过多用户租用模式给客户提供服务,同时差异的物理和捏造资源可根据客户需求动态分配。客户一样寻常无法控制或知道资源的确切位置。这些资源包括存储、处理器、内存、网络带宽和捏造机等。
  • 快速弹性(Rapid Elastic):可以敏捷、弹性地提供能力,能快速扩展,也可以快速释放实现快速缩小。对客户来说,可以租用的资源看起来似乎是无限的,并且可在任何时间购买任何数目的资源。
  • 按利用付费(Pay per user):能力的收费是基于计量的一次一付,或基于广告的收费模式,以促进资源的优化利用。比如计量存储,带宽和计算资源的消耗,按月根据用户现实利用收费。在一个构造内的云可以在部门之间计算费用。
  • 云计算摆设模式:私有云计算、公有云计算、混合云计算
  • 私有云计算:一样寻常由一个构造来利用,同时由这个构造来运营。华为数据中心属于这种模式,华为自己是运营者,也是它的利用者,也就是说利用者和运营者是一体,这就是私有云。
  • 公有云计算:就如共用的交换机一样,电信运营商去运营这个交换机,但是它的用户大概是平凡的大众,这就是公有云。
  • 混合云计算:它强调基础办法是由二种或更多的云来组成的,但对外出现的是一个完备的实体。企业正常运营时,把紧张数据保存在自己的私有云内里(比如:财务数据),把不紧张的信息放到公有云里,两种云组合形成一个团体,就是混合云。比如说电子商务网站,平时业务量比较稳固,自己购买服务器搭建私有云运营,但到了圣诞节促销的时间,业务量非常大,就从运营商的公有云租用服务器,来分担节日的高负荷;但是可以统一的调理这些资源,这样就构成了一个混合云。



  • “On-Demand”商业模式,即按需服务模式。用户所需要的应用软件和数据都位于云中,用户利用客户端按照自己的需求访问所要的应用。云服务提供商同样按照客户的需求提供相应的服务,和收到相应费用。
  • 从商业视角来看,云服务可以分别为以下几种类型:
  • IaaS:基础架构即服务(Infrastructure as a Service)。IaaS提供ICT基础架构资源并确保其正常运行。
  • PaaS:平台即服务(Platform as a Service)。PaaS为软件开发者提供了开发平台。在传统的开发情况中,开发者在编写应用程序的时间,同时需要关注所接纳的操作系统和硬件设备。而利用PaaS,开发者可以专注于编写最好的应用程序,基础平台的维护由PaaS供应商负责。
  • SaaS:软件即服务(Software as a Service)。这是云计算最早出现的服务模式。用户只需要利用浅易的设备去毗连SaaS供应商提供的操作系统和应用程序。所有繁杂的系统维护工作,例如软件和授权的升级,均由SaaS供应商来负责。




  • 通过对多项核心技术进行归类汇总,可归结为三个方面:团体的计算架构、承载的硬件设备和软件系统。
  • 团体的计算架构,需要涵盖高性能、高可靠和可扩展。
  • 云计算硬件包括:高可靠和高性能的计算服务器提供计算资源;低本钱、数据安全的存储设备提供数据存储空间;支持大二层网络的高密度交换机进行数据的通信和交流。
  • 云计算软件包括:用于大数据的并行分析计算技术;整合存储资源提供动态可伸缩资源池的分布式存储技术;用于数据管理的分布式文件管理;计算、存储等资源池化的捏造化技术;简化运维职员工作,方便高效智能运维的系统管理技术。



  • 云计算的关键特征:
  • 按需自助服务(On-demand Self-service)
  • 无处不在的网络接入(Ubiquitous network access)
  • 与位置无关的资源池(Location independent resource pooling)
  • 快速弹性(Rapid Elastic)
  • 按利用付费(Pay per use)



  • “云平台”的根本原理是一个分布式计算系统,通过使计算分布在大量的计算机上,提供On-Demand的超级运算能力和存储能力;终端也是云的一部门。
  • “云平台”的核心部门依然是数据中心(心脏),但技术上和传统的数据中心有本质的差异,从强调单机的性能和集群向“分布式、智能化、超大容量”等方向发展。
  • “云” 只是一个形象的说法,既是对网状分布计算机的比喻,也指数据的计算过程被隐匿起来。



  • 捏造化的界说:对物理实体资源进行抽象与隔离的管理技术,以达到最大程度利用资源的目的。
  • 云计算的摆设类型:
  • 私有云:企业拥有独立的云基础办法
  • 公有云:云服务运营商拥有云服务办法,为公众或企业提供云服务
  • 混合云:由私有云和公有云组成,通过专用技术互联,实现数据和应用共享



  • 存储融合:
  • 开放:支持多厂家捏造化和物理机数据库摆设
  • 高性能:支持4096个节点,性能线性提升,支持千万级IOPS,支持高性能数据库和大容量云资源池
  • 高可靠:多副本,支持7个9可靠性,机柜级可靠性
  • DHT(Distributed Hash Table):即分布式哈希表,它通常是为了拥有极大节点数目的系统,而且在系统的节点经常会加入或退出节点而设计的。



  • OceanStor DJ是华为公司推出的面向云数据中心发展的业务驱动存储控制软件,统一管理数据中心存储资源,提供业务驱动、自动化的存储服务,提升云化情况中存储资源的利用率和存储服务的供给服从。
  • OceanStor DJ核心是基于OpenStack相关服务的加强,实现存储资源统一管理,按需分配和数据掩护服务。OceanStor DJ将应用与底层存储解耦,打破传统设备和应用厂商的垄断职位。在云化场景下,将存储和数据掩护等能力以XaaS的方式提供,顺应存储代价链向软件和服务转移。
  • 从控制面和数据面来看,OceanStor DJ的代价如下:
  • OceanStor DJ在控制面上将存储的功能特性从物理阵列中抽象出来,把具备相同或近似能力的多个物理存储池在逻辑上组成资源池。用户在请求存储资源的时间,基于资源池的SLA(Service Level Agreement)能力而无需关心后端由哪台阵列为其应用提供存储服务。
  • 从数据面上来看,OceanStor DJ具备集成所有类型的数据服务的能力,以及支持应用程序访问块存储、文件存储的能力。同时由于它始终具有并继续利用底层存储阵列独特的功能,OceanStor DJ的存储服务保存了存储阵列的增值特性,例如远程复制等,不会增加用户的购置本钱。

NFV,即网络功能捏造化,Network Function Virtualization。通过利用x86等通用性硬件以及捏造化技术,来承载许多功能的软件处理。从而降低网络昂贵的设备本钱。可以通过软硬件解耦及功能抽象,使网络设备功能不再依赖于专用硬件,资源可以充分机动共享,实现新业务的快速开发和摆设,并基于现实业务需求进行自动摆设、弹性伸缩、故障隔离和自愈等。
AI、大数据存储应用技术
===========================================================================



  • 大数据趋势:跨越裂谷,走向成熟,进入落地与实施阶段。
  • 50%的企业已经投资和利用大数据,33%的企业正在规划怎样利用大数据,我们看到大数据领域的持续投资,大数据即将步入成熟发展阶段。
  • 云计算和大数据已不再是“新兴”技术,而是成为了“主流”技术了。



  • 全球创建和共享的数字信息5年增加9倍,2013年达到3.8ZB。
  • CERN: LHC对撞产生1PB/s的数据。
  • SKA:2015年存储需要1EB。
  • 云化的IDC建设催生了数据的大集中。
  • Facebook:天天产生50TB的日志数据,衍生分析数据高出100TB。
  • “呆板制造”和“人工制造”共同贡献了海量数据,集中式的数据中心建设加快数据
集中
大数据概述




  • 维基百科:巨量资料(big data),或称大数据,指的是所涉及的资料量规模巨大到无法通过目前主流软件工具,在公道时间内达到撷取、管理、处理并整理成为帮助企业筹谋决议更积极目的的资讯。
  • Gartner:“大数据”是需要新处理模式才气具有更强的决议力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

最全的Linux教程,Linux从入门到醒目
======================

  • linux从入门到醒目(第2版)
  • Linux系统移植
  • Linux驱动开发入门与实战
  • LINUX 系统移植 第2版
  • Linux开源网络全栈详解 从DPDK到OpenFlow

第一份《Linux从入门到醒目》466页
====================
内容简介
====
本书是获得了许多读者好评的Linux经典畅销书**《Linux从入门到醒目》的第2版**。本书第1版出书后曾经多次印刷,并被51CTO读书频道评为“最受读者喜好的原创IT技术图书奖”。本书第﹖版以最新的Ubuntu 12.04为版本,循序渐进地向读者介绍了Linux 的基础应用、系统管理、网络应用、娱乐和办公、程序开发、服务器设置、系统安全等。本书附带1张光盘,内容为本书配套多媒体讲授视频。另外,本书还为读者提供了大量的Linux学习资料和Ubuntu安装镜像文件,供读者免费下载。

本书得当广大Linux初中级用户、开源软件爱好者和大专院校的学生阅读,同时也非常得当准备从事Linux平台开发的各类职员。
   需要《Linux入门到醒目》、《linux系统移植》、《Linux驱动开发入门实战》、《Linux开源网络全栈》电子书籍及教程的工程师朋友们劳烦您转发+评论
  网上学习资料一大堆,但如果学到的知识不成体系,遇到标题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。
需要这份系统化的资料的朋友,可以点击这里获取!
一个人可以走的很快,但一群人才气走的更远!岂论你是正从事IT行业的老鸟或是对IT行业感爱好的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、口试辅导),让我们一起学习成长!
户、开源软件爱好者和大专院校的学生阅读,同时也非常得当准备从事Linux平台开发的各类职员。**
   需要《Linux入门到醒目》、《linux系统移植》、《Linux驱动开发入门实战》、《Linux开源网络全栈》电子书籍及教程的工程师朋友们劳烦您转发+评论
  网上学习资料一大堆,但如果学到的知识不成体系,遇到标题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。
需要这份系统化的资料的朋友,可以点击这里获取!
一个人可以走的很快,但一群人才气走的更远!岂论你是正从事IT行业的老鸟或是对IT行业感爱好的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、口试辅导),让我们一起学习成长!

免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x
回复

使用道具 举报

0 个回复

正序浏览

快速回复

您需要登录后才可以回帖 登录 or 立即注册

本版积分规则

宁睿

金牌会员
这个人很懒什么都没写!

标签云

快速回复 返回顶部 返回列表