如何在浪潮服务器上部署hadoop

据国外媒体消息，为应对海量数据浪潮，VMware启动Serengeti开放原始码计划，便于企业在VMware vSphere虚拟化平台上快速部署与管理Apache Hadoop集群，部署虚拟化技术与分布式计算混用的基础架构。
通过Serengeti计划，VMware开放一组工具组，可在Apache 20网页免费下载，让企业IT人员利用指令接口（Command Line Interface,CLI）在vSphere平台建立、设定、启用与管理Hadoop集群，包括Hadoop共通组件如Apache Pig与Apache Hive等。例如，IT人员可用这些工具组设定单台虚拟计算节配置多少内存、存储与网络资源。目前VMware已和Cloudera、Greenplum、Hortonworks、IBM及MapR等Hadoop厂商合作推广Serengeti计划。
此外，VMware还为Hadoop放出新的原始码，包括HDFS（Hadoop Distributed File System）和Hadoop MapReduce项目的扩展组件，可在虚拟化平台当中，将数据和计算任务分散到不同虚拟计算节点。并且VMware发布了Spring for Apache Hadoop分布式计算开发平台的更新版本，让企业开发人员整合HBase数据库、Cascading函数库及Hadoop安全功能，来开发采Hadoop技术的应用系统。

SR-IOV 缺点不支持动态分区迁移(LPM)

比SEV性能要好，不依赖VIOS,性能接近物理网卡

IO虚拟化两种方式：VSCSI和NPIV

只有NPIV方式支持连接带库

LPM：Live Partition Mobility 在线分区迁移

VM  Recovery Manager DR高级特性

灵活的灾备容量管理

给予权重的重启顺序

主备站点的vlan映射

非终端容灾测试

服务器虚拟化技术大致分三种：完全虚拟化、准虚拟化、 *** 作系统层虚拟化。

一、完全虚拟化

虚拟化方法使用名为hypervisor的一种软件，在虚拟服务器和底层硬件之间建立一个抽象层。而基于核心的虚拟机KVM是面向Linux系统的开源产品。

二、准虚拟化

减轻这种负担的一种方法就是，改动客户 *** 作系统，让它以为自己运行在虚拟环境下，能够与hypervisor协同工作。这种方法就叫准虚拟化para-virtualization。

三、 *** 作系统层虚拟化

实现虚拟化还有一个方法，那就是在 *** 作系统层面增添虚拟服务器功能。Solaris Container就是这方面的一个例子，Virtuozzo、OpenVZ是面向Linux的软件方案。

虚拟化技术简介：

虚拟化技术，用户可以动态启用虚拟服务器又叫虚拟机，每个服务器实际上可以让 *** 作系统以及在上面运行的任何应用程序误以为虚拟机就是实际硬件。

运行多个虚拟机还可以充分发挥物理服务器的计算潜能，迅速应对数据中心不断变化的需求。如今数据中心管理人员面临的虚拟化解决方案种类繁多，有些是专有方案，而有些是开源方案。

1、确认服务器配置：需要确认你的服务器是否支持虚拟化技术。同时需要确认服务器当前的BIOS设置是否允许虚拟化功能。
2、安装虚拟化软件：在确认服务器支持虚拟化技术后，需要安装一款虚拟化软件。
3、创建虚拟机：在虚拟化软件中创建一个或多个虚拟机，可以根据需要进行配置和设置。
4、分配硬件资源：在虚拟化软件中，将计算设备M2220PCIE与虚拟机进行绑定，可以通过PCIepass-through技术将计算设备M2220PCIE分配给一个虚拟机，以提供更加高效的性能。
5、系统安装与调试：在虚拟机中安装相应的 *** 作系统和应用程序，并进行相应的测试和调试，以确保虚拟机可以正常工作。

双核处理器--让服务器虚拟化更加简单！
(2006-09-30 14:40:00)
为了更好地利用系统硬件资源，在大型机和RISC系统中，虚拟化技术已经得到了广泛的应用，但这些应用更多地局限于高端产品与方案领域，而且成本不菲。现在，x86服务器已成为企业应用的主流，很多企业开始探索x86服务器的虚拟化技术，目的是让数据库更高效、更灵活、更易扩展，不断提高资源利用率，不断降低成本。
资源管理越来越复杂
21世纪正在实现信息时代的种种可能构想。在全球范围内，数据的位数和字节，信息和知识，都在以毫秒级的速度急剧增长。产品的升级换代，由过去的数年缩减到今天的几周，供应链已被编织成复杂的网络。纸张正在被比特代替，电子商务正在迅速从不可思议的梦想走向现实。在这个后工业时代，拥有一流数据管理策略的企业会赢得巨大先机，善用信息技术的公司会取得不凡效果。
成功不能一蹴而就。随着企业服务器无孔不入，硬件和软件系统的功能不断强大，现有信息系统不得不面对大量出现的新问题。今天，复杂的数据以几何级数增长，给企业留下了大量难以应对的数据处理任务。管理这些数据，不仅成本过高，而且难以达到理想的效果，难以实现更好的投资回报(ROI)。难以查询的、陈旧的、不准确的数据，老化的软硬件和不良的运行环境，都会导致服务器性能和效益的降低，带来客户、生意伙伴、员工的不满。
通过虚拟化技术，可以在数据中心内部更有效地利用计算机资源，灵活更新软件、数据和硬件 *** 作平台。在虚拟化技术的帮助下，一台服务器可以被分割成数台“虚拟”的机器，每台都能独立运行自己的
*** 作系统，从而避免了“一台服务器、一种应用”的孤岛模式。统计结果表明，在孤岛模式下，计算机资源的使用率只有不到25%。有了虚拟化技术，企业可以构建一个完全不同的基础环境，更有效地管理服务器。在同一服务器上运行不同 *** 作系统和软件的功能，可以让企业协调服务器的工作负担;如果一个虚拟系统有问题，另一台能立即替补，继续完成同一任务。
虚拟化并不是一个全新的理念，而是久经时间考验的计算模式，IT 专业人员用它来管理大型机和科技用途的计算环境。随着x86技术的快速发展，双核处理器的帮助下，虚拟化技术终于可以在PC和服务器环境中大显身手。
虚拟化技术势在必行
虚拟化服务器技术能够为不同规模、不同行业的客户提供显著的利益。有了可行的虚拟化方案，用户可以更高效地利用计算机资源，添加新的工作软件。一个如此良好运转的计算机系统，带来了用户所需要的帮助，帮助企业达到管理和盈利目标，进而实现资源的更有效整合。
今天，多种多样的硬件平台、 *** 作系统和程序环境，导致了纷杂的电脑系统和资源。单应用程序服务器的激增，以及相应的数据库系统，可能严重影响数据调用和网络运行。很多用户都需要面对同样的问题:某些设备被过度使用，与此同时，另一些设备却没有得到有效利用，由此产生的失调和一连串低效率，自然导致成本增加，反馈速度降低，以及更繁杂的硬件维修。
随着服务器数量、IT人员和任务难度的增加，网络管理已经成为一项开销浩大而又繁重的工作，虚拟化技术可以轻松恢复原有的平衡。有些实际个案已经证实，虚拟化应用能够让基本IT运营费用降低5%到15%。
良好的虚拟化策略，还能够减少IT人员管理设备的时间。这样一来，硬件维护人员、程序人员和其他专业人士，都可以有时间处理更多的战略性工作。根据一些用户的报告，他们的收益增长50%到70%。
尽管虚拟化技术有很多优点，但也对服务器自身提出了更高要求。虚拟化软件必须管理多重虚拟环境，同时仍然需要及时传输数据。在这样的环境下，一流的服务器架构必不可少，而双核服务器以更低的延迟，作为虚拟化技术技术的强大平台。
提升虚拟化应用的水平
虚拟化正在吸引越来越多的企业，这些企业正在寻求服务器应用和计算资源的最大化。虚拟化可以帮助IT经理清除障碍，通过整合运行同一任务指令的服务器，形成理想的基础构架，获得较高的服务器利用，减少管理和基础建设的投资，降低对老式服务器的依赖。在许多情况下，那些老化的机器，需要格外的照顾和支持。
虚拟化还可以帮助企业扩展自己的应用方式。以往没有虚拟化技术，企业难以完整保存原有的应用系统，因为相关的硬件和 *** 作系统的支持和维护费用太高。有了虚拟化，企业也就有了更多的选择权，他们可以根据需要，决定是否有必要把现有的应用程序，迁移到最新的硬件和 *** 作系统上。现在，企业只需要简单地为应用程序创建一个专用的虚拟机，和运行其他应用程序的虚拟机一样，都构建在最新的x86服务器基础上。这样一来，用户原有的投资就能够得到很好的保护。虚拟化的另一个优势是简化和加速软件和系统的配置，用户可以在虚拟机上运行最新版本的软件。
目前，x86服务器虚拟化策略主要有三种方法:首先是软件的虚拟化。虚拟化软件管理系统资源，并充当主服务器和客户 *** 作系统之间的“翻译器”。使用这种方法，无须改变主机 *** 作系统，但因为负荷增加，应用程序的运行效率会有明显降低。第二种方法是 *** 作系统虚拟化。使用这种方法，主机 *** 作系统和虚拟软件要么是同一个软件，要么实现紧密集成。第三种是基于处理器的虚拟化。在这种方案下，处理器直接支持虚拟化，机器服务于虚拟化软件利用的存储区，由此创建一个物理资源的分割区。采用处理器虚拟化方法，减少了上层软件，从而使服务器的性能全面提升，并获得更高的安全性。
双核技术为虚拟化技术提供强大基础
双核处理器为升级到64位、基于 *** 作系统的虚拟化技术提供了一个坚实的基础。例如，双核处理器能够提供高性能的运行，使主机和客户 *** 作系统都能更有效的工作。双核处理器降低了平台能耗，提供了相对低温的数据中心，可以更好地平衡现有动力资源，更有效地利用空间。X86双核处理器极大改善了32位性能，推动了64位的发展，突破4G内存障碍将成为可能。现在，在同一服务器中，用户无需改写编码，就可以运行32位和虚拟64位机，实现最佳的IT投资回报。
双核处理器技术将会提高I/O 容量，可以直接支持更多的 *** 作系统和更多的用户，为虚拟化应用提供了必要支持。在这个方面，我们看到，另一方面，双核处理器将会让企业以更健全的方式，掌控虚拟化带来的影响，迅速有效地重组电脑资源，集中资源在指定服务器上，从而对企业面临的变化做出敏捷反应。在双核处理器的优势和虚拟化技术的帮助下，企业可以更积极地打破传统策略的限制。
虚拟化技术适用于各类企业，特别是数据密集型行业，例如金融服务、医疗、航空和 零售业。目前，越来越多的企业，正在积极寻求虚拟化技术的帮助，构建具有灵活空间的计算平台。随着公司决策者日益关注x86结构可能带来的额外获益，他们更密切、更挑剔地对待服务器采购。有了IT资源的有效管理，企业才有可能确保收入、增加资产、改善客户和伙伴关系，已经来自资本市场的青睐。
根据相关资料显示，AMD多内核处理器设计可以充分发挥现有的单内核处理器所具有的先进性和简约性。通过将AMD64服务器处理器中的直连架构直接连接到内存、I/O和缓存，可以消除传统的瓶颈，大幅度减少内存延时问题。多内核处理器可以无缝地共享内存控制器(因为它们是现有的单和多内核处理器晶圆的内置组件)，从而能够利用这种架构显著地提升性能。AMD64技术还将在32位或64位环境中，为多内核处理器提供更高的速度和内存访问能力。
现在，人们的眼光已经越过CPU，开始研究I/O和基于芯片的虚拟化技术，他们正在发现提高产出、减少成本的各种途径。明天的解决方案存在于今天，无论提高系统性能、 电子商务、存储，还是提高数据使用效率，双核处理器正在迈入服务器性能革命的新时代，让水平构架虚拟化成为现实

浪潮2u服务器基本都自带虚拟化软件安装包，你可以打开机箱，里面有个u盘，拔掉就可以了。
或者进设置下启动顺序，浪潮服务器面向智慧时代所设计， 以"硬件重构+软件定义"技术理念， 为云计算、大数据和人工智能提供高度定制化的承载平台，适合云数据中心部署环境， 赋能各行业的数字化、智慧化转型与重塑。亿万克集服务器和存储等数据中心产品的研发、生产、销售、服务系统整合于一体，是民族高科技制造企业领导品牌。亿万克集服务器和存储等数据中心产品的研发、生产、销售、服务系统整合于一体，是民族高科技制造企业领导品牌。
亿万克数据设备科技有限公司(以下简称亿万克）是研祥高科技控股集团旗下的全资子公司。研祥集团作为中国企业500强，持续运营30年。研祥集团全球49个分支机构，三个国家级创新平台，一直致力于技术创新引领行业发展。亿万克集服务器和存储等数据中心产品的研发、生产、销售、服务系统整合于一体，是民族高科技制造企业领导品牌。感兴趣请点击此处，了解一下。

是的，做成虚拟化，按照用户的需求分配资源。可以去找找服务器虚拟化或者桌面虚拟化的方案参考一下。直接去服务器厂商，国内的正睿、浪潮。联想，国外的惠普、戴尔等，这种解决方案已经很成熟了，并且也是趋势。

---