当前位置: 首页 > 期刊 > 《医药产业资讯》 > 2018年第6期
编号:13240057
基于Hadoop的中医药大数据平台基础架构的设计与研究(3)
http://www.100md.com 2018年2月25日 《中国医药导报》 2018年第6期
     通过对这两类服务器在测试环境中进行的性能分析,在一般业务压力下,A型与B型服务器的平均可用内存和CPU空闲率均衡,均在50%以上。虽然以上服务器选型能最大化发挥其计算与存储能力。但是需要说明的是,随着业务系统的变化和工作负载的改变,中医药大数据基础平台的服务器硬件选型将需要不断调整和优化。而无论服务器配置如何变化,都需要结合完善的资源分配和管控手段来充分发挥基础硬件的作用。

    2.3.3 网络架构设计 中医药大数据基础平台的物理服务器网络架构分为3层:接入层、汇聚层和核心层。考虑物理服务器的网络冗余、带宽等问题,大数据服务器内部之间采用双链路万兆网络连接到接入层的交换机。接入层到汇聚层使用双路的40 Gb带宽的网络,这样可以确保大数据集群内部节点之间数据交换和数据移动的高带宽需求。汇聚层到核心层使用双路的10 Gb带宽的网络,这部分带宽主要用于业务系统和大数据集群环境之间的数据导入导出和管理需求。大数据集群环境和其他业务系统间通过核心层的交换机互相访问。见图4。中医药大数据基础平台因其各种应用系统规模,适合独立机房模块部署。大数据服务器间的网络架构见图5。

    在这种网络架构中,使用EOR列头接入模式。这种部署模式使得接入交换机的数量最小,接入交换机与汇聚交换机之间的线缆数量也最小。另外,服务器内部网络采用链路聚合模式,相比于一般的主备网卡模式能够增加1倍的带宽。

    2.3.4 软件环境 本文中设计的中医药大数据基础平台是基于Cloudera的CDH 5构建的 ......
上一页1 2 3

您现在查看是摘要页,全文长 5456 字符