专业服务

1. 架构咨询服务

最近几年,数字化已悄然代替了信息化,不再是新兴词汇,数字化转型也成为了企业战略规划中不可缺少的组成,那么什么是数字化转型?数字化转型是利用数字化技术来推动企业组织转变业务模式、组织架构、企业文化等变革措施。数字化转型旨在利用各种新型技术,如移动、Web、社交、大数据、机器学习、人工职能、物联网、云计算、区块链等一系列技术为企业组织构想和交付新的、差异化的价值。因此数字化转型是技术与商业模式的深度融合,其最终结果是商业模式的变革。

完善的数字化转型要求基础架构做到“开放、融合、软件定义、场景化、智能”。因此,数字化不但要求业务的变革和应用系统的变革,对于支撑应用的基础架构也提出了变革的要求。基础架构的管理者或者架构师必须重新审视组织内的IT架构,从业务需求出发,优化或者重新规划设计与之配套的基础架构。重点需要考虑软件定义的数据中心、混合云、双活多活、数据中心布局、多中心网络、业务连续性、多中心安全、多中心运维、数字化运营等方面因素。

• 如何选择专业的架构咨询团队

如果您打算重新规划和设计基础架构,应该聘请专业的基础架构咨询团队通过独立的项目来完成,这样可以避免如下的一些问题:只关注部分需求,考虑不全面;非专业架构师给出的设计,只关注眼前,不考虑未来等问题。在一个基础架构规划项目中,企业有以下两方面的收益。

  • 可以帮助组织制定未来的IT架构,技术选择,实施路线,未来几年的投资预算等;
  • 在项目中需要对给IT运维和管理人员进行培训,使他们掌握新技术,同咨询顾问的密切沟通和技术研讨,增进对新项目的了解。
• LongDB的架构咨询能力

LongDB拥有专业的架构咨询团队,丰富的咨询经验,不同行业的成熟案例参考,可以给客户提供专业的基础架构咨询服务,内容包含:

  • 新数据中心基础架构规划
  • 网络、服务器、存储、虚拟化、备份规划
  • 数据迁移规划
  • 容灾规划、双活规划
  • 运维管理规划

2. 大数据平台性能调优服务

大数据平台是一个包含了运维管理、数据ETL、数据计算以及数据服务的综合业务平台。

针对存储密集型、计算密集型等典型应用场景,虽然很多大数据平台已进行了一些整体调优解决方案,但是由于大数据平台内部结构的复杂性,往往还不能发挥平台的全部性能,存在着巨大的调优空间。另一方面,在一些部署场景中,硬件环境往往先于软件确定,在已有硬件环境上如何提升性能,充分利用已有资源也是在工作中经常要碰到的问题。

LongDB技术团队在大数据平台性能优化方面有着丰富的经验,我们可以从硬件环境、系统资源、集群资源、数据存储和分布、应用代码等多方面进行指导调优。

• 硬件环境优化

硬件环境是性能的基础,大数据平台是由多种服务组成的体系,资源的使用是多样的,一个比较简单办法是预留出保证任务运行的最大化资源。存储容量可以根据数据量、备份机制,预留空间的信息大致算出;磁盘吞吐量和网络带宽具有刚需的特点,调优空间有限;而CPU和内存资源具有一定弹性,可以进一步调优。

具体可以从磁盘I/O优化、磁盘I/O与网络的平衡部署、选择合适的CPU、预留内存空间、预留带宽通道等方面进行优化处理。

• 系统资源优化

大数据平台不是万能的,它的主要业务范围聚焦于统计分析、数据挖掘、机器学习,而操作系统在设计时,需要考虑的是对各种业务的支持,没有针对具体业务加以区分。从这个角度上讲,操作系统中对大数据主流业务没有帮助的特性,可考虑适当关闭。

• 集群资源参数优化

集群资源参数需要依据各个服务自身的特点来进行,参数配置的结果,决定了是否可以将集群提供的性能资源充分动员起来。

具体可以从优化JVM、优化并行度、合理配置压缩算法,将负载在磁盘I/O与CPU间调整、从全流程考虑,预选规避可能出现的额外资源开销等方面进行优化处理。

• 数据分布和存储优化

数据在加载到大数据集群时,根据业务需求完成一定的预先处理可以极大的提升业务处理时的性能。

• 应用开发优化

应用开发是最具有灵活性的,考虑在不同层级,做好任务分解和并行,负载均衡,实现从上到下的顶层设计。

生产中经常面对的有:防止任务倾斜、根据系统资源控制应用程序具体的执行过程、优化序列化等。