成都定业通软件有限公司

成都大数据处理,大数据公司

价格:面议 2023-10-15 12:42:01 1401次浏览

成都定制通软件是专业从事计算机软件开发的高科技公司,为客户定制开发基于大数据的处理软件、分析系统、预测系统。

我司可实现基于大数据存储和管理,包括文件系统、数据库和类似YARN的资源管理系统;可实现计算处理层,如分布式并行处理架构hadoop、MapReduce和Spark,以及在此之上的各种不同计算范式,如批处理、流处理和图计算等,包括衍生出编程模型的计算模型,如BSP、GAS 等;可实现数据分析和可视化基于计算处理层。分析包括简单的查询分析、流分析以及更复杂的分析(如机器学习、图计算等)。查询分析多基于表结构和关系函数,流分析基于数据、事件流以及简单的统计分析,而复杂分析则基于更复杂的数据结构与方法,如图、矩阵、迭代计算和线性代数。

支持Hadoop 的核心组件HDFS、MapReduce、Hbase、Zookeeper、Oozie、Pig、Hive等核心组件构成。支持批处理的HDFS 和MapReduce 组件,以及Apache旗下的多个开源组件 Mesos、YARN、Mesos等,以及基于业务对实时的需求,支持在线处理的Storm,Storm被用于“连续计算”,对数据流做连续查询,在计算时就将结果以流的形式输出给用户。Spark提供强大的内存计算引擎,几乎涵盖了所有典型的大数据计算模式,包括迭代计算、批处理计算、内存计算、流式计算(Spark Streaming)、数据查询分析计算(Shark)以及图计算(GraphX)。

支持4种大数据的采集源:管理信息系统、Web信息系统、物理信息系统、科学实验系统。支持oldSQL、NoSQL 与NewSQL 数据库存储,支持存储结构化和非结构化混合的大数据,采用MPP 并行数据库集群与Hadoop 集群的混合来实现对百PB 量级、EB量级数据的存储和管理。支持大数据分析与可视化,对大数据的深度分析主要基于机器学习技术。可视化主要涉及数据流线化、任务并行化、管道并行化和数据并行化4 种基本技术。

联系人董先生 微信 dongkn

店铺已到期,升级请联系 13429825290
联系我们一键拨号18980782601