大数据Spark性能优化指南基础

在大数据计算领域,Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。Spark的功能涵盖了大数据领域…

大数据与Hadoop有什么关系?

学习着数据科学与大数据技术专业(简称大数据)的我们,对于“大数据”这个词是再熟悉不过了,而每当我们越去了解大数…

大数据技术分享:使用Spark Streaming SQL进行PV/UV统计

使用Spark Streaming SQL,并结合Redis可以很方便进行PV/UV的统计。本文将介绍通过St…

大数据之软件开发模型

软件工程中,常用的开了模型有四种:瀑布模型、原型模型、增量模型和螺旋模型。 ⒈瀑布模型包括计划,需求分析、设计…

应届毕业生应该选择java开发还是大数据开发呢?

经常有人问,我想学习开发,到底是学Java好还是学大数据好?或者是,学习大数据还有必要学Java吗? 依我说,…

大数据Spark和Hadoop以及区别(干货)

1. Spark是什么? Spark,是一种通用的大数据计算框架,正如传统大数据技术Hadoop的MapRed…

大数据知识点—spark概念,核心架构,运行流程

概念 Spark 提供了一个全面、统一的框架用于管理各种有着不同性质(文本数据、图表数据等)的数据 集和数据源…

大数据系列:Spark 常用数据格式介绍CSV、JSON、Avro、Parquet

Spark 常用文件格式 介绍: Apache Spark支持许多不同的数据格式,例如无处不在的CSV格式和W…

从安卓主管转型大数据开发,我是这样学的

一、为什么要转岗? 我是 2014 年开始从事安卓开发。自己做事的原则是不设限,任何岗位都想要去尝试。所以中途…

为何学习大数据,要先学Java?

大数据的就业、工资的水平等等方面都让更多的人投身进入到学习大数据的旗下。 其实,我们也不难发现,在外面报班学习…

一文讲透大数据分析

【开胃菜】 十五年前,刚开始工作,从帝都回老家。 某长辈和蔼的问我:“工作了啊,做什么的?” 我踌躇半天答曰:…

新手大数据必问十个问题

无论在学习群、星球还是私底下,总有很多想学大数据的同学会问这几个问题。今天列举了这十个高频问题,虽然基础,但是…