大数据存储-Doris部署

Doris简介 Doris 中文官方文档:doris官方文档 Doris概述 Apache Doris 是一个基于 MPP 架构的高性能、实时的分析型数据库,以极速易用的特点被人们所熟知,仅需亚秒级响应时间即可返回海量数据下的查询结果,不仅可以支持高并发的点查询场景,也能支持高吞吐的复杂分析场景。基于此,Apache Doris 能够较好的满足报表分析、即席查询、统一数仓构建、数据湖联邦查询加速等
大数据存储-Doris部署

数据仓库分层概念

前言: 不是做数仓的,但是也需要了解数仓的知识。 其实分层好多因人而异,问了同事好多分层的区别也不是很清晰。 所以后续有机会还是跟数仓的同事碰一下吧~ 一. 各种名词解释   1.1 ODS是什么? ODS层最好理解,基本上就是数据从源表拉过来,进行etl,比如mysql 映射到hive,那么到了hive里面就是ods层。 ODS 全称是 Operational Data Store,数
数据仓库分层概念

大数据相关组件的介绍

大数据组件 1、数据存储 HDFS(Hadoop Distributed File System):Hadoop分布式文件系统 Hbase :分布式数据库,用于存储大规模结构化数据,更适合非结构化的数据存储 Clickhouse:分布式分析性数据库,拥有高效的查询能力,执行更新和删除比较麻烦 Hive:用Java编写的,建立在Hadoop之上的分布式数据仓库 Doris:分析性数据库,由百度大数据
大数据相关组件的介绍

Finereport部署

1、配置  1.1、系统配置:最低4C8G,建议8C16G,硬盘100G  1.2、环境依赖:mysql5.7,JDK1.8 2、部署 2.1、mysql的部署 1. 删除mariadb $ rpm -qa|grep mariadb mariadb-libs-5.5.56-2.el7.x86_64 #上一步查出来的文件名,直接复制下来就OK,删除maridab $ rpm -e --nodeps
Finereport部署