精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

AI.x社區(qū)

軟考社區(qū)

企業(yè)培訓(xùn)

鴻蒙開發(fā)者社區(qū)

信創(chuàng)認證

公眾號矩陣

移動端

視頻課免費課排行榜短視頻直播課軟考學(xué)堂

全部課程軟考信創(chuàng)認證華為認證廠商認證 IT技術(shù)PMP項目管理免費題庫

在線學(xué)習

文章資源問答課堂專欄直播

51CTO

鴻蒙開發(fā)者社區(qū)

51CTO技術(shù)棧

51CTO官微

51CTO學(xué)堂

51CTO博客

CTO訓(xùn)練營

鴻蒙開發(fā)者社區(qū)訂閱號

51CTO軟考

51CTO學(xué)堂APP

51CTO學(xué)堂企業(yè)版APP

鴻蒙開發(fā)者社區(qū)視頻號

51CTO軟考題庫

賬號設(shè)置退出

Hadoop

840內(nèi)容??

關(guān)注

涵蓋Hadoop相關(guān)研究熱點、技術(shù)難點與應(yīng)用場景，讓用戶更加深入地學(xué)習這一大數(shù)據(jù)基礎(chǔ)技術(shù)。

共 156 條

詳解 Flink Catalog 在 ChunJun 中的實踐之路

我們知道 Flink 有Table（表）、View（視圖）、Function（函數(shù)/算子）、Database（數(shù)據(jù)庫）的概念，相對于這些耳熟能詳?shù)母拍睿現(xiàn)link 里還有一個 Catalog（目錄）的概念。本文將為大家?guī)?Flink Catalog 的介紹以及 Flink Catalog 在 ChunJun 中的實踐之路。Flink Catalog 簡介Catalog 提供元數(shù)據(jù)，如數(shù)據(jù)庫、表

2023-04-07 14:25:37

MapReduce報錯：「MKDirs failed to create file」

MapReduce報錯：「MKDirs failed to create file」??0. 寫在前面???1. 程序代碼及報錯信息???輸入、輸出路徑????程序代碼????報錯信息??2. 查找資料??3. 原因分析????4. 參考??0. 寫在前面Linux：Ubuntu Kylin16.04Hadoop：Hadoop2.7.21. 程序代碼及報錯信息輸入、輸出路徑zhangsan@had

2023-03-15 09:44:59

java hadoop Mapreduce

使用Maven構(gòu)建Hadoop工程并實現(xiàn)詞頻統(tǒng)計案例(詳細篇)

使用Maven構(gòu)建Hadoop工程并實現(xiàn)詞頻統(tǒng)計案例(詳細篇)一、實驗環(huán)境：Hadoop3.1.3IDEACentOS7.5Maven3.6.3偽分布式二、使用Maven構(gòu)建Hadoop工程1.解壓Maven到自己的安裝目錄tar -zxvf ./apache-maven-3.6.3-bin.tar.gz -C /opt/module/2.配置Maven環(huán)境變量vim /etc/profile.d

2023-02-14 08:39:07

hadoop maven 大數(shù)據(jù)

springboot：java實現(xiàn)郵件及附件發(fā)送、HTML正文的三種方式（三）【附帶源碼】

從代碼可以看出spring-boot-starter-mail與javax.mail的實現(xiàn)類似，都是通過類實現(xiàn)，但一定不要盲目的復(fù)制粘貼，理解，自己一行一行的復(fù)寫一遍代碼，這是千萬不能省的！

2023-02-05 09:27:58

java spring boot html

大數(shù)據(jù)Hadoop-04.高可用集群安裝

Hadoop 3.3.4 高可用集群安裝

2023-01-23 19:45:52

Hadoop 大數(shù)據(jù)數(shù)據(jù)分析

HDFS機架感知

HDFS機架感知

2023-01-16 16:22:15

機架感知 Hadoop

大數(shù)據(jù)平臺datasophon 測試部署

標簽（空格分隔）：大數(shù)據(jù)運維專欄一：datasophon的介紹1.1datasophon的介紹DataSophon是近日開源的一款國產(chǎn)自研大數(shù)據(jù)管理平臺，致力于快速實現(xiàn)部署、管理、監(jiān)控以及自動化運維大數(shù)據(jù)服務(wù)組件和節(jié)點的能力，幫助你快速構(gòu)建起穩(wěn)定、高效的大數(shù)據(jù)集群服務(wù)。主要有以下特性:極易部署，1小時可完成300節(jié)點的大數(shù)據(jù)集群部署國產(chǎn)化兼容，兼容ARM服務(wù)器和常用國產(chǎn)化操作系統(tǒng)監(jiān)控指標全面豐富，

2023-01-11 15:36:41

大數(shù)據(jù)平臺dataso datasophon hadoop

HDFS，MapReduce，Yarn的架構(gòu)思想和設(shè)計原理

Hadoop 三大組件：HDFS，MapReduce，Yarn 的架構(gòu)分析和原理1引子????????大數(shù)據(jù)就是將各種數(shù)據(jù)統(tǒng)一收集起來進行計算，發(fā)掘其中的價值。這些數(shù)據(jù)，既包括數(shù)據(jù)庫的數(shù)據(jù)，也包括日志數(shù)據(jù)，還包括專門采集的用戶行為數(shù)據(jù)；既包括企業(yè)內(nèi)部自己產(chǎn)生的數(shù)據(jù)，也包括從第三方采購的數(shù)據(jù)，還包括使用網(wǎng)絡(luò)爬蟲獲取的各種

2023-01-07 00:14:02

數(shù)據(jù)服務(wù)器 HDFS

Flink SQL管理平臺flink-streaming-platform-web安裝搭建

我的gitee地址：https://gitee.com/ddxygq/bigdatatechnicalpai最近看到有人在用flinksql的頁面管理平臺，大致看了下，嘗試安裝使用，比原生的flinksql界面確實好用多了，我們看下原生的，通過bin/sqlclient.sh命令進入那個黑框，一只松鼠，對，就是那個界面。。。。這個工具不是Flink官方出的，是一個國內(nèi)的小伙伴寫的，Github地址

2022-12-06 14:55:07

flink sql kafka

三大實例帶你搞定 Prometheus API 使用

作為一位優(yōu)秀的技術(shù)人員，往往能通過對數(shù)據(jù)的最大化利用來產(chǎn)生更多價值。而 Prometheus 的監(jiān)控數(shù)據(jù)則是可以為我們所用的重要數(shù)據(jù)，它并不只能用于日常的監(jiān)控和告警使用，也可以用于數(shù)據(jù)分析、成本管理等企業(yè)需求。在這種場景下，需要我們從 Prometheus 去獲取相關(guān)的數(shù)據(jù)，并對其進行處理加工。關(guān)于數(shù)據(jù)的獲取方法，通常會使用 Prometheus 提供的 API 來操作，本文將會對此進行講解介紹。

2022-11-30 10:19:45

數(shù)據(jù)時間戳獲取數(shù)據(jù)

CDH5部署三部曲之二：部署和設(shè)置

本文是《CDH5部署三部曲》的第二篇，前文將集群所有機器做了必要的設(shè)置，今天一起來完成CDH的部署、啟動、設(shè)置等操作

2022-11-28 00:06:12

cloudera CDH 大數(shù)據(jù)

CDH5部署三部曲之一：準備工作

CDH5部署前的準備工作，包括系統(tǒng)設(shè)置、安裝文件下載等

2022-11-27 14:15:11

cloudera java cdh

Hadoop總結(jié)——Hadoop基礎(chǔ)

Hadoop基礎(chǔ)

2022-11-06 15:26:12

hadoop 數(shù)據(jù)mapreduce

字節(jié)跳動開源數(shù)據(jù)集成引擎 BitSail 的演進歷程與能力解析

導(dǎo)讀BitSail 是字節(jié)跳動開源數(shù)據(jù)集成引擎，支持多種異構(gòu)數(shù)據(jù)源間的數(shù)據(jù)同步，并提供離線、實時、全量、增量場景下全域數(shù)據(jù)集成解決方案，目前支撐了字節(jié)內(nèi)部和火山引擎多個客戶的數(shù)據(jù)集成需求。經(jīng)過字節(jié)跳動各大業(yè)務(wù)線海量數(shù)據(jù)的考驗，在性能、穩(wěn)定性上得到較好驗證。10 月 26 日，字節(jié)跳動宣布 BitSail 項目正式在 GitHub 開源，為更多的企業(yè)和開發(fā)者帶來便利，降低數(shù)據(jù)建設(shè)的成本，讓數(shù)據(jù)高效地

2022-11-03 11:51:33

數(shù)據(jù)flink 數(shù)據(jù)集成

使用Hadoop patch包修復(fù)的一次經(jīng)歷

原因：因為公司的平臺的數(shù)據(jù)量在30P左右，使用了Hadoop3.1.2的版本，而且使用的糾刪碼功能，報錯信息如下：java.io.IOException: Unexpected EOS from the readerat org.apache.hadoop.hdfs.StripeReader.readToBuffer(StripeReader.java:241)at org.apache.hado

2022-10-11 18:02:20

hadoop hdfs java

字節(jié)跳動基于Doris的湖倉分析探索實踐

更多技術(shù)交流、求職機會，歡迎關(guān)注字節(jié)跳動數(shù)據(jù)平臺微信公眾號，回復(fù)【1】進入官方交流群Doris簡介Doris是一種MPP架構(gòu)的分析型數(shù)據(jù)庫，主要面向多維分析，數(shù)據(jù)報表，用戶畫像分析等場景。自帶分析引擎和存儲引擎，支持向量化執(zhí)行引擎，不依賴其他組件，兼容MySQL協(xié)議。Apache Doris具備以下幾個特點：良好的架構(gòu)設(shè)計，支持高并發(fā)低延時的查詢服務(wù)，支持高吞吐量的交互式分析。多FE均可對外提供服

2022-09-29 15:01:03

Presto安裝集成kerberos

解壓presto-server包tar -zxvf presto-server-0.276.tar.gz件目錄結(jié)構(gòu)如下drwxr-xr-x 3 rong rong 4096 Mar 29 10:29 bindrwxrwxr-x 2 rong rong 12288 Mar 29 09:54 lib-rw-r--r-- 1 rong rong 191539 Mar 5...

2022-09-27 06:12:38

hive hadoop hdfs

開源交流丨一站式大數(shù)據(jù)平臺運維管家ChengYing安裝原理剖析

本期我們帶大家回顧一下漫路同學(xué)的直播分享《ChengYing 安裝原理剖析》。本期內(nèi)容多為實戰(zhàn)演示，歡迎有興趣的同學(xué)去 B 站配合視頻觀看，便于理解。一、ChengYing 安裝原理ChengYing 安裝主要分為下面八個模塊的內(nèi)容，下面為大家介紹一下每個模塊主要能做的事情：1、主機編排一個組件包里面有很多服務(wù)，指定服務(wù)安裝到哪些主機。2、沖突校驗根據(jù)組件包之間的依賴關(guān)系，校驗編排結(jié)果是否符合部署

2022-09-09 14:17:36

自定義配置信息配置文件

終于有人把不同標簽的加工內(nèi)容與落庫講明白了丨DTVision分析洞察篇

上一篇文章詳細給大家介紹了標簽的設(shè)計與加工，在標簽生命周期流程中，標簽體系設(shè)計完成后，便進入標簽加工與上線運行階段，一般來說數(shù)據(jù)開發(fā)團隊會主導(dǎo)此過程，但我們需要關(guān)心以下幾個問題：?標簽如何快速創(chuàng)建和實現(xiàn)標簽邏輯的在線化管理?業(yè)務(wù)人員怎么參與到標簽建設(shè)流程中?百萬級別的標簽如何落表一、加工方式：傳統(tǒng) VS 在線當企業(yè)無標簽系統(tǒng)時，一般由數(shù)據(jù)開發(fā)在離線數(shù)倉中完成標簽的加工和運行，運營或市場同學(xué)需要某個

2022-09-08 16:39:42

數(shù)據(jù)sql hive

Hadoop總結(jié)

一、Hadoop是什么？Hadoop是一個Apache基金會所開發(fā)的分布式系統(tǒng)基礎(chǔ)架構(gòu)。在工業(yè)界，Hadoop已經(jīng)是公認的大數(shù)據(jù)通用存儲和分析平臺，它實現(xiàn)了分布式文件系統(tǒng)HDFS（?Hadoop Distributed File System）、分布式運行程序編程框架MapReduce以及資源管理系統(tǒng)YARN（ Yet Another Resource Negotiator），其中HDF

2022-09-02 20:13:59

mapreduce hadoop 大數(shù)據(jù)

（1）sparkstreaming結(jié)合sparksql讀取socket實時數(shù)據(jù)流

Spark Streaming是構(gòu)建在Spark Core的RDD基礎(chǔ)之上的，與此同時Spark Streaming引入了一個新的概念：DStream（Discretized Stream，離散化數(shù)據(jù)流)，表示連續(xù)不斷的數(shù)據(jù)流。DStream抽象是Spark Streaming的流處理模型，在內(nèi)部實現(xiàn)上，Spark Streaming會對輸入數(shù)據(jù)按照時間間隔（如1秒）分段，每一段數(shù)據(jù)轉(zhuǎn)換為Spar

2022-08-31 11:56:08

spark java spark sql

MMA安裝及使用優(yōu)化

公司自建的hdfs集群，后期使用阿里的Maxcompute，就需要遷移數(shù)據(jù)到新環(huán)境中，阿里提供眾多的遷移方案，在經(jīng)過我們的實踐后，最終選擇了MMA，遷移數(shù)據(jù)Hive到Maxcompute。

2022-08-03 13:41:40

hive hdfs 數(shù)據(jù)遷移

一文看懂大數(shù)據(jù)生態(tài)圈完整知識體系【大數(shù)據(jù)技術(shù)及架構(gòu)圖解實戰(zhàn)派】

一文看懂大數(shù)據(jù)生態(tài)圈完整知識體系徐葳隨著大數(shù)據(jù)行業(yè)的發(fā)展，大數(shù)據(jù)生態(tài)圈中相關(guān)的技術(shù)也在一直迭代進步，作者有幸親身經(jīng)歷了國內(nèi)大數(shù)據(jù)行業(yè)從零到一的發(fā)展歷程，通過本文希望能夠幫助大家快速構(gòu)建大數(shù)據(jù)生態(tài)圈完整知識體系。目前大數(shù)據(jù)生態(tài)圈中的核心技術(shù)總結(jié)下來如圖1所示，分為以下9類，下面分別介紹。圖1 一、數(shù)據(jù)采集技術(shù)框架數(shù)據(jù)采集也被稱為數(shù)據(jù)同步。隨著互聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)、物聯(lián)網(wǎng)等技術(shù)的興起，產(chǎn)生了海

2022-08-03 11:28:08

數(shù)據(jù)大數(shù)據(jù)技術(shù)框架

大數(shù)據(jù)Hadoop之——任務(wù)調(diào)度器Oozie（Oozie環(huán)境部署）

Oozie是一個基于工作流引擎的開源框架，依賴于MapReduce來實現(xiàn)，是一個管理 Apache Hadoop 作業(yè)的工作流調(diào)度系統(tǒng)。是由Cloudera公司貢獻給Apache的，它能夠提供對Hadoop MapReduce和Pig Jobs的任務(wù)調(diào)度與協(xié)調(diào)。Oozie需要部署到Java Servlet容器中運行。

2022-07-16 19:01:00

大數(shù)據(jù)Oozie

大數(shù)據(jù)Hadoop之——Cloudera Hadoop（CM 6.3.1+CDH 6.3.2環(huán)境部署）

在眾多 Hadoop 版本中， CDH（Cloudera Hadoop）是 Hadoop 眾多分支中比較出色的版本，它由Cloudera 發(fā)行和維護。CDH 基于 Apache 的 Hadoop 進行重新構(gòu)建，提供了基于 Web 頁面的群集部署和管理操作。Hadoop發(fā)行版除了社區(qū)的Apache hadoop外，Cloudera Hadoop（CDH）、Hortonworks、MapR、EMC、IBM、INTEL、華為等都提供自己的商業(yè)版本。

2022-07-08 23:38:26

hadoop CDH 大數(shù)據(jù)

#Word文檔導(dǎo)入#大數(shù)據(jù)presto+Alluxio?

大數(shù)據(jù)presto+Alluxio? 1.Presto安裝? 角色分配?IP地址?HOSTNAME?NodeID?角色?172.16.16.241?incubator-test-dc-001?presto-cdh01?coordinator?172.16.16.246?incubator-test-dc-002?presto-cdh02?worker?172.16.16.25

2022-05-16 16:55:10

cloudera hive apache

MacOS下安裝Apache Flink及測試WordCount

1.安裝java1.8版本steven@wangyuxiangdeMacBook-Pro  ~  java -versionjava version "1.8.0_211"Java(TM) SE Runtime Environment (build 1.8.0_211-b12)Java HotSpot(TM) 64-Bit Server VM (build 25.211-b12, mixed

2022-05-16 15:43:40

flink apache java

linux硬核知識點

man 是 manual 的縮寫，將指令的具體信息顯示出來。當執(zhí)行`man date`時，有 DATE(1) 出現(xiàn)，其中的數(shù)字代表指令的類型，常用的數(shù)字及其類型如下

2022-04-23 17:02:38

bash 文件系統(tǒng)子進程

Shell腳本進階

if 判斷條件 1 ; then 條件為真的分支代碼 elif 判斷條件 2 ; then 條件為真的分支代碼 elif 判斷條件 3 ; then 條件為真的分支代碼 else 以上條件都為假的分支代碼 fi

2022-04-22 20:49:44

bash 賦值 ip地址

用戶行為指標淺析

前言用戶行為分析是對用戶在產(chǎn)品或觸點上產(chǎn)生的行為及行為背后的數(shù)據(jù)進行分析，通過構(gòu)建用戶行為數(shù)據(jù)分析體系或者用戶畫像，來改變產(chǎn)品、營銷、運營決策，實現(xiàn)精細化運營，指導(dǎo)業(yè)務(wù)增長。總之，很重要。先來看下用戶類行為指標說明，然后下面詳解常寫的指標。僅供參考，實際開發(fā)邏輯還是按業(yè)務(wù)需求為標準。指標名稱解釋說明:新增用戶首次聯(lián)網(wǎng)使用應(yīng)用的用戶，如果一個用戶首次打開某APP，那這個用戶定義為新增用戶：卸載再安裝

2022-04-19 16:28:49

sql 唯一標識業(yè)務(wù)需求

一文玩轉(zhuǎn)Linux(NAT)網(wǎng)絡(luò)配置(保姆級別教程)

VMWare提供了三種工作模式，它們是bridged(橋接模式)、NAT(網(wǎng)絡(luò)地址轉(zhuǎn)換模式)和host-only(主機模式)，bridged(橋接模式) 是 VMWare 虛擬出來的操作系統(tǒng)就像是局域網(wǎng)中的一臺獨立的主機，它可以訪問網(wǎng)內(nèi)任何一臺機器。在橋接模式下，需要手工為虛擬系統(tǒng)配置IP地址、子網(wǎng)掩碼，而且還要和宿主機器處于同一網(wǎng)段，這樣虛擬系統(tǒng)才能和宿主機器進行通信。同時，由于這個虛擬系統(tǒng)是局域網(wǎng)中的一個獨立的主機系統(tǒng)，那么就可以手工配置它的TCP/IP配置信息，以實現(xiàn)通過局域網(wǎng)的網(wǎng)關(guān)或路由器訪問互聯(lián)網(wǎng)。使用橋接模式的虛擬系統(tǒng)和宿主機器的關(guān)系，就像連接在同一個Hub上的兩臺電腦。想讓它們相互通訊，需要為虛擬系統(tǒng)配置IP地址和子網(wǎng)掩碼，否則就無法通信。

2022-04-15 00:12:57

centos Linux NAT網(wǎng)絡(luò)配置

詳解Apache Hudi如何配置各種類型分區(qū)

1. 引入??Apache??Hudi支持多種分區(qū)方式數(shù)據(jù)集，如多級分區(qū)、單分區(qū)、時間日期分區(qū)、無分區(qū)數(shù)據(jù)集等，用戶可根據(jù)實際需求選擇合適的分區(qū)方式，下面來詳細了解Hudi如何配置何種類型分區(qū)。2. 分區(qū)處理為說明Hudi對不同分區(qū)類型的處理，假定寫入Hudi的??Schema??如下{ "type" : "record", "name" : "HudiSchemaDemo",

2022-04-11 16:12:41

hive apache 字段

用 GraphScope 像 NetworkX 一樣做圖分析

NetworkX 是 Python 上最常用的圖分析包，GraphScoep 兼容 NetworkX 接口。本文中我們將分享如何用 GraphScope 像 NetworkX 一樣在（大）圖上進行分析。快速訪問graphscope：??https://github.com/alibaba/GraphScope??NetworkX 是什么NetworkX 是一個用 Python 語言開發(fā)的圖論與復(fù)雜

2022-04-11 15:02:53

twitter 數(shù)據(jù)聚類

都2022年了，HDFS為何還如此能戰(zhàn)！

HDFS也許不是最好的大數(shù)據(jù)存儲技術(shù)，但依然是最重要的大數(shù)據(jù)存儲技術(shù)。

2022-04-11 14:12:13

hdfs 數(shù)據(jù)HDFS

MapReduce編程模型和計算框架

1 概述源于Google的MapReduce論文，發(fā)表于2004年12月。Hadoop MapReduce是Google MapReduce的克隆版。Hadoop問世前，已有分布式計算，但都是專用系統(tǒng)，僅處理某一類計算，比如進行大規(guī)模數(shù)據(jù)排序。這樣的系統(tǒng)無法復(fù)用到其他大數(shù)據(jù)計算場景，每種應(yīng)用都需要開發(fā)與維護專門系統(tǒng)。而Hadoop MapReduce造就了大數(shù)據(jù)計算通用編程。只要遵循MapRedu

2022-04-05 20:52:00

mapreduce 數(shù)據(jù)服務(wù)器

數(shù)倉建模—OneID

今天是我在上海租房的小區(qū)被封的第三天，由于我的大意，沒有屯吃的，外賣今天完全點不到了，中午的時候我找到了一包快過期的肉松餅，才補充了1000焦耳的能量。但是中午去做核酸的時候，我感覺走路有點不穩(wěn)，我看到大白的棉簽深入我的嘴里，我竟然以為是吃的，差點咬住了，還好我有僅存的一點意識。下午我收到女朋友給我點的外賣——面包（我不知道她是怎么點到的外賣，我很感動），很精致的面包，擱平時我基本不喜歡吃面包，但

2022-03-31 17:39:18

數(shù)據(jù)建模 spark

GC：垃圾回收機制，不用手動回收釋放#yyds干貨盤點#

GC：垃圾回收機制，不用手動回收釋放什么是垃圾？對象被判定為垃圾的標準沒有被其他對象引用怎么判斷垃圾？判定對象是否為垃圾的算法引用計數(shù)算法通過判斷對象的引用數(shù)量來決定對象是否可以被回收每個對象實例都有一個引用計數(shù)器，被引用則+1，完成引用則1任何引用計數(shù)為0的對象實例可以被當作垃圾收集優(yōu)點:執(zhí)行效率高，程序執(zhí)行受影響較小缺點︰無法檢測出循環(huán)引用的情況，導(dǎo)致內(nèi)存泄露javapackagecom.in

2022-03-02 08:23:48

引用計數(shù)java 方法區(qū)

Hadoop Kerberos 集成

官網(wǎng)參考：https://hadoop.apache.org/docs/r2.7.3/hadoop-project-dist/hadoop-common/SecureMode.html2、創(chuàng)建Hadoop系統(tǒng)用戶為Hadoop開啟Kerberos，需為不同服務(wù)準備不同的用戶，啟動服務(wù)時需要使用相應(yīng)的用戶。須在所有節(jié)點創(chuàng)建以下用戶和

2022-02-19 13:55:44

hadoop hdfs xml

第12講：Flink 常用的 Source 和 Connector

Flink系列文章1.第01講：Flink的應(yīng)用場景和架構(gòu)模型(https://www.ikeguang.com/?p=1976)2.第02講：Flink入門程序WordCount和SQL實現(xiàn)(https://www.ikeguang.com/?p=1977)3.第03講：Flink的編程模型與其他框架比較(https://www.ikeguang.com/?p=1978)4.第04講：Flink

2022-01-29 10:24:47

flink redis apache

數(shù)倉建模—指標體系#yyds干貨盤點#

指標體系提起指標這個詞，每個人似乎都可以說出幾個指標，像經(jīng)常在工作中會聽到的日活、月活、注冊率、轉(zhuǎn)化率、交易量等事實上指標就是用來量化事物的一個工具，幫助我們?nèi)⒁恍┏橄蟮氖录贸鲆粋€輪廓上的描述。例如我們可以從指標上判斷一個產(chǎn)品的好壞，用戶粘性等等，例如我們通過日活能去判斷出我們整個產(chǎn)品的用戶量，從而能反應(yīng)出我們這個產(chǎn)品的一個健康程度，也就是否處于增長過程中。一個好的數(shù)據(jù)指標體系可以助力業(yè)務(wù)快速

2021-12-22 17:10:10

數(shù)據(jù)搜索二級

整合Apache Hudi+Mysql+FlinkCDC2.1+CDH6.3.0

一、環(huán)境準備1.環(huán)境準備：flink 1.13.1+hudi0.10+hive2.1.1+cdh6.3.0+mysql5.7+flinkcdc2.1+flink web平臺二.編譯hudi（這個編譯是以前的一個測試版本，編譯大同小異）1.使用git命令下載hudi0.10的代碼steven@wangyuxiangdeMacBook-Pro  ~  git clone https://gith

2021-12-15 17:13:27

flink hive 數(shù)據(jù)

sqoop用法之mysql與hive數(shù)據(jù)導(dǎo)入導(dǎo)出#yyds干貨盤點#

一.Sqoop介紹Sqoop是一個用來將Hadoop和關(guān)系型數(shù)據(jù)庫中的數(shù)據(jù)相互轉(zhuǎn)移的工具，可以將一個關(guān)系型數(shù)據(jù)庫（例如：MySQL、Oracle、Postgres等）中的數(shù)據(jù)導(dǎo)進到Hadoop的HDFS中，也可以將HDFS的數(shù)據(jù)導(dǎo)進到關(guān)系型數(shù)據(jù)庫中。對于某些NoSQL數(shù)據(jù)庫它也提供了連接器。Sqoop，類似于其他ETL工具，使用元數(shù)據(jù)模型來判斷數(shù)據(jù)類型并在數(shù)據(jù)從數(shù)據(jù)源轉(zhuǎn)移到Hadoop時確保類型安

2021-12-06 22:38:37

hive mysql 數(shù)據(jù)

0012 - YARN三種資源調(diào)度器解析

大數(shù)據(jù)夢工廠（0012YARN三種資源調(diào)度器解析）(https://mp.weixin.qq.com/s/wkwIrLIwbfTzyEk9PkMdQ)1YARN資源調(diào)度器簡介資源調(diào)度器（ResourceScheduler）是HadoopYARN中最核心的組件之一，且是ResourceManager中的一個服務(wù)組件，負責整個Hadoop集群資源的分配和管理，用于解決各應(yīng)用程序之間集群資源搶占的問題。

2021-11-30 23:19:04

Hadoop YARN 大數(shù)據(jù)

#yyds干貨盤點#Hadoop企業(yè)級生產(chǎn)調(diào)優(yōu)手冊(二)

上節(jié)：Hadoop企業(yè)級生產(chǎn)調(diào)優(yōu)手冊(一)(https://blog.51cto.com/u_14932245/4693074)五、HDFS存儲優(yōu)化注：演示糾刪碼和異構(gòu)存儲需要一共5臺虛擬機。盡量拿另外一套集群。提前準備5臺服務(wù)器的集群。5.1糾刪碼5.1.1糾刪碼原理HDFS默認情況下，一個文件有3個副本，這樣提高了數(shù)據(jù)的可靠性，但也帶來了2倍的冗余開銷。Hadoop3.x引入了糾刪碼，采用計算

2021-11-27 11:28:03

hadoop hdfs mapreduce

#yyds干貨盤點#Hadoop企業(yè)級生產(chǎn)調(diào)優(yōu)手冊(一)

一、HDFS核心參數(shù)1.1NameNode內(nèi)存生產(chǎn)配置1.NameNode內(nèi)存計算每個文件塊大概占用150byte，一臺服務(wù)器128G內(nèi)存為例，能存儲多少文件塊呢？12812810241024/150Byte≈9.1億2.Hadoop2.x系列，配置NameNode內(nèi)存NameNode內(nèi)存默認2000m，如果服務(wù)器內(nèi)存4G，NameNode內(nèi)存可以配置3G。在hadoopenv.sh文件中配置如下

2021-11-26 10:48:36

hadoop hdfs 數(shù)據(jù)

HBase面試題整理

1、HBase的特點是什么？1）大：一個表可以有數(shù)十億行，上百萬列；2）無模式：每行都有一個可排序的主鍵和任意多的列，列可以根據(jù)需要動態(tài)的增加，同一張表中不同的行可以有截然不同的列；3）面向列：面向列（族）的存儲和權(quán)限控制，列（族）獨立檢索；4）稀疏：空（null）列并不占用存儲空間，表可以設(shè)計的非常稀疏；5）數(shù)據(jù)多版本：每個單元中的數(shù)據(jù)可以有多個版本，默認情況下版本號自動分配，是單元格插入時的時

2021-11-14 14:27:35

數(shù)據(jù)緩存 hive

CDH6.3.2 集成 openldap 配置

CDH6.3.2集成openldap配置標簽（空格分隔）：大數(shù)據(jù)運維專欄toc一：hive集成openldap1.1CDH6.3.2的主機節(jié)點安裝openldap的客戶端openldap服務(wù)端已經(jīng)配置完成，不會看flyfish博文https://blog.51cto.com/flyfish225/4562546在此不做部署：安裝openldapclient裝包：yumyinstallopenlda

2021-11-11 17:44:50

openladp cdh hive

kafka分區(qū)擴容和修改三個副本數(shù)

Kafka是Apache旗下的一款分布式流媒體平臺，Kafka是一種高吞吐量、持久性、分布式的發(fā)布訂閱的消息隊列系統(tǒng)。它最初由LinkedIn(領(lǐng)英)公司發(fā)布，使用Scala語言編寫，與2010年12月份開源，成為Apache的頂級子項目。它主要用于處理消費者規(guī)模網(wǎng)站中的所有動作流數(shù)據(jù)。動作指(網(wǎng)頁瀏覽、搜索和其它用戶行動所產(chǎn)生的數(shù)據(jù))。?消息系統(tǒng)分類我們知道常見的消息系統(tǒng)有Kafka、Rabbi

2021-10-27 11:28:04

cloudera jar kafka

耗時一個月，整理出這份Hadoop吐血寶典

本文目錄：一、HDFS\二、MapReduce\三、Yarn\四、Hadoop3.x新特性\五、Hadoop大廠面試真題解析Hadoop涉及的知識點如下圖所示，本文將逐一講解：!(https://s4.51cto.com/images/blog/202110/22145555_6172607b946f17173.png?xossprocess=image/watermark,size_14,tex

2021-10-22 14:57:18

hadoop 大數(shù)據(jù)

Dolphinscheduler1.3.8集群部署

1.集群節(jié)點規(guī)劃及說明主機部署服務(wù)說明172.16.53.179masterserver,alertserver,zookeeper,mysql數(shù)據(jù)庫也在該主機172.16.53.180zookeeperzk172.16.53.181apiserver,zookeeperweb服務(wù)端口:12345172.16.53.182masterserver172.16.53.183workserver172

2021-10-13 20:44:42

1 2 3 4 下一頁

51CTO技術(shù)棧公眾號

業(yè)務(wù)
速覽

媒體

51CTO CIOAge HC3i

社區(qū)

51CTO博客鴻蒙開發(fā)者社區(qū) AI.x社區(qū)

教育

51CTO學(xué)堂精培企業(yè)培訓(xùn) CTO訓(xùn)練營

久久久中精品2020中文| 亚洲精品成人久久| 三年中文高清在线观看第6集| 国产一区二区在线不卡| 欧美日韩影院| 亚洲精品一区二区久| 中文字幕天天干| 欧美大片黄色| 久久久久久麻豆| 91视频国产精品| 久久久精品视频在线| 色综合www| 欧美电影一区二区| 国产中文字幕在线免费观看| 日本美女在线中文版| 成人av综合在线| 国产精品综合不卡av| 国产精品第108页| 色婷婷亚洲mv天堂mv在影片| 亚洲国产黄色片| 国产原创精品在线| 性孕妇free特大另类| 亚洲乱码国产乱码精品精的特点 | 成人福利一区二区| 亚洲午夜久久久久久久久久久| 天天综合狠狠精品| 天堂中文资源在线观看| 黑人精品欧美一区二区蜜桃| 茄子视频成人在线| 国产一级特黄毛片| 亚洲澳门在线| 在线日韩中文字幕| 色天使在线视频| 欧美中文高清| 欧美精品vⅰdeose4hd| av网址在线观看免费| 大香伊人中文字幕精品| 综合激情成人伊人| 午夜一区二区三视频在线观看| 内射后入在线观看一区| 狠狠v欧美v日韩v亚洲ⅴ| 国产精品www| 中文字幕黄色片| 国产日韩免费| 性色av一区二区三区在线观看| 草视频在线观看| 自拍欧美日韩| 久热99视频在线观看| 国内毛片毛片毛片毛片毛片| 欧美综合一区| 中文字幕日韩精品在线| 妺妺窝人体色WWW精品| 综合国产视频| 亚洲色图激情小说| 非洲一级黄色片| 国产成人高清| 在线观看久久av| 欧美性受xxxx黑人| 成人网18免费网站| 中文字幕不卡av| 欧美色图17p| 色小子综合网| www.亚洲人.com| 在线观看亚洲网站| 自拍日韩欧美| 97在线看福利| 久久久久久不卡| 视频在线观看一区二区三区| 国产精品国产福利国产秒拍| 在线观看中文字幕网站| 激情小说亚洲一区| 亚洲最大av在线| 黄色一级大片在线免费看国产一| 成人高清在线视频| 免费日韩电影在线观看| av中文在线| 亚洲视频在线观看三级| 精品视频在线观看一区二区| 岛国毛片av在线| 欧美视频在线看| www.色偷偷.com| 999精品嫩草久久久久久99| 欧美一区二区三区影视| 88av在线播放| 国产成人三级| 欧美成人精品在线播放| 日本少妇xxxx动漫| 天堂一区二区在线免费观看| 国产一区在线播放| 亚洲成人一级片| 91蜜桃在线免费视频| 性欧美精品一区二区三区在线播放| 毛片在线看网站| 国产精品不卡一区| 欧美一区二区中文字幕| 男女啪啪999亚洲精品| 日韩精品最新网址| 精品少妇一区二区三区免费观| 日韩理论电影大全| 久久久久久亚洲精品中文字幕 | 99青草视频在线播放视| 一区二区三区在线观看欧美| av观看免费在线| 国产电影一区二区| 国产手机视频精品| 欧美日韩在线观看免费| 老鸭窝毛片一区二区三区| 91在线高清免费观看| 日韩欧美在线观看一区二区| 日韩美女啊v在线免费观看| a在线视频观看| 久久综合给合| 在线观看久久av| 日产精品久久久| 国产一区二区美女诱惑| 日韩高清三级| 日本蜜桃在线观看视频| 欧美一区二区三区公司| 黄色片网站免费| 亚洲国产三级| 亚洲a级在线播放观看| 国产理论电影在线观看| 精品久久久久久久久久国产| 亚洲精品在线网址| 日本不卡高清| 国产成人精品在线播放| 农村少妇久久久久久久| 亚洲男同性恋视频| 亚欧美在线观看| 国产日产精品一区二区三区四区的观看方式 | 国产热re99久久6国产精品| 午夜18视频在线观看| 亚洲欧美日韩中文字幕一区二区三区| 国产一区亚洲二区三区| 麻豆成人入口| 性色av一区二区咪爱| 97人妻一区二区精品免费视频 | 亚洲图片小说在线| 三上悠亚激情av一区二区三区| 精品国产乱码久久久久久免费| 女人18毛片毛片毛片毛片区二| 视频一区在线播放| 欧美高清视频一区| 亚洲女色av| 亚洲激情视频在线| 日韩字幕在线观看| 成人av午夜影院| 奇米影视亚洲色图| 成人在线超碰| 久久久久久久999精品视频| 精品人妻一区二区三区含羞草 | 最新日韩三级| 亚洲人在线观看| 国产一级片免费视频| 国产亚洲欧洲997久久综合| 免费看的黄色大片| 美日韩中文字幕| 日韩免费黄色av| 可以在线观看的av| 91黄视频在线| 91狠狠综合久久久久久| 蜜臀va亚洲va欧美va天堂| 亚洲第一导航| 亚洲精品成a人ⅴ香蕉片| 久久色在线播放| 成人1区2区3区| 性做久久久久久免费观看| 亚洲成av人片在线观看无| 国产日韩精品视频一区二区三区| 免费日韩电影在线观看| 成人免费在线观看视频| 另类视频在线观看| 你懂的网站在线| 欧亚洲嫩模精品一区三区| wwwww黄色| 国产成人精品亚洲777人妖| 国产www免费| 国产成人影院| 成人在线激情视频| 高清在线视频不卡| 亚洲天堂成人在线视频| 国产又大又粗又硬| 亚洲图片自拍偷拍| 少妇久久久久久久久久| 麻豆精品蜜桃视频网站| 日产精品久久久久久久蜜臀| 亚洲人成网77777色在线播放| 国产精品老女人视频| 亚洲淫性视频| 国产视频一区在线| 一本一道精品欧美中文字幕| 亚洲综合精品自拍| av男人的天堂av| 久久精品无码一区| 精品1区2区3区4区| 欧洲亚洲一区二区三区四区五区| 欧美a一级片| 性日韩欧美在线视频| 日本天堂在线观看| 精品国产凹凸成av人网站| 一级黄色在线观看| 亚洲一区二区在线免费观看视频| 素人fc2av清纯18岁| 国内成人精品2018免费看| 久久久久久久久久久视频| 亚洲成人av| 久久久7777| 亚洲国产aⅴ精品一区二区| 国产成人97精品免费看片| 亚洲电影视频在线| 深夜福利91大全| 手机看片1024国产| 91精品国产色综合久久不卡电影| 毛片在线免费视频| 亚洲综合色视频| 激情无码人妻又粗又大| 26uuu亚洲| 成年人性生活视频| 久草热8精品视频在线观看| 欧美s码亚洲码精品m码| 午夜日韩福利| 一个色的综合| jiujiure精品视频播放| 精品一区二区三区免费毛片| 日韩精品一区国产| 91免费版网站入口| 久久久久久久性潮| 国产成人精品在线| 免费福利视频一区二区三区| 国内精品久久久久久久| 亚洲妇熟xxxx妇色黄| 久久综合色影院| 国产淫片在线观看| 日韩在线视频二区| www黄在线观看| 国产小视频国产精品| 欧美一区二区视频| 日韩激情片免费| 天堂中文在线观看视频| 亚洲精品电影网站| 国产综合在线播放| 精品久久久久久综合日本欧美| 国产精品国产精品国产专区| 欧美日本国产一区| 亚洲性在线观看| 欧美日本高清视频在线观看| 亚洲天堂999| 欧美日韩精品免费| 一卡二卡在线观看| 欧美精品视频www在线观看| 一级黄色a视频| 欧美美女直播网站| 国产精品无码一区二区桃花视频| 欧美二区三区91| www.av黄色| 精品国产乱码91久久久久久网站| 超碰在线人人干| 精品av久久707| 亚洲三区在线播放| 亚洲欧美制服综合另类| 国产福利在线视频| 中文字幕最新精品| av软件在线观看| 欧美另类高清videos| 美洲精品一卡2卡三卡4卡四卡| 久久久亚洲成人| 涩涩涩视频在线观看| 国产精品成人品| 成人久久精品| 国产一区二区三区四区五区在线| 中文精品一区二区| 亚洲制服欧美久久| 午夜国产精品视频免费体验区| 嫩草影院中文字幕| 国产精品视频| 欧美成人三级在线播放| 国产乱人伦偷精品视频免下载| 午夜男人的天堂| 国产亚洲欧美日韩俺去了| 天天色影综合网| 亚洲v日本v欧美v久久精品| 69视频免费在线观看| 欧美日本视频在线| 日韩在线观看视频一区| 在线播放国产一区二区三区| 大地资源网3页在线观看| 久久久久久伊人| 国产精品久久乐| 风间由美久久久| 黑人操亚洲人| 日韩精品在线视频免费观看| 日韩有码一区二区三区| 国产精品99精品无码视亚| 久久综合九色综合97_久久久| 91av手机在线| 欧美日韩久久久久| 91麻豆成人精品国产免费网站| 精品国产一区二区三区久久久蜜月 | 免费欧美一级片| 久久免费精品国产久精品久久久久| 极品色av影院| 欧美视频一区二区三区…| 国产欧美第一页| 亚洲香蕉av在线一区二区三区| 色www永久免费视频首页在线| 国产精品久久av| 精品女人视频| 国产又粗又大又爽的视频| 性8sex亚洲区入口| 日本wwwwwww| 国产精品久久精品日日| 台湾佬中文在线| 精品日韩在线一区| 九色porny丨首页在线| 国产成人激情小视频| 国产乱论精品| 男同互操gay射视频在线看| 日韩电影在线观看网站| 亚州av综合色区无码一区| 亚洲精品国久久99热| 中文字幕黄色av| 亚洲欧美日韩国产中文| 久久亚洲资源| 91网站免费看| 久久美女视频| 日韩一级片播放| 久久久久综合网| 一级片中文字幕| 亚洲成人教育av| 97超碰在线公开在线看免费| 国产精品视频免费在线| 性欧美xxxx免费岛国不卡电影| 久久国产午夜精品理论片最新版本| 韩国一区二区视频| 中文字幕第69页| 欧美私模裸体表演在线观看| 青青久草在线| 日本成人精品在线| 日韩有码中文字幕在线| 久久综合色视频| 99久久综合99久久综合网站| 欧美亚韩一区二区三区| 亚洲国产精久久久久久| brazzers在线观看| 国产精品自拍首页| 亚洲国产影院| 国产精品嫩草av| 欧美丝袜一区二区| 嫩草研究院在线观看| 国产福利视频一区| 不卡一区综合视频| 波多野结衣天堂| 国产精品成人一区二区三区夜夜夜| 亚洲天堂中文字幕在线| 日韩一区二区三区在线播放| 亚洲精品自拍| 熟女视频一区二区三区| 国产精品一区二区男女羞羞无遮挡| 永久免费看片直接| 日韩欧美高清一区| xxx.xxx欧美| 农村寡妇一区二区三区| 久久亚洲电影| 精品无码一区二区三区蜜臀| 欧美一个色资源| 国产理论电影在线| 久久国产主播精品| 蜜桃在线一区二区三区| 91麻豆精品成人一区二区| 日韩美女一区二区三区四区| 国产福利电影在线播放| 欧美高清性xxxxhd| 久久国产精品第一页| 欧美日韩精品亚洲精品| 亚洲精品av在线| 先锋欧美三级| 日韩中文在线字幕| 99久久99久久精品免费观看| 国产又粗又猛又爽又| 久热精品视频在线| 国偷自产视频一区二区久| 亚洲精品中文字幕无码蜜桃| 国产精品无遮挡| 国产日韩欧美精品| 欧美资源在线观看| 国产精品毛片久久| 久久人人妻人人人人妻性色av| 欧美日韩视频在线第一区 | 亚洲色图欧美偷拍| 蜜臀久久精品久久久久| 国产精品第10页| 欧美激情综合| 久久精品无码一区| 欧美大片国产精品| 成人在线观看免费视频| 欧美一级片免费播放| 中文字幕乱码日本亚洲一区二区| www.香蕉视频| 国产精品扒开腿做爽爽爽视频| 欧美视频一区|