標(biāo)題就是Kafka的定義，它用夠替代傳統(tǒng)的消息隊(duì)列用于解耦合數(shù)據(jù)處理，緩存未處理消息等，同時(shí)具有更高的吞吐率，支持分區(qū)、多副本、冗余，因此被廣泛用于大規(guī)模消息數(shù)據(jù)處理應(yīng)用。 我主要使用它來作數(shù)據(jù)實(shí)時(shí)計(jì)算，統(tǒng)計(jì)各種報(bào)表，如：小時(shí)報(bào)表、周報(bào)表、月報(bào)表、年報(bào)表等，以及其它報(bào)表，如：復(fù)購率統(tǒng)計(jì)，當(dāng)然還有其它用途，這里只是拋磚引玉。 Kafka使用場景 日志收集：一個…

linux環(huán)境下壓縮包主要以tar，tar.gz, zip包等為主，但是遇到上傳到linux服務(wù)器的rar壓縮包，在linux系統(tǒng)下解壓時(shí)，需要安裝unrar命令 ubuntu系統(tǒng)可以直接通過命令安裝 apt-get install unrar 在centos系統(tǒng)中會發(fā)現(xiàn)unrar命令并沒有集成在默認(rèn)repo或epel源中，。網(wǎng)上其他教程給到的包安裝后解壓有…

一個IT從業(yè)者，分享IT的各種相關(guān)內(nèi)容。點(diǎn)個關(guān)注，不迷路，總有能幫到你的分享內(nèi)容。什么？幫不到。那謝謝你這么俊/這么美，來關(guān)注我！ 01 前言 也許你會問，Linux修改DNS服務(wù)器地址不很簡單嘛，修改/etc/resolv.conf，添加nameserver行就行了。是的，沒錯，在CentOS 6這樣做沒有問題，但是CentOS 7引入了NetworkMa…

Kafka – Linux 環(huán)境（CentOS 7）的詳細(xì)安裝步驟（含Zookeeper） 在開始正式安裝之前，先簡單說下整個系統(tǒng)運(yùn)行的順序： 1. 啟動 zookeeper server。 2. 啟動 kafka server。 3. Producer 如果生產(chǎn)了數(shù)據(jù)，會先通過 zookeeper 找到 broker，然后將數(shù)據(jù)存放進(jìn) brok…

在Linux系統(tǒng)中，用戶可以分為超級用戶和普通用戶。超級用戶是用戶root，不受系統(tǒng)權(quán)限限制;普通用戶由用戶root創(chuàng)建，如用戶名稱為zhang、wang等，僅具有有限的權(quán)限。在真實(shí)的生產(chǎn)環(huán)境中(即實(shí)際的項(xiàng)目運(yùn)行環(huán)境)中，管理員操控Linux系統(tǒng)，并不都是使用用戶root的身份來操作，為了項(xiàng)目的安全與穩(wěn)定，一般使用者都是以普通用戶的身份登錄系統(tǒng)。 在Linu…