kafka3.0使用什么代替zookeeper 沒有計算機基礎(chǔ)應(yīng)該如何學(xué)習(xí)大數(shù)據(jù)知識?
沒有計算機基礎(chǔ)應(yīng)該如何學(xué)習(xí)大數(shù)據(jù)知識?學(xué)習(xí)程序開發(fā)可以在一些開源平臺上瀏覽更多的項目、博客、問答。知名平臺如github,stackoverflow。在github上搜索大數(shù)據(jù),會出現(xiàn)相關(guān)項目。有大數(shù)
沒有計算機基礎(chǔ)應(yīng)該如何學(xué)習(xí)大數(shù)據(jù)知識?
學(xué)習(xí)程序開發(fā)可以在一些開源平臺上瀏覽更多的項目、博客、問答。知名平臺如github,stackoverflow。
在github上搜索大數(shù)據(jù),會出現(xiàn)相關(guān)項目。有大數(shù)據(jù)入門指南的項目挺好的,可以借鑒一下。地址:如果限制訪問,可以點贊評論。
以下是取自項目的插圖和章節(jié)導(dǎo)航。
附:項目相關(guān)知識點如下
序
大數(shù)據(jù)學(xué)習(xí)路線
大數(shù)據(jù)技術(shù)堆棧思維導(dǎo)圖
大數(shù)據(jù)常用軟件安裝指南
首先,Hadoop
分布式文件存儲系統(tǒng)-HDFS
MapReduce,一個分布式計算框架
集群資源管理器-yarn
Hadoop單機偽集群環(huán)境的構(gòu)建
Hadoop集群環(huán)境構(gòu)建
HDFS通用Shell命令
HDFS Java API的使用
基于Zookeeper構(gòu)建Hadoop高可用性集群
第二,蜂巢
Hive簡介和核心概念
Linux環(huán)境下Hive的安裝和部署
Hive CLI和B:
Spark簡介
星火開發(fā)環(huán)境建設(shè)
彈性數(shù)據(jù)集RDD
RDD常用運算符詳解
Spark操作模式和作業(yè)提交
火花累加器和廣播變量
基于Zook:
數(shù)據(jù)框架和數(shù)據(jù)集
結(jié)構(gòu)化API的基本用法
Spark SQL外部數(shù)據(jù)源
Spark SQL的常用聚合函數(shù)
Spark SQL連接操作
火花流:
火花流簡介
火花流基本操作
火花流動集成水槽
火花流式集成卡夫卡
第四,風(fēng)暴
暴雨和河流處理簡介
風(fēng)暴核心概念詳解
風(fēng)暴單機環(huán)境建設(shè)
風(fēng)暴集群環(huán)境建設(shè)
風(fēng)暴規(guī)劃模型詳解
風(fēng)暴工程三種包裝的對比分析
暴風(fēng)集成Redis詳解
風(fēng)暴集成HDFS/HBase
風(fēng)暴集成卡夫卡
動詞 (verb的縮寫)弗林克
Flink核心概念概述
Flink開發(fā)環(huán)境建設(shè)
Flink數(shù)據(jù)源
Flink數(shù)據(jù)轉(zhuǎn)換
Flink數(shù)據(jù)接收器
Flink窗口模型
Flink狀態(tài)管理和檢查點機制
Flink獨立集群部署
第六,HBase
Hbase簡介
HBase系統(tǒng)架構(gòu)和數(shù)據(jù)結(jié)構(gòu)
h基本環(huán)境構(gòu)建(獨立/偽分布式模式)
HBase集群環(huán)境的構(gòu)建
HBase常見Shell命令
HBase Java API
HBase過濾器的詳細說明
HBase協(xié)處理器的詳細說明
h基本災(zāi)難恢復(fù)和備份
Phoenix,HBase的SQL中間層
春天/Spring Boot整合Mybatis鳳凰
七、卡夫卡
卡夫卡簡介
基于Zookeeper構(gòu)建Kafka高可用性集群
卡夫卡制作人詳解
卡夫卡消費者詳解
深刻理解卡夫卡的復(fù)制機制
八,動物園管理員
Zookeeper簡介和核心概念
Zookeeper單機環(huán)境和集群環(huán)境構(gòu)建
Zookeeper常見Shell命令
Zookeeper Java客戶端-Apache管理員
動物園管理員ACL訪問控制
九、水槽
水槽的簡介和基本用途
Linux環(huán)境下Flume的安裝和部署
水槽整合卡夫卡
X.Sqoop
Sqoop的介紹和安裝
Sqoop的基本用法
Xi。阿茲卡班
阿茲卡班簡介
Azkaban3.x的編譯和部署
阿茲卡班流程1.0的使用
阿茲卡班流程2.0的使用
十二。斯卡拉
Scala介紹及開發(fā)環(huán)境配置
基本數(shù)據(jù)類型和運算符
過程控制語句
陣列-陣列
器械包類型匯總
列表集,常用的集合類型之一
常見的集合類型之一——map tuple
班級
繼承和特點
函數(shù)閉包的cori化
模式匹配
類型參數(shù)
隱式轉(zhuǎn)換和隱式參數(shù)
十三。公共內(nèi)容
大數(shù)據(jù)應(yīng)用程序的常見打包方法
附言
推薦數(shù)據(jù)共享和開發(fā)工具
自學(xué)大數(shù)據(jù),能找到工作嗎?簡歷該如何寫?
謝謝你邀請我!
自學(xué)大數(shù)據(jù)沒問題,能不?找工作要看你掌握的技能是否能滿足企業(yè)的崗位要求。至于簡歷,你要清晰的呈現(xiàn)你的知識結(jié)構(gòu)和項目經(jīng)歷。
對于自學(xué)大數(shù)據(jù)的工程師來說,簡歷中要突出以下幾個方面:
首先,描述具體職位的知識結(jié)構(gòu)。大數(shù)據(jù)相關(guān)工作包括大數(shù)據(jù)平臺研發(fā)、大數(shù)據(jù)應(yīng)用開發(fā)、大數(shù)據(jù)分析和大數(shù)據(jù)運維等。每個崗位需要的知識結(jié)構(gòu)不一樣,要有針對性的描述。記得在簡歷上做個大概描述,重點突出。
第二,注意實用環(huán)節(jié)的描述。對于大數(shù)據(jù)領(lǐng)域的工程師來說,實踐能力是企業(yè)最關(guān)注的能力之一,所以需要把學(xué)習(xí)過程中涉及的實踐環(huán)節(jié)講清楚。以大數(shù)據(jù)分析為例,如何做數(shù)據(jù)分析是企業(yè)最關(guān)心的內(nèi)容,包括具體的方法,比如數(shù)據(jù)分析能否由機器學(xué)習(xí)來完成就是考察的重點內(nèi)容。
第三,注意基礎(chǔ)知識的描述。對于自學(xué)者來說,大數(shù)據(jù)的很多行業(yè)實踐可能并不了解,包括數(shù)據(jù)的收集、整理、存儲、安全等方法。如果在這些環(huán)節(jié)做過多的描述,就會偏離正常的軌道。盡量避免陷入這些環(huán)節(jié),突出自己的基礎(chǔ)知識結(jié)構(gòu)?;A(chǔ)知識對于一個大數(shù)據(jù)工程師來說非常重要,一定要強調(diào)。
第四,注意學(xué)習(xí)能力的描述。對于大數(shù)據(jù)工程師來說,學(xué)習(xí)能力很重要。對于自學(xué)者來說,能夠掌握一定的大數(shù)據(jù)知識本身就證明了他們的自學(xué)能力。尤其是初級大數(shù)據(jù)崗位,面試官可能更看重者的學(xué)習(xí)能力,所以需要重點考察學(xué)習(xí)大數(shù)據(jù)的過程、計劃和經(jīng)驗,這些往往能決定面試的結(jié)果。
人工智能和大數(shù)據(jù)是我的主要研究方向。目前也在考相關(guān)方向的研究生。我會陸續(xù)在頭條寫一些關(guān)于人工智能的文章。有興趣的朋友可以關(guān)注我,相信我會有所收獲。
如果你有任何上網(wǎng)問題,也可以咨詢我,謝謝!