ApacheSpark
-
Spark調(diào)優(yōu)之RDD算子調(diào)優(yōu)(面試常問(wèn),建議收藏)
Spark調(diào)優(yōu)之RDD算子調(diào)優(yōu)不廢話,直接進(jìn)入正題!1. RDD復(fù)用在對(duì)RDD進(jìn)行算子時(shí),要避免相同的算子和計(jì)算邏輯之下對(duì)RDD進(jìn)行重復(fù)的計(jì)算,如下圖所示:RDD的重復(fù)計(jì)算對(duì)上圖中的RDD計(jì)算架構(gòu)進(jìn)行
-
深度解析Spark底層執(zhí)行原理(建議收藏)
Spark簡(jiǎn)介Apache Spark是用于大規(guī)模數(shù)據(jù)處理的統(tǒng)一分析引擎,基于內(nèi)存計(jì)算,提高了在大數(shù)據(jù)環(huán)境下數(shù)據(jù)處理的實(shí)時(shí)性,同時(shí)保證了高容錯(cuò)性和高可伸縮性,允許用戶將Spark部署在大量硬件之上,形成集群
-
SparkSQL對(duì)于批流支持的特性及批流一體化支持框架的難點(diǎn)
轉(zhuǎn)載本文需注明出處:微信公眾號(hào)EAWorld,違者必究。本文介紹了 SparkSQL 和 Flink 對(duì)于批流支持的特性以及批流一體化支持框架的難點(diǎn)。在介紹批流一體化實(shí)現(xiàn)的同時(shí),重點(diǎn)分析了基于普元 SparkSQL-Flow 框架對(duì)批流支持的一種實(shí)現(xiàn)方式
-
2020 Techo Park開(kāi)發(fā)者大會(huì)召開(kāi),作業(yè)幫加速平臺(tái)架構(gòu)容器化探索
12月19日-20日,由騰訊主辦的2020 Techo Park開(kāi)發(fā)者大會(huì)在京舉行,全球200余位頂級(jí)技術(shù)專(zhuān)家以及數(shù)千位參會(huì)者在大會(huì)現(xiàn)場(chǎng)就云計(jì)算、大數(shù)據(jù)和人工智能等前沿技術(shù)話題展開(kāi)深度交流。
2020 Techo Park開(kāi)發(fā)者大會(huì) 2020-12-23 -
2020 Techo Park開(kāi)發(fā)者大會(huì)召開(kāi),作業(yè)幫分享拍搜系統(tǒng)架構(gòu)演變歷程
12月19日至20日,由騰訊主辦的2020 Techo Park開(kāi)發(fā)者大會(huì)于北京召開(kāi)。據(jù)悉,本次大會(huì)邀請(qǐng)了全球超200位頂級(jí)技術(shù)專(zhuān)家來(lái)到現(xiàn)場(chǎng),與數(shù)千位參會(huì)者就云計(jì)算、大數(shù)據(jù)和人工智能等前沿技術(shù)話題展開(kāi)深度交流,為中國(guó)及全球云計(jì)算愛(ài)好者、從業(yè)者、開(kāi)發(fā)者提供最具參考價(jià)值的創(chuàng)新分享
-
AIPARK愛(ài)泊車(chē)獲D輪重磅融資,引領(lǐng)人工智能+智慧交通加速度向前
近日,人工智能靜態(tài)交通、智慧停車(chē)領(lǐng)軍企業(yè)AIPARK愛(ài)泊車(chē)完成D輪數(shù)億元融資,本輪由深創(chuàng)投領(lǐng)投、正和島投資與盛景資本跟投。這是AIPARK愛(ài)泊車(chē)半年內(nèi)第三度傳出融資喜訊,智慧停車(chē)的“隱形冠軍”企業(yè)正在其開(kāi)拓的賽道上以加速度狂飆猛進(jìn)
-
AIPARK愛(ài)泊車(chē)憑借人工智能硬科技榮獲2020“創(chuàng)客中國(guó)”大賽一等獎(jiǎng)
2020年“創(chuàng)客中國(guó)”工業(yè)互聯(lián)網(wǎng)中小企業(yè)創(chuàng)新創(chuàng)業(yè)大賽決賽在湖北武漢成功舉辦,AIPARK愛(ài)泊車(chē)獲得大賽一等獎(jiǎng)。
-
再獲加碼,智慧停車(chē)行業(yè)巨頭AIPARK愛(ài)泊車(chē)完成數(shù)億元C+輪融資
近日,智慧停車(chē)領(lǐng)軍企業(yè)AIPARK愛(ài)泊車(chē)宣布完成數(shù)億元C+輪融資,本輪投資方為交銀國(guó)際、58產(chǎn)業(yè)基金、湖南財(cái)信基金。
-
AIPARK愛(ài)泊車(chē)完成重磅C輪融資,按下智慧停車(chē)行業(yè)發(fā)展加速鍵
近日,智慧停車(chē)領(lǐng)軍企業(yè)AIPARK愛(ài)泊車(chē)宣布完成C輪3億元人民幣融資,本輪融資由高榕資本領(lǐng)投,長(zhǎng)商昆仲、中關(guān)村科學(xué)城科創(chuàng)基金跟投。
-
基于Spark的數(shù)據(jù)分析實(shí)踐
轉(zhuǎn)載本文需注明出處:微信公眾號(hào)EAWorld,違者必究。引言:Spark是在借鑒了MapReduce之上發(fā)展而來(lái)的,繼承了其分布式并行計(jì)算的優(yōu)點(diǎn)并改進(jìn)了MapReduce明顯的缺陷。Spark主要包含
-
AI芯天下丨工業(yè)大數(shù)據(jù)挖掘的利器——Spark MLlib
一提到大數(shù)據(jù),人們首先會(huì)想到在互聯(lián)網(wǎng)和商業(yè)等環(huán)境中,利用大量的行為數(shù)據(jù)來(lái)分析用戶行為和預(yù)測(cè)市場(chǎng)趨勢(shì)等應(yīng)用。但是對(duì)工業(yè)大數(shù)據(jù)的定義和應(yīng)用卻很難直觀地理解和想象。
-
Parrot推出4K迷你版無(wú)人機(jī)
據(jù)了解,新型Anafi折疊后可以放在小箱子之中,而且其重量大約只有320克,和一副羽毛球拍的重量相當(dāng)。
無(wú)人機(jī) 2018-06-08 -
大疆Mavic Air上手體驗(yàn):彌補(bǔ)了Spark和Mavic Pro不足
大疆在2018年1月23日晚上11點(diǎn)在紐約發(fā)布了最新的一款無(wú)人機(jī)產(chǎn)品——御Mavic Air。這是一款擁有御Mavic Pro性能、曉Spark體積設(shè)計(jì)的無(wú)人機(jī),大小跟一臺(tái)iPhone 8 Plus差不多,除了續(xù)航時(shí)間差了點(diǎn),只有21分鐘,其他該有的功能都配齊了。
-
大疆無(wú)人機(jī)占據(jù)統(tǒng)治地位 Parrot不愿硬鋼
說(shuō)到無(wú)人機(jī),很多人的第一印象都是大疆,毫不夸張的說(shuō),這家國(guó)內(nèi)無(wú)人機(jī)公司已經(jīng)搶占了大部分的消費(fèi)端市場(chǎng)。在這樣的趨勢(shì)背景下,Parrot將眼光瞄準(zhǔn)了專(zhuān)業(yè)應(yīng)用領(lǐng)域。
最新活動(dòng)更多 >
-
11月起立即報(bào)名>> 光電類(lèi)專(zhuān)業(yè)2025年秋季空中雙選會(huì)
-
11月20日火熱報(bào)名中>>> 2024 智能家居出海論壇
-
11月22日立即報(bào)名>> 【線上&線下同步會(huì)議】領(lǐng)英 躍遷向新 年度管理者峰會(huì)
-
11月28日立即報(bào)名>>> 2024工程師系列—工業(yè)電子技術(shù)在線會(huì)議
-
11月29日立即預(yù)約>> 【上海線下】設(shè)計(jì),易如反掌—Creo 11發(fā)布巡展
-
即日-11.30免費(fèi)預(yù)約申請(qǐng)>>> 燧石技術(shù)-紅外熱成像系列產(chǎn)品試用活動(dòng)
- 模組計(jì)劃物控經(jīng)理 祐富百勝寶電器(深圳)有限公司
- 高級(jí)銷(xiāo)售代表(提成不封頂) 湖南時(shí)代聯(lián)合新能源有限公司
- 體系經(jīng)理(J10116) 江西天孚科技有限公司
- C++軟件工程師 易思維(杭州)科技股份有限公司
- 軟件工程師(base:成都) 深圳潛行創(chuàng)新科技有限公司
- 北區(qū)銷(xiāo)售工程師 蘇州貝林激光有限公司
- 項(xiàng)目工程師 深圳市華力特電氣系統(tǒng)有限公司
- 研究員助理(行業(yè)研究、政策研究方向) 深圳國(guó)家高技術(shù)產(chǎn)業(yè)創(chuàng)新中心
- 外貿(mào)業(yè)務(wù)員 深圳錦帛方激光科技有限公司