Är show en action i gnistan?
Är show en action i gnistan?

Video: Är show en action i gnistan?

Video: Är show en action i gnistan?
Video: Как Долго Продержится Карандаш? 2024, Maj
Anonim

2 svar. show är verkligen en handling , men det är smart nog att veta när det inte behöver köra allt. Om du hade en orderBy skulle det också ta väldigt lång tid, men i det här fallet är alla dina operationer kartoperationer och så det finns ingen anledning att beräkna hela finalbordet.

Bara så, är räkning en handling i gnistan?

räkna () till räkna antalet rader. Eftersom den initierar DAG-exekveringen och returnerar data till föraren, är det en handling för RDD. Fall 2: Om du ringer räkna på Dataframe initierar den DAG-exekveringen och returnerar data till föraren, dess an handling för Dataframe.

På samma sätt, vad är handling och transformation i gnista? Gnista RDD-verksamhet. Två typer av Apache Gnista RDD-operationer är- Transformationer och Handlingar . A Omvandling är en funktion som producerar ny RDD från de befintliga RDD:erna men när vi vill arbeta med den faktiska datamängden, vid den tidpunkten Handling utförs.

På motsvarande sätt, vad är en handling i gnista?

Handlingar är RDD:s operation, går det värdet tillbaka till spardrivrutinprogrammen, som startar ett jobb som ska köras på ett kluster. Transformationens output är en ingång av Handlingar . reducera, samla, taSample, take, first, saveAsTextfile, saveAsSequenceFile, countByKey, foreach är vanliga handlingar i Apache gnista.

Vad gör collect () i gnista?

samla (func) samla returnerar elementen i datamängden som en array tillbaka till drivrutinsprogrammet. samla används ofta i tidigare angivna exempel som t.ex Gnista Transformationsexempel för att visa avkastningens värden. REPL kommer till exempel att skriva ut värdena för arrayen tillbaka till konsolen.

Rekommenderad: