Hadoop-та бейнелеуші және редуктор дегеніміз не?
Hadoop-та бейнелеуші және редуктор дегеніміз не?

Бейне: Hadoop-та бейнелеуші және редуктор дегеніміз не?

Бейне: Hadoop-та бейнелеуші және редуктор дегеніміз не?
Бейне: Круглый стол «Что, если не Hadoop» 2024, Сәуір
Anonim

басты артықшылығы MapReduce бірнеше есептеу түйіндері бойынша деректерді өңдеуді масштабтау оңай. Астында MapReduce моделі, деректерді өңдеу примитивтері мапперлер және деп аталады редукторлар . Мәліметтерді өңдеу қолданбасын карта жасаушыларға декомпозициялау және редукторлар кейде тривиальды емес.

Осыны ескере отырып, карташы және редуктор дегеніміз не?

MapReduce екі негізгі функциядан тұрады: Карталаушы және редуктор . Карташы енгізілген деректерді өңдейтін функция. The карташы деректерді өңдейді және деректердің бірнеше шағын бөліктерін жасайды.

карташы дегеніміз не? А карташы деректерді сипаттай алады карташы сондай-ақ географиялық карталарды жасайтын адам. Географияның міндеттері карташы немесе карта жасау техникі аумақтың картасын жасау үшін географиялық деректерді жинауды және өңдеуді қамтиды.

Осылайша, Hadoop-та карташы мен редуктордың қолданылуы қандай?

Apache Software Foundation мәліметтері бойынша, негізгі мақсаты Карта / Азайту кіріс деректер жинағын толығымен параллельді түрде өңделетін тәуелсіз бөліктерге бөлу болып табылады. The Hadoop MapReduce Framework карталардың шығыстарын сұрыптайды, содан кейін олар келесіге енгізіледі азайту тапсырмалар.

Hadoop-та карта жасаушы нені пайдаланады?

Жүгіруде Hadoop жұмыс, қолданбалар әдетте іске асырады Карташы және Картаны қамтамасыз ету үшін (кіріс жазбаларын аралық жазбаларға түрлендіретін жеке тапсырмалар) және кішірек мәндер жиынына кілтті ортақ пайдаланатын аралық мәндер жинағын азайту әдістерін азайту үшін Редуктор интерфейстері.

Ұсынылған: