Бейне: Spark қай Python нұсқасын пайдаланады?
2024 Автор: Lynn Donovan | [email protected]. Соңғы өзгертілген: 2023-12-15 23:49
Ұшқын Java 8+ жүйесінде жұмыс істейді, Python 2,7+/3,4+ және R 3,1+. Scala API үшін, Ұшқын 2.3. 0 пайдаланады Scala 2.11. Сізге қажет болады пайдалану үйлесімді Scala нұсқасы (2.11.
Сәйкесінше, spark Python 3-пен жұмыс істей ме?
Апачи Ұшқын бұл кластерлік есептеулер жүйесі, қазіргі уақытта ашық бастапқы Big Data аренасында ең белсенді дамығандардың бірі. Соңғы 1.4 нұсқасынан бастап (2015 жылғы маусым), Ұшқын R және қолдайды Python 3 (Java, Scala және. үшін бұрын қол жетімді қолдауды толықтыру үшін Python 2).
Жоғарыда көрсетілгеннен басқа, Python бағдарламасының ұшқын нұсқасын қалай өзгертуге болады? Сіз тек қаласаңыз өзгерту the питон нұсқасы ағымдағы тапсырма үшін келесі pyspark бастау пәрменін пайдалануға болады: PYSPARK_DRIVER_PYTHON=/home/user1/anaconda2/bin/ питон PYSPARK_PYTHON=/usr/local/anaconda2/bin/ питон pyspark --мастер..
Сонымен қатар, соңғы spark нұсқасы қандай?
Apache Spark
| Түпнұсқа автор(лар) | Матей Захария |
|---|---|
| Бастапқы шығарылым | 2014 жылғы 26 мамыр |
| Тұрақты босату | 2.4.5 / 8 ақпан, 2020 ж |
| Репозиторий | Spark репозиторийі |
| Жазылған | Скала |
Spark Python дегеніміз не?
Apache көмегімен үлкен деректерді реттеу Ұшқын және Python Py4J - біріктірілген танымал кітапхана PySpark мүмкіндік береді питон JVM объектілерімен (RDD) динамикалық интерфейс. Апачи Ұшқын үшін интерактивті қабықпен бірге келеді питон Скала үшін де солай. үшін қабық питон ретінде белгілі PySpark ”.
Ұсынылған:
Mailchimp қай уақыт белдеуін пайдаланады?
Timewarp электрондық пошта науқанын жіберген кезде, біз әлемдегі бірінші уақыт белдеуі (UTC +14) жоспарланған уақытқа жеткенде жібере бастаймыз
Қай Android браузері батареяны аз пайдаланады?
Қандай браузер ең аз батареяны пайдаланады және Android үшін ең жылдам? Firefox. Киви браузері. Дельфин браузері. Firefox Focus. Опера. Басқа
VS қай жерде жоқ, қай жерде жоқ?
NOT EXISTS және NOT IN туралы ескеретін ең маңызды нәрсе, EXISTS пен IN-тен айырмашылығы, олар барлық жағдайларда баламалы емес. Атап айтқанда, NULL мәндері қатысқан кезде олар әртүрлі нәтижелерді қайтарады. Толық нақты болу үшін, ішкі сұрау тіпті бір нөлді қайтарғанда, NOT IN ешбір жолға сәйкес келмейді
Azure SQL серверінің қандай нұсқасын пайдаланады?
Жауап жоқ. Бұл сан SQL серверінің жергілікті данасына қарағанда өзгеше. Менің дайындығым бойынша 12.0 нұсқасы ең соңғы нұсқа болып табылады. 12.0 өнім нұсқасының Azure данасын және SQL Server 2014 екеуін де ескере отырып, ол енді Azure дерекқорлары үшін үйлесімділік деңгейіне түседі
Gradle қандай Java нұсқасын пайдаланады?
Gradle тек Java 8 немесе одан жоғары нұсқада жұмыс істей алады. Gradle әлі де Java 6 және Java 7 үшін Javadoc құрастыруды, тестілеуді, генерациялауды және қолданбаларды орындауды қолдайды