Хобрук: Ваш путь к мастерству в программировании

Вопросы по теме 'hive'

datastax cqlsh изменить таблицу добавить столбец, но не может видеть столбец в улье, как?
cqlsh:test> alter table example add t int; then , bash$dse hive hive> use test; desc example; OK k int from deserializer v string from deserializer Новый столбец t не отображается в улье. версия dse 3.1.3. Что...

oozie - захватить дату и передать ее как параметр улья
Мне нужно периодически загружать файлы из локальной файловой системы в hdfs и обновлять разделы таблицы куста. Запрос на обновление разделов зависит от timestamps(select * where date = ""). Можно использовать Oozie EL, но мне нужна...
06.03.2024

Как импортировать файлы csv с ftp-сервера в hadoop (HDFS/HIVE/HBASE)?
Мои исходные файлы находятся на ftp-сервере в формате csv. Я хочу импортировать эти файлы в HDFS для дальнейшей обработки. Я не знаю, как получить эти файлы csv. Может ли кто-нибудь помочь мне в этом?
29.03.2024

Функция MAX не работает в HIVE
Мой SQL-запрос: select * from cds2 where tw=(select max(tw) from cds2) limit 10; Я новичок в Hive, и я написал этот запрос Hive: Select * from cds2 join (select max(tw) twmax from cds2) V on (1 = 1) group by id,filename,tw;...
22.03.2024

Hive: есть ли улучшение производительности при использовании предложения where в подтаблицах перед объединением?
Я хочу присоединиться к 2 таблицам кустов. Есть ли разница в производительности между следующими операторами? Столбцы для basic_info: user_id, имя, фамилия, день рождения, род занятий Столбцы для account_info: user_id, account_id, тип, баланс...

Kinit со Spark при подключении к Hive
Я пытаюсь подключиться к Hive (кластер hadoop имеет аутентификацию kerberos) из Spark, который является автономным. Может ли кто-нибудь дать мне знать, как сделать kinit в программе spark, которую я мог бы подключить к улью? ОБНОВЛЕНИЕ: мой...

Сценарий куста команд-бегуна EMR Step
Я пытаюсь запустить сценарий куста, который находится на S3 в кластере EMR. При подключении через SSH к кластеру EMR, набрав "hive -f s3://..." работает. Однако я хочу, чтобы это выполнялось автоматически, поэтому я создал скрипт python и...

Удаление таблицы Hive и обработка запросов
согласно моему пониманию концепций Hive, если мы загрузим набор данных в таблицу улья, файл данных переместится из исходного пути в хранилище улья в HDFS, а для HDFS было установлено три реплики для данных. эти вопросы могут показаться глупыми, но,...
08.03.2024

Новые материалы

Основы принципов S.O.L.I.D, Javascript, Git и NoSQL
каковы принципы S.O.L.I.D? Принципы SOLID призваны помочь разработчикам создавать надежные, удобные в сопровождении приложения. мы видим пять ключевых принципов. Принципы SOLID были разработаны..

Как настроить Selenium в проекте Angular
Угловой | Селен Как настроить Selenium в проекте Angular Держите свое приложение Angular и тесты Selenium в одной рабочей области и запускайте их с помощью Mocha. В этой статье мы..

Аргументы прогрессивного улучшения почти всегда упускают суть
В наши дни в кругах веб-разработчиков много болтают о Progressive Enhancement — PE, но на самом деле почти все аргументы с обеих сторон упускают самую фундаментальную причину, по которой PE..

Введение в Джанго Фреймворк
Схема «работать умно, а не усердно» В этой и последующих статьях я познакомлю вас с тем, что такое фреймворк Django и как создать свое первое приложение с помощью простых и понятных шагов, а..

Настольный ПК как «одно кольцо, чтобы править всеми» домашних компьютеров
Вид после 9 месяцев использования С настольных компьютеров все началось, но в какой-то момент они стали «серверами», и мы все перешли на ноутбуки. В прошлом году я столкнулся с идеей настольных..

Расширенные методы безопасности для VueJS: реализация аутентификации без пароля
Руководство, которое поможет вам создавать безопасные приложения в долгосрочной перспективе Безопасность приложений часто упускается из виду в процессе разработки, потому что основная..

стройный-i18следующий
Представляем стройную оболочку для i18next. Эта библиотека, основанная на i18next, заключает экземпляр i18next в хранилище svelte и отслеживает события i18next, такие как languageChanged,..