Свързани публикации 'hive'
Flutter Benchmark Tuesday: SQLite срещу Hive — как популярните статии ни мамят
Здравейте всички. Това е друга история от нашия редовен сегмент „тестване на очевидни неща във вторник“. И този път темата за избор на база данни за локално съхранение на данни във Flutter приложение привлече вниманието ми. Тази тема е много използвана и има много статии, написани за нея, повечето от които засягат само практическото сравнение на три алтернативни опции за съхранение на данни: Hive, SQLite и SharedPreferences.
Няма да ви губя времето да описвам всеки от тях, тъй като..
Свързани въпроси 'hive'
Има ли начин да промените типа на колоната в таблицата на кошера?
Текущата схема е:
hive> describe tableA;
OK
id int
ts timestamp
Искам да променя ts колона да бъде BIGINT без да изпускам таблица и да създам отново. Възможно ли е?
103184 изгледи
schedule
20.09.2022
какви са най-добрите практики за изпълнение на Hive заявки
Обикновено изпълнението на заявките на Hive отнема известно време, което може да отнеме няколко минути до часове. Ако няколкостотин клиента на Java изпълняват Hive заявки, потенциално такива клиенти ще чакат дълго време, за да получат резултатите и...
247 изгледи
schedule
17.09.2022
Как да свържа кошера с таблото?
Разгърнах персонализиран hadoop клъстер с много възли с два подчинени устройства и един главен и съхранени данни в таблицата на кошера. Как мога да свържа кошера към таблицата за визуализация?
Всяка помощ ще бъде оценена.
Благодаря
2484 изгледи
schedule
15.09.2022
Изграждането на Spark в кошер MySQL metastore не се използва
Използвам Apache Spark 2.1.1 и съм поставил следния hive-site.xml в папка $SPARK_HOME/conf :
<?xml version="1.0"?>
<configuration>
<property>
<name>javax.jdo.option.ConnectionURL</name>...
1650 изгледи
schedule
19.09.2022
Обработете времеви интервал за всяка двойка начало/край с помощта на Hive скрипт
Имам услуга, която може да бъде стартирана или спряна. Всяка операция генерира запис с клеймо за време и тип операция. В крайна сметка завършвам с поредица от маркирани с време записи на операции. Сега искам да изчисля времето за работа на услугата...
110 изгледи
schedule
19.09.2022
грешка в командата hive Изразът не е в групата по ключ product_id
Имам HDFS таблица A, написана в следния формат
user product
U1 101
U1 102
U1 103
U2 101
U2 104
U3 102
...............
describe A;
>> user string
product int
Сега, ако искам да събера...
6047 изгледи
schedule
22.09.2022
Ляв и десен псевдоними, срещани в Hive JOIN; без клауза за неравенство
Използвам следната заявка:
Select
S.MDSE_ITEM_I,
S.CO_LOC_I,
MAX(S.SLS_D) as MAX_SLS_D,
MIN(S.SLS_D) as MIN_SLS_D,
sum(S.SLS_UNIT_Q) as SLS_UNIT_Q,
MIN(PRSMN_VAL_STRT_D) as PRSMN_VAL_STRT_D,
MIN(PRSMN_VAL_END_D) as...
47634 изгледи
schedule
21.09.2022
Не може да се запише кадър с данни като Hive таблица, извежда се изключение, че файлът не е намерен
Когато се опитвам да запазя рамка с данни като таблица Hive в pyspark
df_writer.saveAsTable('hive_table', format='parquet', mode='overwrite')
Получавам следната грешка:
Причинено от: org.apache.hadoop.mapred.InvalidInputException:...
254 изгледи
schedule
27.09.2022
Защо CTAS заявката в кошера не дава очаквания резултат?
Ето случая, създавам "тест" на таблица с кошери със 100 реда.
Когато стартирам терминала на кошера и въведа следния SQL
select * from test tablesample(2 percent);
връща 3 реда данни;
Но когато добавя „създаване на таблица като избор“,...
143 изгледи
schedule
23.09.2022
Spark - Hive таблица връща нулева стойност в обвивката
Опитвам се да изтегля данни от таблицата на кошера в обвивката на spark, използвайки spark.sql(" "), но дава нулеви стойности. Hive таблица съдържа данни. Дори аз съм написал код, използвайки обект HiveContext, но все още същият проблем продължава.
476 изгледи
schedule
25.09.2022
Записване на sas данни в Hive с цифрова променлива с повече от 15 цифри
Опитвам се да запиша SAS данни в Hive с помощта на SAS. Имам ID променлива в таблицата, която е дълга >15 цифри и трябва да запазя тази променлива като числова, когато пиша тези данни в Hive. Опитах скрипта по-долу, но той ми дава предупреждението...
174 изгледи
schedule
25.09.2022
Как мога да направя двоен разделител в Hive?
да кажем, че имам някои примерни редове от данни
site1^http://article1.com?datacoll=5|4|3|2|1&test=yes
site1^http://article1.com?test=yes
site1^http://article1.com?datacoll=5|4|3|2|1&test=yes
Искам да създам таблица като така,...
1307 изгледи
schedule
03.10.2022
Таблицата на кошера изчезна
Импортирах данните от MySQL в Hive с помощта на командата Sqoop. sqoop import --connect jdbc:mysql://mysql_server/db1 --username userid --password passwd --query 'select col1, col2, sum(col3), sum(col4), sum(col5), sum(col6) from table1 WHERE...
1194 изгледи
schedule
02.10.2022
Не може да се стартира обвивката на кошера Не може да се инстанцира org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
Инсталирах hive 0.14 преди няколко месеца. Работеше добре. Но когато започна сега, това ме хвърля под грешка. Инсталирах само spark,mysql,hbase в моята ubuntu машина след инсталирането на hive, но hbase също не се стартира. Мислех, че java може да...
8139 изгледи
schedule
02.10.2022
SQL Предизвикателство/Пъзел: Дадено е проследяване на стека - Как да намерите най-горния елемент във всяка точка от времето?
Моят реален случай на употреба беше да обединявам вложени диапазони . Начертах някои скици и след това видях приликата между диапазони, започващи и завършващи за стек на PUSH и POP операции. Разбрах, че решаването на този проблем ще реши и...
487 изгледи
schedule
01.10.2022
Heredocs извършват разширяване на параметрите на тяхното съдържание, така че вашите $(docker ps ...) и $container оценки се случват преди кодът изобщо да стигне до stdin на ssh.
476 изгледи
schedule
25.09.2022
Избягвайте да отпечатвате името на таблицата в името на колоната, докато използвате beeline
Докато използвам hive в beeline, използвайки проста select заявка, бих искал да върна таблица без име на таблица в име на колона по подразбиране.
Пример
Данни
На пример за проста таблица (TutorialsPoint) :
CREATE TABLE IF NOT...
7855 изгледи
schedule
30.09.2022
Проблем със сканиране на пълна таблица в Hive (използвани са разделени колони)
Имам ГОЛЯМА таблица в Hive 0.13 - има приблизително 250 GB данни на ден. Следователно на час това е приблизително 10 GB данни. Имам BI инструмент, който би искал да има достъп до данните на тази таблица на база ден или час, за което трябва да...
1932 изгледи
schedule
03.10.2022
HIVE ORC връща NULL
Създавам ORC външна таблица на кошера (ORC файл, разположен на S3).
Команда
CREATE EXTERNAL TABLE Table1 (Id INT, Name STRING) STORED AS ORC LOCATION 's3://bucket_name'
След изпълнение на заявката :
Select * from Table1;...
1744 изгледи
schedule
30.09.2022
как да чета кошерна таблица на орк транзакции в spark?
Как да чета кошерна таблица на орк транзакции в spark?
Изправен съм пред проблем, докато чета ORC транзакционна таблица през spark Получавам схема на таблица на кошера, но не мога да чета действителни данни
Вижте пълния сценарий:
hive>...
4087 изгледи
schedule
01.10.2022
