Текущее время: Вт, авг 05 2025, 00:24

Часовой пояс: UTC + 3 часа




Начать новую тему Ответить на тему  [ Сообщений: 11 ] 
Автор Сообщение
 Заголовок сообщения: Источник данных экспорта для мультипровайдера?
СообщениеДобавлено: Пт, мар 30 2007, 06:21 
Младший специалист
Младший специалист

Зарегистрирован:
Ср, апр 12 2006, 13:29
Сообщения: 98
Уважаемые коллеги стоит следующий вопрос - существует несколько кубов - объединенных мультипровайдером (данные по кубам делятся по месяцу/году - т.е. каждый месяц создается и подключается новый куб) - необходимо переливать данные из этого объединения в другой куб. Источник данных эскпорта для мультипровайдера не формируется (хотя в контекстном меню данная команда присутствует). Кто нибудь может посоветовать реализацию проблемы (без формирования отчета в Бексе и его заливки) ???


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пт, мар 30 2007, 13:41 
Ассистент
Ассистент
Аватара пользователя

Зарегистрирован:
Ср, июн 21 2006, 13:11
Сообщения: 38
Если не секрет - в чем причина деления данных по кубам, тем более в таком количестве?


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пт, мар 30 2007, 14:11 
Директор
Директор
Аватара пользователя

Зарегистрирован:
Вс, июн 26 2005, 22:41
Сообщения: 1135
Откуда: Москва
Пол: Мужской
+1


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пт, мар 30 2007, 15:13 
Старший специалист
Старший специалист
Аватара пользователя

Зарегистрирован:
Вт, янв 30 2007, 17:10
Сообщения: 488
Осмелюсь предположить, что причина такова: данных очень много и правятся очень активно, причем задним числом, дельты нет. Решение в лоб.
Знакомая картинка просто:)

_________________
Карма - это суперпозиция граблей, на которые мы уже успели наступить, но которые еще не долетели...


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пт, мар 30 2007, 15:31 
Ассистент
Ассистент
Аватара пользователя

Зарегистрирован:
Ср, июн 21 2006, 13:11
Сообщения: 38
Очень часто решения "в лоб" имеют далекоидущие весьма неприятные последствия, что мы в данном случае, по-видимому, и имеем. :(


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пт, мар 30 2007, 15:48 
Директор
Директор
Аватара пользователя

Зарегистрирован:
Вс, июн 26 2005, 22:41
Сообщения: 1135
Откуда: Москва
Пол: Мужской
а что в таком случае мешает слить данные в один куб из двух по отдельности, сначала из одного, потом из другого?


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пт, мар 30 2007, 15:59 
Ассистент
Ассистент
Аватара пользователя

Зарегистрирован:
Ср, июн 21 2006, 13:11
Сообщения: 38
А потом из k-го и из n-го... Если предположение Soulsurfer верно, то это может быть очень ресурсоемко, а выполняться должно часто, например. Но это лишь гипотеза, а автор молчит. Автора в студию!


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пн, апр 02 2007, 06:35 
Младший специалист
Младший специалист

Зарегистрирован:
Ср, апр 12 2006, 13:29
Сообщения: 98
И снова здравствуйте. Да все правы, данных действительно много, в месяц набегает несколько десятков миллионов записей, в связи с этим разделили по нескольким кубам. Alessandro тоже прав - выполнятся должно часто. Когда держали все в одном кубе - еле ворочался, разделили так - пока вроде без нареканий :)


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пн, апр 02 2007, 09:30 
Почетный гуру
Почетный гуру
Аватара пользователя

Зарегистрирован:
Пт, июн 24 2005, 15:18
Сообщения: 1216
Откуда: Diagon Alley
StealthS написал(а):
И снова здравствуйте. Да все правы, данных действительно много, в месяц набегает несколько десятков миллионов записей, в связи с этим разделили по нескольким кубам. Alessandro тоже прав - выполнятся должно часто. Когда держали все в одном кубе - еле ворочался, разделили так - пока вроде без нареканий :)


А правильное построение агрегатов, индексирование ? И наконец, если такие объёмы данных, то и ресурсы должны быть соответствующие.

_________________
"Если ты в молодости не испытал трудности, их стоит купить за большие деньги". (с) Даймо


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пн, апр 02 2007, 10:13 
Ассистент
Ассистент
Аватара пользователя

Зарегистрирован:
Ср, июн 21 2006, 13:11
Сообщения: 38
Если уж затеяна такая эпопея с ежемесячными кубами, то создание экспортного источника для очередного куба (и последующей цепочки обновления) не должно сильно усложнить жизнь.

С другой стороны, при изменении логики обновления мега-куба, придется править все цепочки обновления.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пн, апр 02 2007, 10:28 
Младший специалист
Младший специалист

Зарегистрирован:
Ср, апр 12 2006, 13:29
Сообщения: 98
Цитата:
А правильное построение агрегатов, индексирование ? И наконец, если такие объёмы данных, то и ресурсы должны быть соответствующие.

Вообще все это проделано, насколько уж правильно не знаю.
А вообще кто нибудь знает сколько всего записей может безпроблемно переварить куб?
Ну и собственно Сабж, как данные то выгрузить???? :)


Принять этот ответ
Вернуться к началу
 Профиль  
 
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 11 ] 

Часовой пояс: UTC + 3 часа


Кто сейчас на конференции

Сейчас этот форум просматривают: Ahrefs [Bot]


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Перейти:  
cron
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group
Русская поддержка phpBB