Текущее время: Пн, авг 04 2025, 19:26

Часовой пояс: UTC + 3 часа




Начать новую тему Ответить на тему  [ Сообщений: 11 ] 
Автор Сообщение
 Заголовок сообщения: Источник данных экспорта для мультипровайдера?
СообщениеДобавлено: Пт, мар 30 2007, 06:21 
Младший специалист
Младший специалист

Зарегистрирован:
Ср, апр 12 2006, 13:29
Сообщения: 98
Уважаемые коллеги стоит следующий вопрос - существует несколько кубов - объединенных мультипровайдером (данные по кубам делятся по месяцу/году - т.е. каждый месяц создается и подключается новый куб) - необходимо переливать данные из этого объединения в другой куб. Источник данных эскпорта для мультипровайдера не формируется (хотя в контекстном меню данная команда присутствует). Кто нибудь может посоветовать реализацию проблемы (без формирования отчета в Бексе и его заливки) ???


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пт, мар 30 2007, 13:41 
Ассистент
Ассистент
Аватара пользователя

Зарегистрирован:
Ср, июн 21 2006, 13:11
Сообщения: 38
Если не секрет - в чем причина деления данных по кубам, тем более в таком количестве?


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пт, мар 30 2007, 14:11 
Директор
Директор
Аватара пользователя

Зарегистрирован:
Вс, июн 26 2005, 22:41
Сообщения: 1135
Откуда: Москва
Пол: Мужской
+1


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пт, мар 30 2007, 15:13 
Старший специалист
Старший специалист
Аватара пользователя

Зарегистрирован:
Вт, янв 30 2007, 17:10
Сообщения: 488
Осмелюсь предположить, что причина такова: данных очень много и правятся очень активно, причем задним числом, дельты нет. Решение в лоб.
Знакомая картинка просто:)

_________________
Карма - это суперпозиция граблей, на которые мы уже успели наступить, но которые еще не долетели...


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пт, мар 30 2007, 15:31 
Ассистент
Ассистент
Аватара пользователя

Зарегистрирован:
Ср, июн 21 2006, 13:11
Сообщения: 38
Очень часто решения "в лоб" имеют далекоидущие весьма неприятные последствия, что мы в данном случае, по-видимому, и имеем. :(


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пт, мар 30 2007, 15:48 
Директор
Директор
Аватара пользователя

Зарегистрирован:
Вс, июн 26 2005, 22:41
Сообщения: 1135
Откуда: Москва
Пол: Мужской
а что в таком случае мешает слить данные в один куб из двух по отдельности, сначала из одного, потом из другого?


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пт, мар 30 2007, 15:59 
Ассистент
Ассистент
Аватара пользователя

Зарегистрирован:
Ср, июн 21 2006, 13:11
Сообщения: 38
А потом из k-го и из n-го... Если предположение Soulsurfer верно, то это может быть очень ресурсоемко, а выполняться должно часто, например. Но это лишь гипотеза, а автор молчит. Автора в студию!


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пн, апр 02 2007, 06:35 
Младший специалист
Младший специалист

Зарегистрирован:
Ср, апр 12 2006, 13:29
Сообщения: 98
И снова здравствуйте. Да все правы, данных действительно много, в месяц набегает несколько десятков миллионов записей, в связи с этим разделили по нескольким кубам. Alessandro тоже прав - выполнятся должно часто. Когда держали все в одном кубе - еле ворочался, разделили так - пока вроде без нареканий :)


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пн, апр 02 2007, 09:30 
Почетный гуру
Почетный гуру
Аватара пользователя

Зарегистрирован:
Пт, июн 24 2005, 15:18
Сообщения: 1216
Откуда: Diagon Alley
StealthS написал(а):
И снова здравствуйте. Да все правы, данных действительно много, в месяц набегает несколько десятков миллионов записей, в связи с этим разделили по нескольким кубам. Alessandro тоже прав - выполнятся должно часто. Когда держали все в одном кубе - еле ворочался, разделили так - пока вроде без нареканий :)


А правильное построение агрегатов, индексирование ? И наконец, если такие объёмы данных, то и ресурсы должны быть соответствующие.

_________________
"Если ты в молодости не испытал трудности, их стоит купить за большие деньги". (с) Даймо


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пн, апр 02 2007, 10:13 
Ассистент
Ассистент
Аватара пользователя

Зарегистрирован:
Ср, июн 21 2006, 13:11
Сообщения: 38
Если уж затеяна такая эпопея с ежемесячными кубами, то создание экспортного источника для очередного куба (и последующей цепочки обновления) не должно сильно усложнить жизнь.

С другой стороны, при изменении логики обновления мега-куба, придется править все цепочки обновления.


Принять этот ответ
Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: Пн, апр 02 2007, 10:28 
Младший специалист
Младший специалист

Зарегистрирован:
Ср, апр 12 2006, 13:29
Сообщения: 98
Цитата:
А правильное построение агрегатов, индексирование ? И наконец, если такие объёмы данных, то и ресурсы должны быть соответствующие.

Вообще все это проделано, насколько уж правильно не знаю.
А вообще кто нибудь знает сколько всего записей может безпроблемно переварить куб?
Ну и собственно Сабж, как данные то выгрузить???? :)


Принять этот ответ
Вернуться к началу
 Профиль  
 
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 11 ] 

Часовой пояс: UTC + 3 часа


Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Перейти:  
cron
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group
Русская поддержка phpBB