Oracle Spatial, Mapviewer, Semantics и ГИС системы

Я уже писал о появлении ODI и GoldenGate 11g. Эти продукты доступны для скачивания уже более месяца. О новых возможностях GoldenGate 11g можно почитать у меня в блоге. Новый ODI 11g хорошо описан о коллег с odiexpert.

Дошло дело и до официального объявления (на фото спикеры, которые будут вести вебкаст):

Event Date:     Thursday, 9 September, 2010
Time:               10 a.m. PT/1p.m. ET  (5:00 МСК) - просто замечательное время.

Для регистрации перейти по ссылке.

На этом веб-касте будет рассказано о:

• Расширенной поддержке различных СУБД и повышении гибкости
• О том, что делает решение по интеграции данных более полным и производительным
• Как Oracle интегрирует ODI и GoldenGate с другими продуктами

P.S. Кто таки не проснется - обязательно выложу здесь ссылку на запись. Так что подписывайтесь по RSS (или через почту) - форма для подписки в блоге в правом столбце.

26 августа в офисе Oracle прошел семинар по технологиям интеграции данных. Спасибо всем, кто присутствовал и задавал интересные вопросы.

Материалы семинара можно скачать у меня с сайта. 

Если нужна дополнительная информация по GoldenGate - смотрите соответствующих разделах в моем блоге и сайте Oracle. Если вопросы останутся, то можно связывать со мной и задавать вопросы. Всегда буду рад ответить.

26 августа 2010г. в 10.00 пройдет бесплатный семинар «Инструменты Oracle для интеграции данных (Oracle Data Integrator, OWB и Oracle GoldenGate) / Подготовка партнеров к специализации».

Вести семинар буду я, Александр Рындин, и Родион Константинов.

Целевая аудитория: специалисты по продажам, архитекторы, руководители проектов по построению хранилищ, администраторы баз данных.

Задачи:

Дать партнерам знания в объеме, достаточном для начала работы с платформой Oracle для интеграции данных.

Краткая программа:

1. Будут показаны типичные области применения.
2. Рассказано о примерах внедрения.
3. Будут описаны новые возможности. Roadmap.
4. Будет много демонстраций.
5. После обеда - глубокое погружение!

Ссылка для регистрации и дополнительная информация...

Обзор

Задача довольно тривиальная - полученный текстовый файл нужно загрузить в базу данных. Давайте посмотрим, как это сделать с помощью ODI.

Прежде чем приступать к созданию проекта - я кратко остановлюсь на основных концепциях:

На следующем рисунке представлены компоненты, позволяющие сделать решения на ODI эффективными и универсальными:

Если посмотреть на этот рисунок, то можно увидеть область, создаваемую в Topology и область создаваемую в Designer. При этом все физические детали инкапсулируются именно в рамках Topology и в Designer не видным.

Что это значит? Это значит, что разработчик ETL-процессов полностью абстрагирован от реальных физических серверов и баз данных. Он мыслит в терминах Logical View, а именно в терминах логической схемы (Logical Schemas).

Непосредственная трансляция терминов в физические ресурсы осуществляется в рамках конкретного контекста (Context).

Для каждого контекста создается набор физических ресурсов, объединяемых термином физические схемы (Physical Schemas). В предельной ситуации у каждого объекта физической схемы есть "представитель" в логической схеме. Но это не всегда так. Например, в компании могут быть филиалы разных типов. В одних филиалах база данных существует, а в других ее может не быть.

Читать полностью »

Дистрибутив ODI 11g состоит из 3х дисков:

1. Oracle Data Integrator 11g
2. Oracle Data Integrator Companion 11g
3. Oracle Data Profiling and Oracle Data Quality for Oracle Data Integrator 11g

На первом диске Oracle Data Integrator 11g есть непосредственно дистрибутив среды разработки ETL-процессов, агенты, ну и вообще все без чего не обойтись.

На втором диске Oracle Data Integrator Companion 11g содержатся ODI Standalone Agent, Demo-пример, ODI SDK компоненты, ODI Studio (для ручной инсталляции на пользовательский компьютер), а также набор knowledge-модулей. С этого диска мне пока что нужно будет только Demo.

На третьем диске компоненты для профилирования и очистки данных. Этим компонентам я посвящу больше внимания в отдельной статье.

Очень удобно то, что один и тот же дистрибутив ODI 11g может быть использован на разных платформах (в имени дистрибутива есть ключевое слово Generic). Это, на самом деле, и понятно - ведь ODI 11g полностью написан на Java.

Читать полностью »

Oracle опубликовал на edelivery.oracle.com новую версию ODI 11g. Версии есть для всех основных платформ - Linux, Windows, Solaris, AIX, HPUX. Чтобы скачать нужно зайти на сайт edelivery.oracle.com и выбрать раздел Oracle Fusion Middleware, а затем Oracle Fusion Middleware 11g Media Pack for ...............

Читать полностью »

При попытке установить ODI и подключиться с помощью Topology Manager  к базе Oracle XE возникает ошибка ORA-12705.

Проблема достаточно стандартная,  о которой я уже писал. Обычно эта проблема решается либо установкой "-Duser.language=en -Duser.country=us" в вызов java-машины, либо следующим вызовом внутри java-кода перед попыткой установить jdbc-соединение:

Locale.setDefault(Locale.ENGLISH);

Второй вариант в нашем случае отметается, а вот первый вполне подходит. Пристально вглядевшись в недра odiparams.bat, замечаем заботливо закомментированную строку:

rem
rem Additional Java Options
rem
rem set ODI_ADDITIONAL_JAVA_OPTIONS="-Duser.language=en -Duser.country=us"

Вот ее и надо раскомментировать. Кроме того, нужно обратить внимание на чудесные кавычки , в которые взята эта строка. Так вот их быть НЕ должно. Т.е. правильный вариант выглядит вот так

rem
rem Additional Java Options
rem
set ODI_ADDITIONAL_JAVA_OPTIONS=-Duser.language=en -Duser.country=us

После этого Topology Manager чудесным образом взлетает. Думаю, взлетят и остальные инструменты.

Oracle занимается вопросами интеграции данных достаточно давно, но долгое время такая интеграция обеспечивалась только в однородной среде, т.е. среде баз данных Oracle. Однако, реальность такова, что в компаниях обычно существуют не только Oracle, но и другие конкурирующие базы данных: MSSQL, DB2 и т.д. Даже если это не так, то и сама компания Oracle имеет не одну базу данных - например, MySQL, Berkley, TimesTen.

Ориентируясь на свою базу данных, Oracle разработал отличный инструмент - Oracle Warehouse Builder. Ключевым элементом использования этого инструмента было формирование PL/SQL процедур, которые осуществляли преобразование. Процедуры управлялись через графический интерфейс. Инструмент был бесплатным. Все бы хорошо, но увлекшись Oracle Warehouse Builder, Streams и гетерогенными сервисами, Oracle проспал рынок выделенных инструментов ETL инструментов. Вот почему в 2007 была приобретена компания Sunopsis, один из лидеров ETL рынка.

Читать полностью »