Oracle Enterprise Metadata Management (OEMM): обзор и инсталляция

Обзор

В последнее время необходимость управления метаданными становится очевидной задачей во все большем количестве крупных компаний. Почти все компоненты современных информационных технологий (CASE средства, ETL, хранилища данных, BI, EAI содержат метаданные. Эти метаданные распределены, часто дублируют друг друга, меняются со временем, зависят от используемой методологии и технологий, в которых они используются.

Особенно остро проблема управления метаданными встает в компаниях, использующих инструменты от разных вендоров. В этом случае отсутствует единое представление движения данных в компании. Что влечет за собой дублирование данных (разные команды не знаю об уже существующих в хранилище данных), сложность определения источника некачественных данных (причиной ошибки в отчете может быть как ошибка в BI, так и в ETL) и, как следствие, общее недоверие бизнес-пользователей к аналитике.

Oracle Enterprise Metadata Management (OMM) обеспечивает следующие возможности по управлению метаданными:

  • Data Governance
  • Аннотирование и комментирование метаданных
  • Сравнение, интеграцию и маппинг метаданных
  • Версионирование и управление конфигурацией
  • Управление жизненным циклом метаданных
  • Lineage и impact analysis

Continue reading ‘Oracle Enterprise Metadata Management (OEMM): обзор и инсталляция’ »

Технологии Oracle от DERELCARO

Недавно наткнулся на интересную подборку видео-роликов длиною по 3 минуты, рассказывающих о технологиях Oracle. Само собой за 3 минуты нельзя рассказать, как настроить GoldenGate или Exadata, но можно понять, почему эта технология лучшая в своем классе.

Полную подборку этих видео можно увидеть на личном канале DERELCARO.

Некоторые из этих роликов имеют непосредственное отношение к тематике моего блога, поэтому приведу их здесь.

Continue reading ‘Технологии Oracle от DERELCARO’ »

Information Research – связь между хранилищем данных и MDM

Наткнулся на интересную статью от Information Research. По их исследованиям:

  • В крупных компаниях Master Data Management (MDM) и хранилища очень часто внедряются совместно – 46%.
  • По прежнему большинство компаний сосредотачивают свое внимание на клиентах и продуктах в MDM (100% и 82% соответственно).
  • Хранилища обычно носят корпоративный характер (72%)
  • Лишь 27% компаний имеют 1 хранилище данных. Наиболее часто в крупных компаниях имеется 3 хранилища данных и 10 источников.
  • Многие компании планируют в скором времени переходить к наполнению хранилищ в реальном времени (сейчас таких лишь 10%, большинство грузят данные ежедневно — 51%).

Думаю, можно сделать выводы о том, что в ближайшее время в России эти тему будут очень актуальны. В ближайшее время я постараюсь написать несколько статей про MDM. Про наполнение хранилищ в реальном времени можно почитать в разделе про GoldenGate.

Полная статья “Information Research – связь между хранилищем данных и MDM” по ссылке.

Настройка GoldenGate extract в режиме passive

При настройке репликации GoldenGate иногда возникает задача, когда процесс Extract должен быть настроен в пассивном режиме, т.е. устанавливать соединение должен приемник данных, а не источник. Зачем это нужно? Вот некоторые причины:

  • Нужно настроить компрессию или шифрование при передаче данных
  • Настройки firewall не позволяют устанавливать TCP/IP соединение в одном направлении, но позволяют это делать в другом

Continue reading ‘Настройка GoldenGate extract в режиме passive’ »

Семинар GoldenGate: инструмент Oracle для интеграции данных

Приглашаем Вас на бесплатный веб-семинар «GoldenGate: инструменты Oracle для интеграции данных», который состоится 8 декабря 2010 года.

Начало семинара: 10:30 (по московскому времени)
Продолжительность: 90 минут

Цель семинара: рассказать о возможностях, предоставляемых GoldenGate, описать области его применения, интеграцию с другими продуктами Oracle.

Регистрация и более подробная информация по ссылке.

UPDATE1:

— Если бесконечно запрашивает подтверждение сертификата – нужно в свойствах браузера во вкладке «Дополнительно(Advanced)»
  убрать 2 галочки с "Проверять аннулирование сертификатов" и "Проверять, не отозван ли сертификат сервером" (Check certificate revocation….)».

P.S.

  • За дополнительной информацией по семинару, просьба обращаться в Представительство корпорации Oracle к Елизавете Матвеевой по тел. +7 (495) 795 2276 или по электронной почте:elizaveta.x.matveeva@oracle.com
  • По вопросам регистрации, просьба обращаться в Представительство корпорации Oracle к Валерии Хоменковой по тел. +7 (495) 641 1569 или по электронной почте: valeria.khomenkova@oracle.com

Итоги семинара по GoldenGate 26 августа 2010г.

26 августа в офисе Oracle прошел семинар по технологиям интеграции данных. Спасибо всем, кто присутствовал и задавал интересные вопросы.

Материалы семинара можно скачать у меня с сайта

Если нужна дополнительная информация по GoldenGate — смотрите соответствующих разделах в моем блоге и сайте Oracle. Если вопросы останутся, то можно связывать со мной и задавать вопросы. Всегда буду рад ответить.

3 Ways to Transform your Enterprise with Data Integration

image

У Вас все еще возникают проблемы с получением оперативных, полных и качественных данные для принятия решений? Если это так, это прямая трансляция расскажет, как можно использовать инновационные технологии интеграции данных для ликвидации пакетных окон, снижения расходов на ИТ и улучшение качества бизнес-информацию. Кроме того, вы услышите, как DIRECTV использовал свои инвестиции в хранилище данных для получения конкурентных преимуществ.

Внимание! Спешите! Веб-семинар пройдет 9-го марта 2010 года в 21:00 по Москве (10 a.m. PT)

http://www.oracle.com/webapps/events/EventsDetail.jsp?p_eventId=108364&src=6878223&src=6878223&Act=35

Ссылка на предыдущий webcast по этой теме.

Проблемы использования Oracle Data Integrator 10g, 11g и Oracle Database XE

UPDATE (Денис Фомичев):  В ODI 11g проблема решается по-другому. Правка odiparams отражается только на работе Stanalone Agent. Если ошибка возникает при попытке конекта из ODI Studio, необходимо в файл %ODI_Home%\oracledi\client\odi\bin\odi.conf добавить
AddVMOption -Duser.language=en
AddVMOption -Duser.region=us

При попытке установить ODI и подключиться с помощью Topology Manager  к базе Oracle XE возникает ошибка ORA-12705.

Проблема достаточно стандартная,  о которой я уже писал. Обычно эта проблема решается либо установкой «-Duser.language=en -Duser.country=us» в вызов java-машины, либо следующим вызовом внутри java-кода перед попыткой установить jdbc-соединение:

Второй вариант в нашем случае отметается, а вот первый вполне подходит. Пристально вглядевшись в недра odiparams.bat, замечаем заботливо закомментированную строку:

Вот ее и надо раскомментировать. Кроме того, нужно обратить внимание на чудесные кавычки , в которые взята эта строка. Так вот их быть НЕ должно. Т.е. правильный вариант выглядит вот так

После этого Topology Manager чудесным образом взлетает. Думаю, взлетят и остальные инструменты.

Введение в Oracle Data Integrator

Oracle занимается вопросами интеграции данных достаточно давно, но долгое время такая интеграция обеспечивалась только в однородной среде, т.е. среде баз данных Oracle. Однако, реальность такова, что в компаниях обычно существуют не только Oracle, но и другие конкурирующие базы данных: MSSQL, DB2 и т.д. Даже если это не так, то и сама компания Oracle имеет не одну базу данных — например, MySQL, Berkley, TimesTen.

Ориентируясь на свою базу данных, Oracle разработал отличный инструмент — Oracle Warehouse Builder. Ключевым элементом использования этого инструмента было формирование PL/SQL процедур, которые осуществляли преобразование. Процедуры управлялись через графический интерфейс. Инструмент был бесплатным. Все бы хорошо, но увлекшись Oracle Warehouse Builder, Streams и гетерогенными сервисами, Oracle проспал рынок выделенных инструментов ETL инструментов. Вот почему в 2007 была приобретена компания Sunopsis, один из лидеров ETL рынка.

Continue reading ‘Введение в Oracle Data Integrator’ »

Материалы с семинара по GoldenGate

Как и обещал — выкладываю материалы по GoldenGate. Была одна презентация, которая исключительно партнерская, поэтому ее я вышлю по почте. Если нужна — обращайтесь.

  1. Steven Roy. Data Integration Keynote: Innovations for the Real-time Enterprise.
  2. Karsten Stohr. Real-Time Business Intelligence using Oracle GoldenGate
  3. Karsten Stohr. Using Oracle GoldenGate’s Data Replication for High Availability
  4. Родион Константинов. ETL c Oracle Data Integrator Enterprise Edition