SQL*Loader презентация

– функций перед загрузкой
Поддержка большого количества типов данных
Загрузка данных в несколько таблиц одновременно
Объединение нескольких физических записей в одну логическую
Загрузка одной физической записи в несколько логических
Построение последовательных значений
Преобразование национальных кодировок при загрузке
Загрузка двоичных данных
Некоторые другие возможности

информация (в управляющем файле), описывающая входные данные и формат таблиц
Выходные данные:
таблицы Oracle,
файл протокола,
файл отсеянных записей
файл отвергнутых записей.
От вывода некоторых файлов можно отказаться.

иметь фиксированный или переменный формат.
Двоичные данные должны загружаться из файла фиксированного формата.
Поля в файлах переменного формата могут отделяться одно от другого символами-разделителями, быть окаймлены символами-ограничителями или разделяются и тем, и другим.

SQL*Loader, как обрабатывать данные.

загрузки:
Имена входных файлов данных, управляющего файла, файлов отсеянных и отвергнутых записей
Входные данные и спецификации соответствующих таблиц
Ошибки SQL*Loader
Результаты SQL*Loader
Итоговую статистику

записи проверяются на соответствие:
требованиям формата
критериям отбора записей.
Отбракованные записи заносятся в файлы отвергнутых записей и отсеянных записей
Эти файлы можно отредактировать и загрузить снова.

данных
Логические записи - соответствуют строкам в таблицах базы данных
Физическая запись может взаимно однозначно соответствовать логической записи
Позволяется:
связывать несколько физических записей в одну логическую с помощью предложений CONCATENATE или CONTINUEIF
разделять одну физическую запись на несколько логических.

небольших массивов данных.
Другие пользователи и процессы Oracle могут обращаться к таблице одновременно с SQL*Loader.
Индексы обновляются по мере вставки строк
При загрузке активизированы все ограничения целостности и триггеры INSERT.
Можно применять функции SQL к входным данным.
Данные могут быть загружены в кластерную таблицу.
Данные могут быть загружены с помощью SQL*Net.

в БД.
Преимущества прямой загрузки:
Быстрая загрузка и индексирование больших объемов данных.
Высокая производительность, за счет загрузки предварительно отсортированных данных.
Возможность параллельной загрузки.
Возможность выполнение прямой загрузки с опцией UNRECOVERABLE (без восстановления журнала Oracle).

прямой загрузки в начале загрузки и должны быть перестроены автоматически или вручную после завершения загрузки.
Не работают триггеры ограничения целостности, кроме NOT NULL. Все нарушения помещаются в таблицу исключений.
Нельзя применять функции SQL к входным данным.
Данные не могут быть загружены в кластерную таблицу.
Ограничено использование SQL*Net.
Не работает опция DEFAULT для столбца.
Нельзя использовать синонимы, ссылающиеся на на другие синонимы или представления.

параллельном режиме, которая обеспечивает почти линейный рост производительности SQL*Loader в мультипроцессорных системах.

семи разделов:
Предложение OPTIONS
Предложение UNRECOVERABLE/RECOVERABLE
Предложение LOAD DATA
Предложение INFILE
Метод загрузки таблицы
Предложение CONCATENATION
Предложение INTO TABLE
Предложение OPTIONS для таблицы

параметры работы утилиты в управляющем файле, а не в командной строке.
Полезно, если командная строка становится слишком длинной, неудобной в работе.
Значения параметров, указанные в предложении OPTIONS, могут быть изменены в командной строке.

= n
SILENT = {HEADER|FEEDBACK ERROR|
DISCARDS|ALL}
DIRECT = {TRUE|FALSE}
PARALLEL = {TRUE|FALSE}

[DATA] может сопровождаться уточняющими фразами и предложениями.
CHARACTERSET имя_символьного_набора требуется, если входные файлы данных кодированы внешними символьными наборами:

LOAD DATA CHARACTERSET RU8PC866
LOAD DATA CHARACTERSET CL8MSWIN1251

DISCARDFILE | DISCARDDN), имя файла отсеянных записей,
DISCARDS | DISCARDMAX макс. число отбракованных записей. Обработка файла данных прекращается, когда достигается это ограничение.

сеанса загрузки; кроме того, в предложении INTO TABLE можно задать метод для отдельной таблицы.

число - для постоянного количества физич. записей
CONTINUEIF - для переменного количества физических записей

CONTINUEIF THIS (1:2) = ‘_$’
CONTINUEIF NEXT (1:2) = ‘_$’
CONTINUEIF LAST != ‘#’

Если байты 1-2 текущей записи совпадают с шаблоном, подсоединить следующую запись

Если байты 1-2 следующей записи совпадают с шаблоном, подсоединить следующую запись

Если последний не пробельный символ текущей записи не ‘#’, объединить ее со следующей

данные
Метод загрузки для таблицы
Предложение OPTIONS для таблицы
Предложение WHEN
Предложение FIELDS
Предложение TRAILING NULLCOLS
Индексные опции
Условия, связанные с полями
Отношение между полями файла данных и столбцами базы данных

это выражение с полем логической записи, которое может принимать значение “истина” или “ложь”. В таких выражениях используются ключевые слова NULLIF и DEFALILTIF, а также фраза WHEN.
Если выражение истинно, то:
NULLIF присваивает значению столбца “NULL”,.
DEFAULTIF - заносит в столбец нуль или пробел.
BLANKS - позволяет проверять, содержат ли поля любой длины только пробелы.

генерироваться с помощью функций SQL*Loader:
CONSTANT,
RECNUM,
SYSDATE
SEQUENCE

данного столбца и должна быть заключена в двойные кавычки.
К именам полей в строке SQL можно обращаться, предваряя их двоеточием. Примеры использования функций SQL:

my_field position (1: 18) integer external
“TRANSLATE (RTRIM (:my_field) , ‘N/A’ , ‘ 0 ‘ ) “

my_string CHAR terminated by “, “
“SUBSTR (: my_string ,1, 10)”

my_number position (1: 9) DECIMAL EXTERNAL(8) “:field/1000”

TABLE, что позволяет решать такие задачи:
Извлечение нескольких логических записей из одной физической записи.
Работа с различными форматами записи.
Загрузка данных в различные таблицы.

операционной системы.
Вызвав SQL*Loader без параметров, вы увидите список параметров командной строки и их значений по умолчанию:

файле управления или PARFILE, могут быть переопределены в командной строке.