Business Intelligence et techniques avec Michel Preti -

Comment utiliser le resetSequence

Thu, 12 Jun 2014 07:34:00 GMT

Si par exemple nous avons des ID qui doivent se remettrent occasionnellement à 0 dans un job, nous pouvons utiliser le resetSequence plutôt qu'un compteur.

Problème :

1) Imaginons un tMap avec une colonne incluant une séquence : Numeric.sequence("s1",1,1)/2

2) Cette séquence ne sera jamais remise à zéro à l'intérieur du job, même si le tMap est appelé plusieurs fois (s'il fait partie d'une boucle par exemple).

Solution : Placer simplement un tJava AVANT (au début de la boucle par exemple).

Placer par exemple le code suivant dedans :

Numeric.resetSequence("s1",1);

Procédure pour lancer les stats sur un schéma ou une table

Wed, 30 Apr 2014 14:03:00 GMT

Voici une procédure pour lancer les stats sur un schéma ou une table (avec ou sans partition).

NB:

Si la variable pTable est null, lancement des stats sur le schéma seulement.

Si la variable pTable n'est pas null et pPartition est null, lancement des stats sur la table complète.

Si la variable pTable n'est pas null et pPartition n'est pas null, lancement des stats sur la partition de la table.

CREATE OR REPLACE PROCEDURE test.prc_lancer_stats(pSchema VARCHAR2, pTable VARCHAR2 DEFAULT NULL, pPartition VARCHAR2 DEFAULT NULL) AS
/*---------------------------------------------------------------------------
NOM DE PROCEDURE :prc_lancer_stats
DESCRIPTION : Procédure qui permet de lancer les stats sur un schéma, une table ou une partition.
PARAMETRES : pSchema : Nom du schéma,

: pTable     : Nom de la table (OPTIONEL)
: pPartition : Nom de la partition (OPTIONEL)
CREATION         : 2014-02-20 : Michel Preti
MODIFICATIONS    : --
----------------------------------------------------------------------------*/
BEGIN
IF pTable IS NULL THEN
-- Enlever un lock possible sur les statistiques du schéma
SYS.DBMS_STATS.UNLOCK_SCHEMA_STATS(pSchema);
-- Effacer les statistiques du schéma
SYS.DBMS_STATS.DELETE_SCHEMA_STATS(pSchema);
-- Lancer les statistiques du schéma
SYS.DBMS_STATS.GATHER_SCHEMA_STATS(OWNNAME => pSchema, CASCADE => DBMS_STATS.AUTO_CASCADE, ESTIMATE_PERCENT => DBMS_STATS.AUTO_SAMPLE_SIZE, DEGREE => 4);
ELSE
-- Enlever un lock possible sur les statistiques de la table
SYS.DBMS_STATS.UNLOCK_TABLE_STATS(pSchema, pTable);
-- Effacer les statistiques de la table
SYS.DBMS_STATS.DELETE_TABLE_STATS(pSchema, pTable);
-- Lancer les statistiques de la table
SYS.DBMS_STATS.GATHER_TABLE_STATS(OWNNAME => pSchema, TABNAME => pTable, PARTNAME => pPartition, CASCADE => DBMS_STATS.AUTO_CASCADE, ESTIMATE_PERCENT => DBMS_STATS.AUTO_SAMPLE_SIZE, DEGREE => 4);
END IF;
END PRC_LANCERSTATS;

Lancer les stats Oracle depuis Talend

Wed, 30 Apr 2014 13:07:00 GMT

Appel de statistiques sur un schéma Oracle depuis Talend :

Par exemple, vous pourriez placer une variable de contexte: Oracle_Schema (valeur du schéma ex: "TEST")

Puis, dans un tORacleRow, placer le code suivant :

"BEGIN
SYS.DBMS_STATS.UNLOCK_SCHEMA_STATS('" + context.Oracle_Schema + "');
SYS.DBMS_STATS.DELETE_SCHEMA_STATS('" + context.Oracle_Schema + "');
SYS.DBMS_STATS.GATHER_SCHEMA_STATS(OWNNAME => '" + context.Oracle_Schema + "', CASCADE => DBMS_STATS.AUTO_CASCADE, ESTIMATE_PERCENT => DBMS_STATS.AUTO_SAMPLE_SIZE, DEGREE => 4);
END; "

Lancement des stats sur un schéma par procédure

Wed, 30 Apr 2014 13:00:00 GMT

Voici la procédure :

CREATE OR REPLACE PROCEDURE TEST.LANCER_STATS_SCHEMA(p_schema VARCHAR2)
IS
BEGIN
    SYS.DBMS_STATS.UNLOCK_SCHEMA_STATS(p_schema);
    SYS.DBMS_STATS.DELETE_SCHEMA_STATS(p_schema);
    SYS.DBMS_STATS.GATHER_SCHEMA_STATS(OWNNAME => p_schema, CASCADE => DBMS_STATS.AUTO_CASCADE, ESTIMATE_PERCENT => DBMS_STATS.AUTO_SAMPLE_SIZE, DEGREE => 4);
END;

Pour tester :

BEGIN
TEST.LANCER_STATS_SCHEMA('VENTE');
END;

Génération de chaînes et de nombres aléatoires

Tue, 29 Apr 2014 08:55:00 GMT

1 - Génération d'un nombre réel aléatoire pour un intervalle
SELECT dbms_random.value (100,200)
FROM dual

2 - Génération d'un entier aléatoire pour un intervalle
SELECT trunc(dbms_random.value(0,100))
FROM dual
CONNECT BY level <= 10

3 - Génération d'une chaîne de caractères
Format de chaîne possible :
'u' ou 'U' chaîne en majuscules.
'l' ou 'L' chaîne en minuscules.
'a' ou 'A' chaîne en majuscules et minuscules.
'x' ou 'X' chaîne en alpha-numérique en majuscules.
'p' ou 'P' chaîne de tout type de caractères.
...avec la longueur de la chaîne à générer.

Exemple de 5 chaînes de 20 caractères; pour chaque format
SELECT dbms_random.string('U', 20) FROM dual
UNION ALL
SELECT dbms_random.string('l', 20) FROM dual
UNION ALL
SELECT dbms_random.string('A', 20) FROM dual
UNION ALL
SELECT dbms_random.string('X', 20) FROM dual
UNION ALL
SELECT dbms_random.string('P', 20) FROM dual

4 - Génération d'une date aléatoire
SELECT TO_DATE('01/01/14', 'DD/MM/RR') + TRUNC(dbms_random.value(0,365)) AS rnd
FROM dual

5 - Génération de données de tests aléatoires, pour insérer dans une table
Exemple ici avec une table fictive TEST.EMPLOYEE :

5a--Création de la table
CREATE TABLE TEST.EMPLOYEE (
idemployee NUMBER(15),
txnom       VARCHAR2(100),
txprenom    VARCHAR2(100),
dtentree    DATE,
mtsalaire   NUMBER(12,2));

5b--Création d'une séquence TEST.SEQ_EMPLOYEE
CREATE SEQUENCE TEST.SEQ_EMPLOYEE INCREMENT BY 1 MAXVALUE 999999999999999 MINVALUE 1 NOCACHE;

5c--Grant (si nécessaire) :
GRANT SELECT, INSERT ON TEST.EMPLOYEE TO PUBLIC;
GRANT SELECT ON TEST.SEQ_EMPLOYEE TO PUBLIC;

5d--Insertions de 100 ligne de données aléatoires :
INSERT INTO TEST.EMPLOYEE (idemployee, txnom, txprenom, dtentree, mtsalaire)
SELECT
TEST.SEQ_EMPLOYEE.NEXTVAL,
dbms_random.string('A', trunc(dbms_random.value(5, 30))),
dbms_random.string('A', trunc(dbms_random.value(5, 30))),
to_date('01/01/1980', 'DD/MM/YY') + trunc(dbms_random.value(0, (20*365))),
dbms_random.value(1500, 6500)
FROM dual
CONNECT BY LEVEL < 100;

5e-- Contrôller ensuite les données :
SELECT * FROM TEST.EMPLOYEE;