Operações Comuns em Banco de Dados
ETL
Extracte: Extrair
Transform: Alteração
Load: Incluir
Caracteristica DW Data Warehouses
Não volátil
Dados não mudam com facilidade.
Usuario faz consulta e emite relatório para tomada de decisão
Integrado
Agrupamento de dados iguais. Limpeza dos dados.
Ex: CEF =Caixa= Caixa econômica.
ENTERPRISE DATA
WAREHOUSE
EDW
Grande Data warehouse envolvendo diversas disciplinas. Grande e abrangente
OPERATIONAL DATA STORE
ODS
Intermediário entre EDW e data Mart.
Fonte de dados para EDW
DATA MART
DW
Data warehouse especializado
- Mais rápido
- Economico
- Customizado para a necessidade
Data warehouse de Ralph Kimball
Bottom-up
- Dimensional Data Warehouse.
- Váriso Data Mart que se integram em um EDW
Data warehouse de Inmon
Top-down
- Chamado de EDW
- De um EDW para vários Data mart
Algoritimos de Machine Learnig Aprendizado Supervisionado
Algoritimos de Machine Learnig Aprendizado Não Supervisionado
Agrupamento ou associação
K-Means
Não Supervisionado
Divide em K clusters, k fornecido pelo usuário.
A função minimiza a soma dos quadrados das distâncias ao centroide de cada cluster.
Aglomeração
Não supervisionbado: para agrupamento
Classificação hierarquica de proximidadede
Ex.: Agnes(Aglomerando) e Diana (Dividindo)
DBSCAN
Não supervisionado
Baseado em densidade
Apriori
Não Supervisionado
Para buscar regras de associação
Suporte e confiança
Suorte: Medida de frequancia que indica a proporção de transações.
Confiança: Proporção que contenha o antecedente e consequante em comparaçao aqueles que contem apenas o antecedente.
Linguagem SQL:
DCL
Data Control Language:
- Grant
- Revoke
- Deny
Linguagem SQL:
TCL
Transition Control Language
- Commit
- Rollback
- Save Point
Linguagem SQL:
DDL
Data Definition Language:
- Create
- Alter
- Drop
- Truncate
Linguagem SQL:
DML
Data Manipulation Language
- Insert
- Delete
- Update
Linguagem SQL:
DQL
Data Query Language
- Select
Comando SQL para filtrar atributos e linhas da tabela
πColuna1,Coluna2 (σValor > 2018 (NomeTabela))
π: Projeção
σ: Seleção
SQL
Operação de produto cartesiano
Combinação entre duas tabelas
SQL
Operação de União
Une os elementos eliminando as duplicidades