The Kondado data source allows you to access your objects and executions (quantities and dates) of your Kondado models and pipelines – all this for free: the records you replicate with this connector are not deducted from your plan limit.
It is very useful so that you can follow directly in your database the amount of integrated records, helping you to control the consumption of your plan and also to make the data integrated and modeled by Kondado interact with the rest of your data ecosystem: for example, if you use our integrations to send to a staging database (homologation) before sending to a production database, you can consult the log tables to verify when an integration or model was executed and already trigger its internal process.
Adding the data source
Requirements
- The generated token will inherit the same permissions as the user. In this way, it is necessary that the user who will generate the token has access to the accounts and workspaces that want to obtain the logs
Instructions
1) To add the Kondado data source you will need to generate a Kondado token first, see how to do that here. Remember to keep your access token and key
2) Now just name your data source, copy and paste the key and token obtained earlier and click SAVE!
Pipelines
Summary
Relationship Chart
Pipeline Logs
Field |
Type |
|
id
|
float
|
[pt] ID do registro de log
|
pipeline_id
|
float
|
[pt] ID da integração. Você pode obter o id de uma integração pela sua url ao acessá-la na plataforma da Kondado. Na barra de navegação, o endereço estará no formato app.kondado.com.br/pipelines/[id_da_sua_integracao]
|
pipeline_name
|
text
|
[pt] Nome da integração
|
client_id
|
float
|
[pt] ID da conta ou workspace da Kondado à qual a integração pertence
|
row_count
|
float
|
[pt] Número de registros inseridos pela execução
|
has_deltas
|
boolean
|
[pt] Se a integração gravou registros na tabela de deltas
|
execution_time_seconds
|
float
|
[pt] Tempo em segundos que a integração levou para executar, descontados os tempos de operações internas da kondado (por exemplo, abertura de conexões)
|
updatedat
|
timestamp
|
[pt] Data de atualização do log (UTC)
|
createdat
|
timestamp
|
[pt] Data de criação do log (UTC). O log é criado ao fim da exeução da integração, desta forma você pode utilizar este campo para obter uma visão semelhante ao gráfico de contagem de registros exibido na plataforma da Kondado
|
initial_savepoint
|
text
|
[pt] Caso seja uma integração incremental, este campo guarda a partir de setembro de 2020 o valor inicial do savepoint
|
new_savepoint
|
text
|
[pt] Caso seja uma integração incremental, este campo guarda a partir de setembro de 2020 o valor final do savepoint
|
external_ip
|
text
|
[pt] Este campo guarda o IP externo do servidor que foi utilizado para executar a integração.
|
is_billable
|
boolean
|
[pt] Indica se o número de registros integrados descontou do seu plano (TRUE) ou se foram linhas gratuitas (FALSE)
|
Model Logs
Field |
Type |
|
id
|
float
|
[pt] ID do registro de log
|
model_id
|
float
|
[pt] ID do modelo. Você pode obter o id de um modelo pela sua url ao acessá-lo na plataforma da Kondado. Na barra de navegação, o endereço estará no formato app.kondado.com.br/models/[id_do_seu_modelo]
|
client_id
|
float
|
[pt] ID da conta ou workspace da Kondado à qual a integração pertence
|
row_count
|
float
|
[pt] Número de registros na tabela final gerada pelo modelo
|
execution_time_seconds
|
float
|
[pt] Tempo em segundos que o modelo levou para executar, descontados os tempos de operações internas da kondado (por exemplo, abertura de conexões)
|
updatedat
|
timestamp
|
[pt] Data de atualização do log (UTC)
|
createdat
|
timestamp
|
[pt] Data de criação do log (UTC). O log é criado ao fim da execução do modelo
|
model_name
|
text
|
[pt] Nome do modelo no momento de geração do log
|