{"id":1016,"date":"2020-06-12T12:50:02","date_gmt":"2020-06-12T15:50:02","guid":{"rendered":"http:\/\/www.kondado.com.br\/blog\/?p=1016"},"modified":"2021-09-21T16:25:13","modified_gmt":"2021-09-21T19:25:13","slug":"como-adicionar-o-conector-do-bigquery-na-kondado","status":"publish","type":"post","link":"https:\/\/kondado.com.br\/blog\/wiki\/2020\/06\/12\/como-adicionar-o-conector-do-bigquery-na-kondado\/","title":{"rendered":"BigQuery (conector)"},"content":{"rendered":"\n<p>O BigQuery \u00e9 uma solu\u00e7\u00e3o de Bigdata criada pelo Google que permite o armazenamento e an\u00e1lise de dados em grande escala. A integra\u00e7\u00e3o de dados do BigQuery para o Data Warehouse criada pela Kondado possibilita que voc\u00ea tenha acesso aos seus dados do BigQuery na sua nuvem anal\u00edtica.<\/p>\n\n\n\n\n\n<p><\/p>\n\n\n\n<h2>Adicionando o conector<\/h2>\n\n\n\n<p>Para automatizar o ETL do BigQuery com a Kondado para o seu banco de dados, siga os passos abaixo:<\/p>\n\n\n\n<p>1) Fa\u00e7a login na\u00a0<a href=\"https:\/\/app.kondado.com.br\/\">plataforma da Kondado<\/a>, v\u00e1 para a p\u00e1gina de adicionar conectores e selecione o conector do Google BigQuery<\/p>\n\n\n\n<p>2) Clique em\u00a0<strong>AUTORIZAR<\/strong><\/p>\n\n\n\n<div class=\"wp-block-image is-style-default\"><figure class=\"aligncenter size-large\"><img loading=\"lazy\" width=\"553\" height=\"469\" src=\"https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/Untitled-drawing-36-1.png\" alt=\"\" class=\"wp-image-3539\" srcset=\"https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/Untitled-drawing-36-1.png 553w, https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/Untitled-drawing-36-1-300x254.png 300w\" sizes=\"(max-width: 553px) 100vw, 553px\" \/><\/figure><\/div>\n\n\n\n<p>3) Selecione a conta que ir\u00e1 utilizar<\/p>\n\n\n\n<div class=\"wp-block-image is-style-default\"><figure class=\"aligncenter size-large\"><img loading=\"lazy\" width=\"411\" height=\"647\" src=\"https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/googleservices_select_account-1-3-1.png\" alt=\"\" class=\"wp-image-3540\" srcset=\"https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/googleservices_select_account-1-3-1.png 411w, https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/googleservices_select_account-1-3-1-191x300.png 191w\" sizes=\"(max-width: 411px) 100vw, 411px\" \/><\/figure><\/div>\n\n\n\n<p>4) Na pr\u00f3xima tela, marque\u00a0<strong>TODAS<\/strong>\u00a0as permiss\u00f5es que s\u00e3o requisitadas e clique em Continue<\/p>\n\n\n\n<div class=\"wp-block-image is-style-default\"><figure class=\"aligncenter size-large\"><img loading=\"lazy\" width=\"411\" height=\"662\" src=\"https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/Untitled-drawing-29-4-1.png\" alt=\"\" class=\"wp-image-3541\" srcset=\"https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/Untitled-drawing-29-4-1.png 411w, https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/Untitled-drawing-29-4-1-186x300.png 186w\" sizes=\"(max-width: 411px) 100vw, 411px\" \/><\/figure><\/div>\n\n\n\n<p>5) Voc\u00ea ser\u00e1 redirecionado para a p\u00e1gina da Kondado com o acesso j\u00e1 autorizado. Siga o restante do passo a passo para encontrar o restante das informa\u00e7\u00f5es necess\u00e1rias<\/p>\n\n\n\n<div class=\"wp-block-image is-style-default\"><figure class=\"aligncenter size-large\"><img loading=\"lazy\" width=\"545\" height=\"564\" src=\"https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/Untitled-drawing-37-1.png\" alt=\"\" class=\"wp-image-3542\" srcset=\"https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/Untitled-drawing-37-1.png 545w, https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/Untitled-drawing-37-1-290x300.png 290w\" sizes=\"(max-width: 545px) 100vw, 545px\" \/><\/figure><\/div>\n\n\n\n<p>6) Acesse o seu console do BigQuery na GCP e copie os IDs do projeto (em vermelho na figura abaixo) e o dataset (em verde)<\/p>\n\n\n\n<div class=\"wp-block-image is-style-default\"><figure class=\"aligncenter size-large\"><img loading=\"lazy\" width=\"521\" height=\"663\" src=\"https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/Kondado-figuras-blog.jpg\" alt=\"\" class=\"wp-image-3543\" srcset=\"https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/Kondado-figuras-blog.jpg 521w, https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/Kondado-figuras-blog-236x300.jpg 236w\" sizes=\"(max-width: 521px) 100vw, 521px\" \/><\/figure><\/div>\n\n\n\n<p>7) Novamente na p\u00e1gina do passo (5), cole os valores de projeto e dataset obtidos no passo (6) e d\u00ea um nome ao seu conector<\/p>\n\n\n\n<div class=\"wp-block-image is-style-default\"><figure class=\"aligncenter size-large\"><img loading=\"lazy\" width=\"545\" height=\"564\" src=\"https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/Untitled-drawing-38-1.png\" alt=\"\" class=\"wp-image-3544\" srcset=\"https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/Untitled-drawing-38-1.png 545w, https:\/\/kondado.com.br\/blog\/wiki\/wp-content\/uploads\/sites\/2\/2021\/09\/Untitled-drawing-38-1-290x300.png 290w\" sizes=\"(max-width: 545px) 100vw, 545px\" \/><\/figure><\/div>\n\n\n\n<p class=\"has-pale-cyan-blue-background-color has-background\"><strong>ATEN\u00c7\u00c3O:<\/strong>\u00a0Certifique-se que o ID do Dataset\u00a0<strong>N\u00c3O<\/strong>\u00a0cont\u00e9m o ID do projeto separado por \u201c:\u201d. Por exemplo,\u00a0<s>\u201cid_projeto:id_dataset<\/s>\u201d est\u00e1 errado. O correto \u00e9 que o ID do projeto e ID do Dataset estejam cada um separadamente em seus respectivos campos<\/p>\n\n\n\n<p>Agora basta salvar o conector e come\u00e7ar a integrar os seus dados do BigQuery no Data Lake ou Data Warehouse.<\/p>\n\n\n\n<p>N\u00e3o se esque\u00e7a de clicar em \u201cTESTAR CONEX\u00c3O\u201d para conferir se est\u00e1 tudo certo!<\/p>\n\n\n\n<h2>Integra\u00e7\u00f5es<\/h2>\n\n\n\n<center>\n\t\t<a style=\"width: 100%; min-width: 100%\" href=\"https:\/\/kdd-public-files.s3.amazonaws.com\/wiki\/erd\/bigquery.svg\" target=\"_blank\" rel=\"noopener\">\n\t\t\t<div style=\"border-top:1px solid gray; border-bottom:1px solid gray; padding-bottom:10px; display: block;margin-left: auto;margin-right: auto;width: 100%; background-color: #efeaee\">\n\t\t\t\t<p style=\"width: 100%; min-width: 100%\">\n\t\t\t\t\t<p style=\"width: 100%; min-width: 100%; font-weight: bold; text-decoration: underline;\">\n\t\t\t\t\t\tGr\u00e1fico de relacionamento entre tabelas\n\t\t\t\t\t<\/p>\n\t\t\t\t\t<p style=\"width: 100%; min-width: 100%\">\n\t\t\t\t\t\t<div style=\"display: block;margin-left: auto;margin-right: auto;width: 50%; background-color: white\">\n\t\t\t\t\t\t\t<img src=\"https:\/\/kdd-public-files.s3.amazonaws.com\/wiki\/erd\/bigquery.svg\" style=\"display: block;margin-left: auto;margin-right: auto;width: 150px;\">\n\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/p>\n\t\t\t\t<\/p>\n\t\t\t<\/div>\n\t\t<\/a>\t\n\t<\/center>\n\n\n\n<h3><strong>Tabelas e Views<\/strong><\/h3>\n\n\n\n<ul><li>Com a nossa integra\u00e7\u00e3o, voc\u00ea poder\u00e1 integrar tabelas e <strong>tamb\u00e9m views<\/strong><\/li><li>Caso a sua tabela possua uma coluna do tipo datetime\/timestamp que marque quando um registro foi alterado\/inserido, sua integra\u00e7\u00e3o poder\u00e1 ser incremental<\/li><li>Ser\u00e1 necess\u00e1rio definir a chave prim\u00e1ria, que pode ser definida por v\u00e1rias colunas e se refere \u00e0 coluna (ou conjunto de colunas) que definem um registro como sendo \u00fanico<\/li><\/ul>\n\n\n\n<p><\/p>\n","protected":false},"excerpt":{"rendered":"<p>Integre os dados do BigQuery ao seu Data Warehouse ou Data Lake utilizando a Kondado<\/p>\n","protected":false},"author":2,"featured_media":1132,"comment_status":"closed","ping_status":"open","sticky":false,"template":"","format":"standard","meta":[],"categories":[229],"tags":[51,128,129,130,40,42,7,6,131],"_links":{"self":[{"href":"https:\/\/kondado.com.br\/blog\/wiki\/wp-json\/wp\/v2\/posts\/1016"}],"collection":[{"href":"https:\/\/kondado.com.br\/blog\/wiki\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/kondado.com.br\/blog\/wiki\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/kondado.com.br\/blog\/wiki\/wp-json\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"https:\/\/kondado.com.br\/blog\/wiki\/wp-json\/wp\/v2\/comments?post=1016"}],"version-history":[{"count":5,"href":"https:\/\/kondado.com.br\/blog\/wiki\/wp-json\/wp\/v2\/posts\/1016\/revisions"}],"predecessor-version":[{"id":3545,"href":"https:\/\/kondado.com.br\/blog\/wiki\/wp-json\/wp\/v2\/posts\/1016\/revisions\/3545"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/kondado.com.br\/blog\/wiki\/wp-json\/wp\/v2\/media\/1132"}],"wp:attachment":[{"href":"https:\/\/kondado.com.br\/blog\/wiki\/wp-json\/wp\/v2\/media?parent=1016"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/kondado.com.br\/blog\/wiki\/wp-json\/wp\/v2\/categories?post=1016"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/kondado.com.br\/blog\/wiki\/wp-json\/wp\/v2\/tags?post=1016"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}