:Author: Rafael Soto :Author: Robert Anderson :Version: |release| :License: Create Commons with attribution **************************************************** Trabalhando

com a base de dados espacial (Postgis) **************************************************** .. contents:: Neste capitulo do roteiro, iremos abordar questes relacionadas ao banco de dados postgis. O PostGIS estende o PostgreSQL, seguindo as especificacoes da SFSSQL. O P ostgreSQL e um sistema de gerencia de banco de dados objeto-relacional, gratuito e de codigo fonte aberto. Foi desenvolvido a partir do projeto Postgres, iniciado em 1986, na Universidade da California em Berkeley. ############################################### Banco de Dados Espacial em 5 minutos - SFS/WKT ############################################### Postgis um banco de dados espacial. Oracle Spatial e SQL Server 2008 tambm so banc o de dados espacial. Mas o que isso quer nos dizer? Qual a diferena? um novo banc o de dados que veio para revolucionar o mundo? :) A resposta mais direta seria... **Banco de Dados Espacial capaz de armazenar e manipular dados espaciais da mesm a forma que manipula os demais tipos de dados na base de dados** Ao adicionar em um SGBD o seu cartucho espacial, estamos adicionando 3 itens ao mesmo: #. Tipo de dados espacial; #. Indexao espacial para otimizar a manipulao de dados espaciais; #. Funes espaciais para manipular os dados espaciais; .. sidebar:: FOSS4G Postgis Tutorial Dica para quem quiser aprofundar os estudos no postgis http://tinyurl.com/25m5om9 Bancos de dados tradicionais possuem string, numeros e datas. Os bancos de dados espaciais incluiram tipos adicionais de dados para armazenar a representao espaci al de uma feio. No postgis este tipo de dado denominado *geometry*. Na sua forma g enrica qualquer representao espacial uma geometria mas se formos descer o nvel podem os encontrar uma taxonomia com outros tipos de dados que derivam de geometria. .. image:: images/sfs.png :scale: 60 Para este curso vamos aprender a trabalhar com 3 tipos bsico de representao de dado s espacial: * Ponto = (X , Y) * Linha = (Ponto 1 , Ponto 2) = ( (X , Y) , (X , Y) ) * Poligono = (Ponto 1 , Ponto 2, Ponto 3 , Ponto 1) = ( (X , Y) , (X , Y ) , (X , Y) , (X , Y) )

.. image:: images/sfs2.png :scale: 60 Primeiros Passos - Criando a Base de Dados ========================================== 1. Vamos iniciar a ferramenta *pgAdmin* que ser utilizada como a nossa ferramenta padro para administrao da base de dados 2. Conectar-se a instncia do *postgres* local .. image:: images/conectar_pgadmin.png :scale: 60 3. Criar uma nova base de dados .. image:: images/criar_banco.png :scale: 60 4. O nome da nossa base ser *geodojo* e o template de criao que vamos usar o *postg is_template*. Atente que o template possui a infra bsica para que possamos utiliz ar o cartucho geo postgis. Sem definir o template no teremos as funes de geo! .. image:: images/criar_banco2.png :scale: 60 A partir deste momento j temos o nosso banco pronto para iniciar os trabalhos.

Primeiros Passos - Criando uma tabela geo ========================================== 1. Vamos criar uma nova tabela na base *geodojo* .. image:: images/new_table.png :scale: 60 2. Definir o nome para a tabela(geometrias) .. image:: images/nome_tabela.png :scale: 60 3. Definir as colunas *id:serial* , *nome:character varying* .. image:: images/colunas_tabela.png :scale: 60 Para este exemplo inicial iremos criar 3 colunas de dados geometricos para a mes ma tabela. Uma para armazenar ponto, outra para armazenar linha e finalmente uma para armazenar um poligono. Note que as boas prticas definem que uma tabela deve possuir apenas uma coluna de dado geogrfico. Por questes de demonstrao e tutoria ir emos utilizar as 3 colunas. 4. Utilizamos a funo *addGeometryColumn* do postgis para criar a nossa coluna geom

etrica. Diferentemente da estrutura de criao de uma coluna de dados convencional, as colunas de dados geomtricos precisam ter: * Regras de validao * Entrada na tabela *geometry columns* 4.1 - Criao da coluna para armazenar ponto:: SELECT AddGeometryColumn ('geometrias','the_geom_point',4326,'PO INT',2); Descrevendo a funo temos:: SELECT AddGeometryColumn (<nome da tabela>,<nome da coluna geo>, <srid>,<tipo de dados geo>,<dimensoes>); .. image:: images/add_column_point.png 4.2 - Criao da coluna para armazenar linha:: SELECT AddGeometryColumn ('geometrias','the_geom_line',4326,'LIN ESTRING',2); 4.3 - Criao da coluna para armazenar poligono:: SELECT AddGeometryColumn ('geometrias','the_geom_poly',4326,'POL YGON',2); Observer ao final destes passos a estrutura final da tabela .. image:: images/estrutura_tabela_geo.png

Primeiros Passos - Inserindo dados na base geo =============================================== Para inserir dados na tabela, vamos precisar executar scripts de *INSERT*. Para apoiar a insero dos dados geo vamos utilizar a funco *ST_GeomFromText*. Esta funo res ponsvel por converter uma representao WKT textual da geometria para o formato binrio o qual o banco de dados necessita para persistir a informao. Para saber um pouco mais sobre WKT acesse o site http://tinyurl.com/24r9zvu 1. Insero de um conjunto de pontos :: INSERT INTO geometrias(nome,the_geom_point) VALUES('Primeiro Ponto', ST_GeomFromText('POINT(3 3)',4326)); INSERT INTO geometrias(nome,the_geom_point) VALUES ('Segundo Ponto', ST_GeomFromText('POINT(1 1)',4326)); INSERT INTO geometrias(nome,the_geom_point) VALUES ('Terceiro Ponto', ST_GeomFromText('POINT(5 5)',4326)); .. image:: images/add_point.png

2. Insero de uma linha :: INSERT INTO geometrias(nome,the_geom_line) VALUES('Primeira Linha', ST_GeomFromText('LINESTRING(1 1, 4 4)', 4326)); 3. Insero de um poligono :: INSERT INTO geometrias(nome,the_geom_poly) VALUES('Primeiro Poligono', ST_GeomFromText('POLYGON((4 1, 1 1, 1 4, 4 4, 4 1),(4 1, 1 1, 1 4, 4 4, 4 1))',4326)); 4. Vamos conferir as geometrias inseridas na tabela:: Select * from geometrias .. image:: images/consulta_geometrias.png 5. Para transformar o dado da coluna geometrica para uma representao WKT utilizamo s a funo *astext*:: Select astext(the_geom_point) from geometrias where id = 1 .. image:: images/astext.png 6. O postgis tambem oferece inumeros formatos de saida como KML e GML:: Select astkml(the_geom_poly) from geometrias where id = 5 Select astgml(the_geom_line) from geometrias where id = 4 *Resultado KML* .. image:: images/askml.png *Resultado GML* .. image:: images/asgml.png

A representao espacial destas 5 geometrias inseridas seria algo parecido com a rep resentao abaixo. .. image:: images/plano.png ############################### Importao de Dados Geograficos ############################### Para a nossa aplicao vamos precisar utilizar uma serie de layers de informao geogrfic as vetoriais oriundas do provedor IBGE. Estas informaes esto disponiveis no formato shapefile e podem ser baixadas a partir do site do IBGE. http://www.ibge.gov.br . Para facilitar o trabalho deste minicurso os arquivos foram baixados e esto dis

poniveis no caminho *~/Desktop/GeoDojoEnv/data*. Vamos importar dados para construir as camadas de: * * * * * * * Paises Vizinhos Municipios Trechos Rodoviarios Picos Pontes Postos Fiscais Aeroportos

SHP2PGSQL - Criando os scripts SQL ================================== 1. Abrir o console do linux no local onde esto os arquivos shapefiles de *municip ioMMA* 2. Executar a ferramenta *SHP2PGSQL* para a gerao do script sql contendo os comand os de insert que ser utilizado para inserir os dados do shape na base de dados *g eodojo* do nosso postgres:: Estrutura: shp2pgsql -s <SRID> dado.shp nome_tabela > nome_arquivo.sql $ shp2pgsql -s 4326 municipsocio.shp municipio > municipio.sql .. sidebar:: Encontrando o SRID Para descobrir qual o srid utilizar a ferramenta http://tinyurl.com/2bcu7hl Executando os scripts SQL ================================== 1. Executar o script *municipio.sql* gerado no passo anterior no banco de dados: : $ sudo su - {senha user} $ su postgres $ psql -U postgres -d geodojo -f municipio.sql 2. Verificando a criao da tabela e importao dos dados no pgAdmin .. image:: images/listagem_municipio.png 3. Para poupar tempo na importao das camadas existe um script que foi criado para a criao de todas as camadas de uma s vez:: $ cd ../mergedShapes/ $ ./import.sh 4. Para questes de performance vamos executar o script index.sh que responsavel p ela criao dos indices espaciais para todas as tabelas $ ./index.sh 5. Verificando a criao de todas as tabelas restantes no pgAdmin

.. image:: images/lista_tabelas.png ################### Operaes Espaciais ################### Criando a tabela de estados ============================ Para obtermos os poligonos dos estados precisamos realizar uma operao espacial. O postgis disponibiliza uma funo *ST_UNION* que capaz de unir um conjunto de poligon os e gerar apenas um nico poligono. Vamos utilizar esta funo para agrupar os poligo nos dos municipios de um estado e obter o mesmo. 1. Executar a instruo sql para criao da tabela de UF:: CREATE TABLE uf ( id serial NOT NULL, nome character varying(254), the_geom geometry, CONSTRAINT uf_pkey PRIMARY KEY (id), CONSTRAINT enforce_dims_the_geom CHECK (st_ndims(the_geom) = 2), CONSTRAINT enforce_geotype_the_geom CHECK (geometrytype(the_geom) = 'M ULTIPOLYGON'::text OR the_geom IS NULL), CONSTRAINT enforce_srid_the_geom CHECK (st_srid(the_geom) = 4326) ) WITH ( OIDS=FALSE ); ALTER TABLE uf OWNER TO postgres; 2. Executar a instruo sql para unio e gerao das geometrias dos estados:: INSERT INTO uf (nome,the_geom) SELECT uf, multi(ST_UNION(the_geom)) from municipio group by uf Note que a operao de unio uma das funes de grande custo computacional logo a mesma po de demorar alguns segundos para ser executada. 3. Ao final teremos 27 registros na tabela de uf que representam todos os estado s do brasil e o distrito federal. .. image:: images/union_municipio.png Criando viso com todas as estradas que passam pelo estado de so paulo ======================================================================= A potencialidade de um banco de dados espacial avaliada numa situao como a descrit a neste tpico: Precisamos realizar um "join" entre o estado de so paulo e as estra das brasileiras sendo que na tabela de estradas e rodovias no temos nenhuma assoc iao(chave estrangeira) com a tabela de UF. Como resolver? Simples!... utilizando a s funes de anlise topolgica que possibilite um "join" espacial. 1. Primeiro vamos criar a consulta que nos retorna os dados que precisamos::

SELECT rodovia.gid, rodovia.sigla, rodovia.the_geom FROM via_rodoviaria rodovia, uf WHERE uf.nome = 'SP' AND ST_INTERSECTS(rodovia.the_geom,uf.the_geom) 2. Agora vamos criar uma view com o resultado da consulta para utilizarmos futur amente no nosso servidor de mapas:: CREATE VIEW rodovias_sp AS SELECT rodovia.gid, rodovia.sigla, rodovia.the_geom FROM via_rodoviaria rodovia, uf WHERE uf.nome = 'SP' AND ST_INTERSECTS(rodovia.the_geom,uf.the_geom) Criando viso dos 10 maiores municipios do brasil em populao ============================================================== 1. Primeiro vamos criar a consulta que nos retorna os 10 maiores municipios por populao:: SELECT municipio.nome, municipio.uf, CAST(municipio.pop00 as numeric) as populacao, municipio.the_geom FROM public.municipio ORDER BY CAST(municipio.pop00 as numeric) DESC LIMIT 10; 2. Agora vamos criar uma view para utilizarmos futuramente:: CREATE VIEW municipio_pop AS SELECT municipio.nome, municipio.uf, CAST(municipio.pop00 as numeric) as populacao, municipio.the_geom FROM public.municipio ORDER BY CAST(municipio.pop00 as numeric) DESC LIMIT 10 Criando viso dos 10 maiores municipios do brasil em rea ============================================================= 1. Para descobrir a rea de um poligono, utilizamos a funco *ST_AREA*. Vamos precis ar usar a funo *ST_TRANSFORM* para obter os valores de rea em metros. Para a funo ST_ TRANSFORM funcionar corretamente vamos precisar inserir a seguinte linha no banc o de dados:: INSERT into spatial_ref_sys (srid, auth_name, auth_srid, proj4text, srte xt) values ( 96687, 'sr-org', 6687, '+proj=poly +lat_0=0 +lon_0=-54 +x_0=5000000 +y_0=10000000 +ellps=GRS80 +towgs84=0,0,0,0,0,0,0 +units=m +no_defs ', ' PROJCS["SIRGAS 2000 / Brazil Polyconic",GEOGCS["SIRGAS 2000",DATUM

["Sistema_de_Referencia_Geocentrico_para_America_del_Sur_2000",SPHEROID[ "GRS 1980",6378137,298.257222101,AUTHORITY["EPSG","7019"]],TOWGS84 [0,0,0,0,0,0,0],AUTHORITY["EPSG","6674"]],PRIMEM["Greenwich",0,AUTHORITY ["EPSG","8901"]],UNIT["degree",0.01745329251994328,AUTHORITY ["EPSG","9122"]],AUTHORITY["EPSG","4674"]],PROJECTION["Polyconic"],PARAM ETER["latitude_of_origin",0],PARAMETER["central_meridian",-54],PARAMETER ["false_easting",5000000],PARAMETER["false_northing",10000000],UNIT["met re",1,AUTHORITY["EPSG","9001"]]]'); 2. Na sequencia vamos criar a consulta:: SELECT municipio.nome, municipio.uf, ST_AREA(ST_TRANSFORM(municipio.the_geom,96687)) as area, municipio.the_geom FROM public.municipio ORDER BY ST_AREA(municipio.the_geom) DESC LIMIT 10; 3. Criar uma view para consultas futuras:: CREATE VIEW municipio_area AS SELECT municipio.nome, municipio.uf, ST_AREA(ST_TRANSFORM(municipio.the_geom,96687)) as area, municipio.the_geom FROM public.municipio ORDER BY ST_AREA(municipio.the_geom) DESC LIMIT 10; Calculando quantos KM de rodovias o estado do Rio de Janeiro possui =================================================================== 1. Primeiro vamos encontrar todas as rodovias que cruzam o estado do rio:: SELECT rodovia.sigla FROM via_rodoviaria rodovia, uf WHERE uf.nome = 'RJ' AND ST_INTERSECTS(rodovia.the_geom,uf.the_geom) 2. Agora vamos calcular o tamanho de cada rodovia em km somente para os trechos que esto dentro do estado do rio:: SELECT sum(ST_LENGTH(ST_TRANSFORM( ST_Intersection(rodovia.the_geom,uf.the_geom),96687)) ) / 1000 as km, rodovia.sigla FROM via_rodoviaria rodovia, uf WHERE uf.nome = 'RJ' AND ST_INTERSECTS(rodovia.the_geom,uf.the_geom)

GROUP BY rodovia.sigla 3. Agora vamos calcular o somatorio total em km:: SELECT sum(ST_LENGTH(ST_TRANSFORM( ST_Intersection(rodovia.the_geom,uf.the_geom),96687)) ) / 1000 as km FROM via_rodoviaria rodovia, uf WHERE uf.nome = 'RJ' AND ST_INTERSECTS(rodovia.the_geom,uf.the_geom) 4. Para finalizar vamos criar uma tabela contendo apenas os trechos das rodovias federais que cruzam o estado do rio. Para cada trecho vamos disponibilizar o va lor em km do seu tamanho, a sua sigla e a geometria resultado:: CREATE TABLE trechos_br_rio AS SELECT sum(ST_LENGTH(ST_TRANSFORM( ST_Intersection(rodovia.the_geom,uf.the_geom),96687)) ) / 1000 as km, rodovia.sigla, ST_Intersection(rodovia.the_geom,uf.the_geom) FROM via_rodoviaria rodovia, uf WHERE uf.nome = 'RJ' AND rodovia.sigla like '%BR%' AND ST_INTERSECTS(rod ovia.the_geom,uf.the_geom) GROUP BY rodovia.sigla, rodovia.the_geom, uf.the_geom Finalizamos os trabalhos desta etapa com o postgis. Na prxima etapa, veremos como acessar bases de dados espaciais na plataforma Java.