Zipaquirá fica a cerca de 50 Km de Bogotá e a Catedral de Sal é uma verdadeira igreja, construída no interior das minas de sal.

Dentro existe uma via sacra com as 14 estações. Todas feitas com a matéria-prima local (o sal) e carregadas de simbolismo.

Essa é a visão do povoado de Zipaquirá, próximo à entrada da mina.

Na entrada da mina, uma escultura em homenagem aos trabalhadores mineiros.

Esta é a entrada da mina. Vamos descer 180 metros de profundidade na terra.

Essas são passagens das 14 estações da via dolorosa. Não publicamos todas as fotos, porque elas demandam muita explicação e a iluminação é bem reduzida em algumas delas.

Essa é a nave principal da catedral. Estava em andamento uma missa. É um lugar bastante interessante, com bastante energia.

Aqui, uma representação do nascimento de Jesus.

E para fechar o dia, a constatação de que descemos 180 metros.

Aproveitamos a parte da manhã para fotogratar a árvore Divi Divi, símbolo e cartão postal de Aruba. Essa árvore é sempre curvada assim por causa do vento.

E também aproveitei para mudar o visual…

Aruba realmente é um destino que recomendamos para quem busca descanso, sossego, mordomia e belas paisagens.

A empresa se chama Atlantis e está presente em outros países do Caribe.

Tomamos um ônibus e fomos para a principal cidade da ilha: Oranjestad.

Esse é o submarino:

E a escotilha de entrada… pra quem tem medo de lugares assim, a diversão pode se tornar um pesadelo.

Dentro do submarino, é tudo bem pequeno.

Esse é o capitão do submarino.

Embaixo d’água, podemos ver peixes (cada um mais colorido do que o outro), corais, e até navios afundados.

Esta é a vista do deck de comando do submarino.

Ao final, a profundidade máxima que atingimos: 140 pés (quase 43 metros).

E passeamos um pouco por Oranjestad.

São lugares simples, mas são os atrativos arubianos.

Esse é o farol Califórnia. Fica no extremo norte da ilha.

Na sequência, visitamos a capela Alta Vista. Foi criada por um índio durante o início do período colonial. A ilha foi descoberta em 1499. E não foi por Cristóvão Colombo.

Aruba não tem indústria nenhuma, nem agricultura. Vive praticamente do turismo. Tudo é importado. O terreno é bem árido.

Outro ponto de visitação é a Ponte Natural. Uma pequena baía, com uma rocha em formato de ponte. A água é cristalina.

Finalmente, para terminar o “city tour”, fomos a uma praia chamada Baby Beach, para fazer um pouco de snorkeling.

Para fechar o dia, nada como um pouco de “fa niente”…

E umas biritas…

Mas são apenas 31 Km de distância entre o continente, pela costa venezuela, e Aruba. A ilha é um governo autônomo, mas pertence à Holanda. Por conta da proximidade com a Venezuela, perguntamos para um nativo se eles têm alguma relação com o país do Hugo Chavez.

A resposta foi interessante: ele disse que Aruba pertenceu à Venezuela durante toda a história colonial, até que Simón Bolívar, o libertador da América Espanhola, pediu um favor ao reino da Holanda (isso em meados do século 18), e para pagar, “deu” Aruba de presente para a Holanda.

Recentamente, o Hugo Chavez disse que isso foi um equívoco histórico e alegou que Aruba pertencia à Venezuela. A rainha Beatriz, da Holanda, emitiu o seguinte comunicado para Chavez: “se você colocar um dedo na MINHA ilha, a casa vai cair pro seu lado…”. Nunca mais o Chavez comentou nada sobre Aruba.

Essa é a nossa praia, no hotel Divi Aruba.

Vejam só a tranquilidade que tomou conta da gente:

E a ilha é rota de cruzeiros pelo Caribe.

A praia é cinematográfica.

Segue o roteiro da viagem.

Aruba, só para efeito informativo, é um território autônomo Holandês no Caribe. que fica a cerca de 31 Km da costa da Venezuela.

Até mais,
Trajano e Adriana

Imagine nesse contexto o consumidor de cartão de crédito. Quantas vezes trocamos de “plástico” nos últimos anos? Quantos consumidores contactam o call center das administradoras para expressar real descontentamento com os serviços prestados? Em geral, sabe-se que os clientes entram em contato com as centrais de atendimento para pedir desconto na anuidade, sob ameaça de cancelar o cartão. Obviamente essa prática não é boa para nenhum dos lados: o consumidor camufla a sua insatisfação por um tempo com um preço mais baixo, e a empresa perde uma boa chance de entender a causa raiz dessa insatisfação de seus clientes, o que a impede de criar uma oportunidade de melhoria e de fortalecer o relacionamento com seus clientes.

Assim, pode-se pensar na utilização de uma série de ferramentas estatísticas para descobrir essas nuances no comportamento dos consumidores: regressão linear, sazonalidade, correlação, entre outras. Mas tais ferramentas demandam algum nível de conhecimento técnico e são essencialmente quantitativas. Nesse universo de blogs e fóruns, os números podem não expressar o pensamento individual em sua totalidade.

A solução então pode estar na utilização do serviço Google Alertas, disponível em www.google.com.br/alerts/. É um serviço gratuito do Google Labs onde um usuário pode cadastrar um termo qualquer, definir o escopo da pesquisa, a periodicidade e o volume de respostas, e receber os resultados comodamente em seu email. É um serviço fantástico, que permite fazer Data Mining em tempo real na Web, buscando por tudo que se possa imaginar. É uma ferramenta qualitativa!

Nos termos de pesquisa pode-se usar qualquer um dos operadores do Google: OR, NOT, aspas, ~ (til), wildcards, busca em sites específicos etc. Aqui tem-se um link com dicas para pesquisa no Google (http://www.mundodastribos.com/dicas-para-pesquisa-no-google.html).

Outra informação importante: indiferente à periodicidade escolhida, o Google Alertas só irá enviar a mensagem caso apareça alguma ocorrência nova do termo da pesquisa em comparação com o último resultado apresentado. Isso significa que, mesmo escolhendo “diária”, pode ser que não sejam recebidas mensagem todos os dias: depende do quanto o termo da pesquisa tenha atualizações na Web.

No email de resultados, o termo da pesquisa vem junto com o assunto da mensagem. Dessa forma, o usuário pode sofisticar a ferramenta criando regras no serviço de correio eletrônico.

Tomando o exemplo anterior, do consumidor de cartão de crédito: pense na possibilidade de um termo de pesquisa semelhante a: “insatisfeito com o cartão X” (e suas variantes). Pense na possibilidade que este serviço de alerta cria para uma empresa, ao pesquisar por este termo em fóruns, sites de relacionamento, blogs a afins. Pense na oportunidade que a empresa tem em mãos de, em vez de agir de forma reativa, agir proativamente, buscando entrar em contato com o autor da mensagem. Quanto isso pode se reverter em uma relação de confiança, agregando valor ao CRM de uma corporação? Quanto isso irá criar uma imagem de confiança e preocupação com os clientes?

Agora, pense na situação inversa: sem um serviço de alerta, qual é poder de uma mensagem negativa? Quão rápido ela pode ser alastrar e contaminar prospects, que serão perdidos em definitivo? A resposta é simples: o poder é destrutivo. Já diziam os ditados “basta uma maçã podre para estragar toda a cestada” e “um cliente satisfeito falará do seu produto a três pessoas, enquanto um insatisfeito falará mal para 10!”

Pode-se pensar na utilização de termos mais genéricos, como “Cartão X”. Com isso, a empresa irá monitorar tudo que se fala e comenta sobre seu produto. Irá monitorar coisas boas, mídias espontâneas e coisas ruins. Imagine uma discussão aberta em um fórum qualquer, comparando esse produto com o que oferece a concorrência. Veja a oportunidade que a empresa tem de entrar no fórum e apresentar os diferenciais de seu produto, de forma completa… antes que alguém faça o contrário. Nesse momento, o pioneirismo é fator crítico de sucesso!

Conclusão: as ferramentas estão disponíveis na Web, muitas vezes sem custo. O diferencial é fazer as perguntas certas sobre o que se deseja monitorar, colher os resultados e, AGIR!

Até mais,
Trajano

Seja na guerra de preços, seja na inovação, a “informação” (quando baixar ou elevar um preço, monitorar o nível de satisfação dos clientes etc.) é o componente básico que pode contribuir para a tomada de decisão, e por sua vez, para a criação de conhecimento.

Assim, saber para que caminho o concorrente está seguindo, pode ser crucial na elaboração de uma estratégia de defesa ou ataque. E mais importante do que ter a estratégia, é saber o momento certo de executá-la.

Neste artigo, vou demonstrar algumas ferramentas para fazer “web scraping”, ou “raspagem de dados”, uma técnica para recuperar dados de web sites em formato HTML. E porque a Web? Simplesmente porque é o maior banco de dados do mundo, onde pode-se pesquisar por (quase) tudo que se precisa.

Podemos pensar que raspagem de dados é algum tipo de “espionagem”? Claro que não. Apesar da espionagem ser tão antiga quanto a própria civilização, não estou, em hipótese algum, propondo invasões a bancos de dados, usurpar senhas etc. Web scraping é simplesmente um meio de acessar informações públicas, que estão na Web, nos sites dos concorrentes, fornecedores, clientes e de toda a cadeia produtiva do mundo corporativo.

Para ilustrar esse artigo, vamos imaginar uma situação hipotética, onde sou dono de uma livraria e quero monitorar o comportamento de meus concorrentes quanto ao preço de um livro: Business Intelligence no Microsoft Excel, de minha autoria. Meu objetivo é acompanhar as mudanças de preços dos meus competidores e, à medida que algum deles lança uma promoção, eu tenha condições de reagir em velocidade para não perder mercado. Ou, no sentido inverso, quando eu fizer uma promoção, saber o quanto meus competidores me acompanham (com isso poderei saber o quanto sou temido – ou respeitado no mercado em que atuo).

Para se fazer o web scraping, vou utilizar ferramentas open source, fáceis de se utilizar e sem nenhum risco para o computador em que estão instaladas.

1) Vou utilizar nos exemplo o navegador Mozilla Firefox (http://br.mozdev.org/), mais rápido do que Internet Explorer. Se você não o tem, instale-o. Certamente não vai se arrepender.

2) É necessário baixar o FireBug, um complemento do Firefox (https://addons.mozilla.org/pt-br/firefox/addon/firebug/). Trata-se de um conjunto de ferramentas de desenvolvimento, que permite editar, depurar e monitorar CSS, HTML e JavaScript em qualquer página da web. Basta baixar o software e executá-lo. O Firefox se encarrega de tudo. O resultado no final, deve ser o ícone de um “inseto” no canto inferior direito da janela do Firefox.

3) A infra-estrutura básica está pronta. Agora, buscamos pelo conteúdo que se deseja monitorar: o preço do livro. Começaremos pela Livraria Cultura. Dentro do Firefox, faz-se uma busca simples pelo conteúdo.

4) Dentro da página, vamos marcar o objetivo que se deseja “raspar”: o preço. Na sequência, clique com o botão invertido do mouse sobre a seleção e um menu pop-up deve aparecer. Selecione a opção “Inspecionar Elemento”. Esta opção aparecer após a instalação do Firebug.

5) O resultado é que o navegador será dividido em dois painéis, sendo o inferior, o código fonte da página.

6) Para fechar o painél de código fonte do Firebug, basta clicar sobre o ícone
7) Clique sobre o item “cabeçalho” do texto que foi marcado anteriormente, e clique em “copiar XPath”.

XPath, ou XML Path Language, é uma linguagem de programação que permite construir expressões que recorrem e processam um documento XML de modo parecido a uma expressão regular.

Para entender o que foi “copiado” e testar, basta clicar com o botão invertido do mouse sobre qualquer parte da página Web e selecionar “Show in XPather”.

8.)   Uma nova janela é aberta, exibindo o complemento do Firefox XPather.

Clique sobre a caixa de texto XPath e pressione CTRL+V para colar o texto que foi anteriormente copiado.
Clique sobre o botão “Eval” e veja o resultado na caixa destacada em verde.

O XPath é o caminho em formato XML para se chegar ao conteúdo desejado, dentro de uma página HTML. Veja que, no exemplo, cada seção da página HTML é separada por uma barra “/”, e o XPath contém nada menos do que o caminho completo para se chegar à seção (que pode ser um div, uma tabela etc.). Veja só:

/html/body/div/div[2]/div/div/div/div/div[2]/div[2]/div[2]/div[2]/div/div/div/div/div/div/ul/li/strong

9) Agora, temos todos os elementos básicos que desejamos pesquisar:

URL: http://www.submarino.com.br/produto/1/22049688
XPath: /html/body/div/div[2]/div/div/div/div/div[2]/div[2]/div[2]/div[2]/div/div/div/div/div/div/ul/li/strong

10) A partir deste momento, precisamos utilizar um software que efetivamente faz o web scraping. Até agora, só o que fizemos foi “mapear” o terreno para o que deverá ser monitorado.

Para isso, vamos utilizar um software open source chamado Web Harvest (http://web-harvest.sourceforge.net/). Basta fazer o download através do menu lateral. Existe neste site uma boa documentação, com vários exemplos.

Não é um software para instalação. É apenas um arquivo .jar (java).

Para executá-lo, será necessário ter o java runtime environment (JRE) instalado em seu computador (http://www.java.com/pt_BR/download/). Esse sim, será necessário fazer o download e instalar. Mas em geral, na instalação do Firefox o java já é instalado automaticamente.

11) Ao executar o Web Harvest, a tela inicial apresenta alguns exemplos nativos. Eles podem ser úteis para se compreender a estrutura do software, e como fazer web scraping. Basicamente, vamos fazer uma extração bem simples e para isso iniciamos com o ícone “New Configuration File”.

12) O Web Harvest trabalha como se fosse uma “programação”. Para tanto, um pouco de lógica é suficiente, porque toda a documentação está disponível no excelente help da ferramenta. Ao iniciar um projeto, esta é sua aparência:

As tags “config” são orbigatórias, e tudo que fizermos deverá estar contido dentro delas.

13) Vamos então criar uma codifição bem simples, conforme imagem a seguir:

Explicação:

a) File: é uma tag do Web Harvest para criação/manipulação de arquivos.

O parâmetro action pode ser “write” (para criar arquivos novos e substituir, caso já exista) ou “append” (para criar caso não exista e incrementar a cada nova execução).
O parâmetro path contém o caminho onde o arquivo será gravado. A única exigência do software é que seja um caminho válido.

b) XPath expression: contém o caminho XPath coletado no Firefox, com a ajuda do Firebug.

c) html-to-xml: contém a URL em que será feita a pesquisa.

Observe que, a cada tag aberta, existe seu correspondente de fechamento, com uma barra “/”. É idêntico ao comportamento de uma página HTML.

A “programação” do Web Harvest segue os padrões de uma expressão matemática: tudo vai sendo feito de dentro para fora. Isso significa que primeiro se executa a leitura da URL principal, com a tag “html-to-xml”; depois se pesquisa o XPath dentro dessa URL e, finalmente; o resultado, se grava no arquivo de saída, com a tag “file”.

Para executar, basta clicar no ícone “play”. Ao término, uma mensagem é exibida (eu havia gravado o “programa” com o nome de captura_submarino1.xml).

O resultado aparece assim:

Segue o texto do Web Harvest para que você possa dar um “copy/paste”:

<?xml version=”1.0″ encoding=”UTF-8″?>

<config>

<file action=”write” path=”C:\temp\precos\preco_submarino.txt”>

<xpath expression=”/html/body/div/div[2]/div/div/div/div/div[2]/div[2]/div[2]/div[2]/div/div/div/div/div/div/ul/li/strong”>

<html-to-xml outputtype=”pretty”>

<http url=”http://www.submarino.com.br/produto/1/22049688″/>

</html-to-xml>

</xpath>

</file>

</config>

14) Agora, basta fazer o mesmo para outros concorrentes, e criar um “robô” ETL (extração, transformação e carga) ou serviço do Windows, para ler este arquivo texto, tratá-lo e gravar seu conteúdo em um banco de dados.

Pensando na estratégia apresentada no início do texto, quando houver variação de preço, meus sistemas podem gerar um alerta e eu vou reagir com muito mais rapidez.

Com isso, vou poder monitorar o comportamento de meus concorrentes de forma prática e automatizada.

15) Ainda, complementarmente, a ferramenta permite que seja executada em linha de comando.

java -jar webharvest_all_2.jar config=”[path + arquivo XML web harvest]“

Exemplo:

java -jar webharvest_all_2.jar config=” C:\temp\webharvest2b1\captura_submarino1.xml”

Com isso, pode-se executar através do scheduler do Windows, de forma periódica.

16) No Web Harvest é possível trabalhar com variáveis, loops, enfim, com estruturas de programação que, com um pouco de investimento de tempo, pode-se alcançar resultados profissionais.

Espero poder ter contribuído com a necessidade de captura de informações externas às empresas, com o objetivo de competir para ganhar!

Trajano Leme Filho

Esse livro é uma reedição da obra lançada pela primeira vez em 2004, e destina-se aos profissionais que desejam, sobretudo, sair dos modismos da área de tecnologia, fazendo mais com menos, não importando se a área de atuação é informática, marketing, finanças ou vendas. O que realmente conta é a disposição para criar um ambiente de suporte à decisão, que possibilite que a empresa, ou seus clientes, não precisem matar moscas com balas de canhão.

Agora, lançamento da Editora NovaTerra, a obra tem por objetivo ensinar ao leitor a sua maior vantagem da utilização do Excel para este finalidade: o custo. Afinal mais de 90% dos usuários no mundo usam planilhas eletrônicas, que já estão com as licenças pagas. Fazer Business Intelligence no Excel é a receita sem par, onde o baixo custo de aquisição e manutenção de software produz alto desempenho nos negócios.em profundidade, tudo o que precisa saber sobre o tema, seja ele um estudante, um autodidata, um profissional da área ou mesmo um usuário que deseja aprender a montar uma rede segura por conta própria. Seguindo sua marca registrada, o autor utiliza linguagem simples, objetiva e didática.

O livro foi estrategicamente dividido em três partes principais, para atender da melhor forma possível às necessidades de propiciar uma leitura agradável e de facilitar a assimilação dos conceitos de Business Intelligence apresentados.

Primeira parte: O processo de tomada de decisão
Segunda parte: Entendendo os dados e projetando sua integração – construindo tecnicamente o DW
Terceira parte: Fazendo Business Intelligence no Microsoft Excel

Informações Técnicas

• Título: BI – Business Intelligence no Excel

• Autor: Trajano Leme Filho

• Número de Páginas: 440

• Formato: 17,5cm x 23cm

• ISBN: 978-85-61893-08-8

Onde comprar:

• http://www.editoranovaterra.com.br/produtos_descricao.asp?lang=pt_BR&codigo_produto=135

• http://www.livrariacultura.com.br/scripts/cultura/resenha/resenha.asp?nitem=22314736&sid=01261835712112585541633367&k5=95BAE28&uid=

Ou direto com o autor. Entre em contato através do menu “contato”.

O tema é: O verdadeiro Business Intelligence: Usando métodos quantitativos e conceitos do BICC para levar o BI ao próximo nível.

Conteúdo programático:

• O BICC – Business Intelligence Competence Center
• Os níveis de maturidade do BI
• Usando o BI para suportar o processo de tomada de decisão
• O próximo nível do BI
• Métodos de suporte à decisão: Correlação
• Métodos de suporte à decisão: Cálculo de tendência
• Métodos de suporte à decisão: Análise de agrupamentos por similaridade

Inscrições pelo site www.fasp.br. Local: Av. Paulista, 1159 – 16º andar (Centro de Treinamento Acctiva), às 19:30hs.