• Anúncios

GeoStats?

Por muito que tentem negar... it's ALL about the numbers!! Espaço dedicado, gerido e dinamizado pelos obcecados pelos números

Moderador: Moderadores

Re: Stats?

Mensagempor Rechena » quarta fev 25, 2004 14:02

Respondendo ao Mantunes: :)
Por mim a ideia é excelente, acrescentando o que o Lobo fala, é nice.
Ou seja concordo que se faça esse tipo de coisas para as caches apenas, nao utilizando "jogadores", para nao crirar conflictos.

Na parte de inetegraçao eu estou pronto a ajudar no que for preciso.

Sim Diamantino eu sei que ainda tenho uma coisa que me pediste para fazer :D mas queres que faça na mesma ou agora fica em Standby ?

abraços

rech
Rechena
Regular
 
Mensagens: 341
Registado: quarta jul 19, 2006 16:08

Re: Stats?

Mensagempor MAntunes » quarta fev 25, 2004 14:18

Excelentes  progressos!

Como parece que começo a não ficar sózinho neste empreendimento, revelo aqui um mail que recebi no Domingo, no qual o responsável pelo site de Estatísticas dos Países Nórdicos, se ofereceu para incluir Portugal (já o fez!) no programa que recolhe os logs mais recentes. Por isso, quanto a essa parte estamos servidos. :-)

Quote:

Hello Manuel,

I will update my "Most recent logs" with Portugal and mail you a link when its available on the net. I expect it to be ready during next week, my friend with the server must fix his problem first.

For the rest I´m interested to follow your progress. If you want a beginning of a Portuguese stat page fast you could use my concept now and change to a new solution later.

Best regards,

Bo



Ele tinha oferecido ajuda no resto mas o conceito dele não se baseia em BD e penso que uma BD (seja Excel, Access ou SQL) é fundamental, para se poderem analisar os dados de diferentes maneiras sem estar a fazer duplo input.
Imagem
Avatar do Utilizador
MAntunes
Extra Large
 
Mensagens: 4791
Registado: terça abr 22, 2003 20:56
Localização: Lisboa, Portugal

Re: Stats?

Mensagempor Lobo Astuto » quarta fev 25, 2004 14:30

Isso são boas notícias!

Mas qual é a metodologia usada?

É realtivamente fácil fazer a exportação de qq base de dados para excel ou outro formato qq.

Como se pode ler em http://cachestats.made.nu/faq.asp?club_id=1 a metodologia que eles usam alimenta uma base de dados.

Quantoa história dos jogadores, a recolha dos dados passa sempre por essa informação, agora a possibilidade de a disponibilizar é que é outra coisa.

Aparentemente para fazerem o bypass às regras do geocaching.com, eles pedem a autorização de cada geocacher para poderem efectuar o pedido em nome deles, recolhendo assim os dados.

Em todo o caso, será sempre necessário uma BD para podermos fazer o datamining da informação nela contida.
Lobo Astuto
Regular
 
Mensagens: 247
Registado: sexta mar 18, 2005 01:58

Re: Stats?

Mensagempor MAntunes » quarta fev 25, 2004 14:53

Está aqui a oferta completa do Bo:

Quote:

Hello Manuel,

My statistics page is divided into two parts, one is a real time
stat "Most recent logs", and the other "Top-xx Found" and Top-xx
Owned" is updated semi-automatically once a week.

For "Most recent logs" , which unfortunately is down for the
moment but will soon go live again, the most simple solution is
that I add Portugal to the list. I already generate "Most recent
logs" for 6 Nordic countries, its very easy to add Portugal. To do
"Most recent logs" I look in geocaching.com´s "Recent logs"-page
every 4 minutes and pick the logs for the countries I´m looking
for. I put those logs in my own list and publish that list every 4
minutes. I have made the programming, but the server is with
another Swedish geocacher. But as I said, it is very easy to add
Portugal. Would you like me to do that ?

For the "Top-xx Found" and "Top-xx Owned" I have a semi-automatic
solution. Once a week, normally on Mondays, I manually open the
stat page for each user I have in a list (go to the "Users"
profile page, click on "User stats" and save the page to a
folder). In the list of users I have all users for that country
that has qualified for the top-lists and a few more.
Once I have saved the "User stats" pages I run a program that
extracts all relevant data from them and creates bar charts that I
then copy into a HTML-page. (Collection of approx. 30 "User stats"
is done in less then 15 minutes)
Here we have two options: 1. You collect "User stat" pages for
those Portuguese geocachers that qualify for the lists and I make
the bar charts with my software. This is very simple for me and I
do not object doing it for you.
2. I give you my program (Excel macros written in VBA) and you
collect data, extract data and update the HTML-page. The only
problem might be if my program code would generate an error one day.
I propose we start with alternative 1 and at a later stage go for
2. What do you think ?

As you see, I dont use a database at all for my stat page. I know
some other people do it differently but as I don´t have an online
server I have chosen this solution.

If you are interested in othe stats, like "geocaches per city",
"active geocachers", "most founds in 2004" those are also
generated in a semiautomated way. I will tell you how to do it
later if you are interested.

I hope this info is what you expected, please tell me if and how you want to proceed,

Bo



Em relação aos últimos logs, mostrei-me interessado. Quanto ao resto, não porque acho que, como diz o Nuno, tem que passar por uma BD para permitir o "datamining"  (Ei! Eu estava a evitar a utilização deste termo porque nem toda a gente o conhece. Ou estou enganado? ;-) Já agora... http://www.thearling.com/).
Imagem
Avatar do Utilizador
MAntunes
Extra Large
 
Mensagens: 4791
Registado: terça abr 22, 2003 20:56
Localização: Lisboa, Portugal

Re: Stats?

Mensagempor ricardobsilva » quarta fev 25, 2004 15:53

Boas

"Stat´s ou não ... eis a questão?"

Creio que essa é a dúvida principal, porque o resto, de uma mais fácil ou não, mais automatica ou manual, é dar à manivela.

Eu pessoalmente acho interessante. Eu por mim gostaria de saber quem, quando, como e onde tem estado mais activo. Porquê? Por curiosidade e para de uma forma resumida numa mesma página ver o que aconteceu no Geocaching nacional. Talvez um hábito profissional em que indicadores regulares são essenciais.

Outro ponto de interesse é para geocachers estrangeiros. Terem a possibilidade de olhar para o nosso país e ver as caches most wanteds e os geocachers mais activos ultimamente, pode ser uma excelente ferramenta para planearem as caçadas e até contactarem alguns de nós que considerem valer a pena.

Um abraço

Ricardo BORDEIRA Silva
ricardobsilva
Micro
 
Mensagens: 47
Registado: quarta abr 30, 2003 14:40
Localização: Alcochete

Re: Stats?

Mensagempor Lobo Astuto » quarta fev 25, 2004 17:01

Lobo Astuto
Regular
 
Mensagens: 247
Registado: sexta mar 18, 2005 01:58

Re: Stats?

Mensagempor MAntunes » quarta fev 25, 2004 20:38

O "meu sueco alto e loiro" está a revelar-se uma ajuda inestimável!

Acabei de receber o seguinte e-mail:

Quote:

Hi Manuel,

Most Recent Logs for Portugal is up and running ! You will find it at http://www.psylo.net/geostat/recent_Portugal_logs.htm

There is also another file with raw data for the above site, http://www.psylo.net/geostat/Portugalloggar.txt

I also include an Excel-file with a macro. If you run this program you can keep track of active geocachers in Portugal. Try it and ask if there is something you don´t understand.

Bo


A página dos logs mais recentes que ele disponibiliza, tem a vantagem de incluir todos os tipos de logs.

Quanto ao ficheiro que ele refere, pedi-lhe autorização para o colocar aqui para vocês todos verem. É um gráfico com os geocachers mais activos (baseado apenas nos logs deste fds). Convidei-o a vir a este tópico e a dizer alguma coisa se quiser. Como é que estão os vossos conhecimentos de sueco?  ;-)
Imagem
Avatar do Utilizador
MAntunes
Extra Large
 
Mensagens: 4791
Registado: terça abr 22, 2003 20:56
Localização: Lisboa, Portugal

Re: Stats?

Mensagempor MAntunes » quinta fev 26, 2004 11:01

Aqui está   um screen shot do ficheiro Excel que ele fez (não encontrei maneira de colocar um fich. .xls neste site).

Imagem
Avatar do Utilizador
MAntunes
Extra Large
 
Mensagens: 4791
Registado: terça abr 22, 2003 20:56
Localização: Lisboa, Portugal

Re: Stats?

Mensagempor MAntunes » sábado fev 28, 2004 10:29

A página dos últimos logs que o Bo Malmborg - Suécia, gentilmente criou para nós, está a ser actualizada automaticamente de 4 em 4 minutos. Coloquei um link na secção links deste site para quem quiser ir lá verificar de uma forma cómoda, os ultimos logs feitos - não apenas, founds mas também, not founds e notes. Esta página, preencherá a secção "Últimos logs" da futura página de Stats para Portugal. Sim, vamos avançar!  :-)  O Diamantino e eu já estamos a "cozinhar" umas coisas. ;-)

No essencial, as estatísticas irão basear-se em três tabelas: Caches, Geocachers e Logs. A partir daqui, qualquer vista/análise é possível. O problema vai ser preencher a tabela dos logs com todos os existentes até à data...

Agora, uma questão burocrática: Acham que é necessário criar uma poll/consulta à comunidade geocacher a pedir autorização para incluir os dados de cada um? Os dados são: Links para os perfis, links para as caches e obtenção dos dados principais de cada log (cache, geocacher, data e tipo de log). Ou, basta colocar uma mensagem na página das estatisticas que se alguém não quiser os seus dados na página, envia um mail para (a ver) e os seus dados serão retirados e não mais recolhidos?

A vossa opinião por favor. Eu quero fazer isto "direitinho", sem chatear ninguém.  :-)
Imagem
Avatar do Utilizador
MAntunes
Extra Large
 
Mensagens: 4791
Registado: terça abr 22, 2003 20:56
Localização: Lisboa, Portugal

Ái voces andam a pedir opiniões...

Mensagempor 2 Cotas » sábado fev 28, 2004 11:32

Oquei, então aqui vai!

Partindo do principio de que a origem dos dados é um site, www.geocaching.com, ao qual todos, todos, autorizaram, implicitamente aquando da sua inscrição, a publicação dos dados, não deveria haver problema que esses mesmo dados fossem publicados, apenas variando um pouco a sua apresentação...

Por isso não seria necessário estar a pedir autorizações... digo eu... eheheh... salta confusão... até amanhã...
Imagem
Avatar do Utilizador
2 Cotas
Regular
 
Mensagens: 651
Registado: sexta mar 18, 2005 01:58
Localização: Here

Re: Stats?

Mensagempor Bargao_Henriques » quarta mar 10, 2004 11:44

Ora então aqui vão mais umas ideias sobre que elementos poderão ser incluídos na estatística:

Caches:
* caches mais visitadas (valor total)
* caches mais visitadas no último mês
* caches nunca visitadas
* maiores concentrações geográficas de caches
* caches de maior dificuldade
* caches de menor dificuldade
* caches com mais "not found"

Geocachers:
* geocachers activos mais antigos (tipo: geocacher activo é aquele que "deu sinais de vida" nos últimos 3 meses ou seja, escondeu ou encontrou alguma cache)
* geocachers mais activos a esconder caches (valor total)
* geocachers mais activos a encontrar caches (valor total)
* geocachers mais activos a esconder caches no último mês
* geocachers mais activos a encontrar caches no último mês
* geocachers "desaparecidos em combate" (apanharam umas há montes de tempo e desapareceram do mapa...)
* geocachers que mais participam em geomeetups (em lista, geocacher e número de participações)

O momento:
* geocacher do momento
* cache do momento

Gráficos:
* gráfico de colunas com a representação do número de caches em Portugal , por tipo de cache, uma coluna para cada tipo.
* evolução do número de caches escondidas no último ano (gráfico multicolunas com total de caches e caches por tipo. Serve para se ter uma melhor percepção da evolução das tendências de quem anda a esconder caches)
* evolução do número de caches encontradas no último ano (gráfico multicolunas com total de caches e caches por tipo. Serve para atenuar o efeito das caches locationless no valor total e se ter uma melhor percepção das tendências da malta. Tipo: mais locationless durante o Inverno, micros no Natal, regulares no Verão, sei lá...)
* evolução do número de geocachers portugueses no último ano

É certo que nem eu acho que todos estes dados devem ser inseridos, mas são umas ideias que me vieram "à mona". Pode ser que algumas sejam consideradas interessantes...

Além disso também pode ser que sirvam para agitar um pouco as restantes mentes "geocachianas" até que saiam outras ideias, possivelmente mais interessantes e viáveis.
<img src="http://www.geocaching.com/profile/?guid=1498b1c7-e384-4431-8567-b1445d1f7d3e">
Avatar do Utilizador
Bargao_Henriques
Large
 
Mensagens: 1303
Registado: quinta set 25, 2003 22:38
Localização: Olivais, Lisboa

Re: Stats?

Mensagempor 2 Cotas » quarta mar 10, 2004 12:35

ÊÊÊÊÊÊhhhhhh...tás com a veia poética assanhada!!

Rázpartóme!
Imagem
Avatar do Utilizador
2 Cotas
Regular
 
Mensagens: 651
Registado: sexta mar 18, 2005 01:58
Localização: Here

Re: Stats?

Mensagempor Lobo Astuto » quarta mar 10, 2004 16:16

Tou nessa!

Ainda estou a desenvolver a parte de recolha de dados do geocaching.com, mais propriamente evitar a duplicação de logs, quando resolver isso é só começar a alimentar uma BD.
Rech, estás a ouver?
Lobo Astuto
Regular
 
Mensagens: 247
Registado: sexta mar 18, 2005 01:58

Re: Stats?

Mensagempor Rechena » quarta mar 10, 2004 16:38

Lobo, venha ela..... ;)
Rechena
Regular
 
Mensagens: 341
Registado: quarta jul 19, 2006 16:08

Re: Stats?

Mensagempor MAntunes » quarta mar 10, 2004 17:20


EnaEna! Tanta gente a querer ajudar :-) Mas... não será melhor conciliarmos esforços? É que o Diamantino também está a tratar da recolha de dados do gc.com e já vai numa fase adiantada...

É melhor começarmos a falar uns com os outros...  ;-)
Imagem
Avatar do Utilizador
MAntunes
Extra Large
 
Mensagens: 4791
Registado: terça abr 22, 2003 20:56
Localização: Lisboa, Portugal

AnteriorPróximo

Voltar para Stats

Quem está ligado:

Utilizador a ver este Fórum: Nenhum utilizador registado e 1 visitante