Autor Tema: datos descarga desde mi página web  (Leído 1437 veces)

Desconectado evilaro

  • Member
  • ***
  • Mensajes: 341
  • Viajes, Fotografía, Programador de EvilFOTO
    • EvilFOTO
datos descarga desde mi página web
« en: 12 de Marzo de 2018, 01:46:38 pm »


Espero vaya aquí ;)

Mi proveedor de internet pone unos datos sobre las descargas
que ocurren en mi pagina web.

Ofrece un formato .db que usando dBASE me dice que está anticuado.

http://www.evilfoto.eu/pagina_cuentos/pruebas/traffic.db

¿Teneis alguna idea de como abrirlo?
***************************************************
Y por otra parte ofrece estos ficheros tipo RAR que descomprimiendo etc
puedo leerlos... pero son muchos y la función no es muy automatica

http://www.evilfoto.eu/pagina_cuentos/pruebas/access.log.09.gz

Sabéis de algún programilla para convertir estos .gz en .txt. dbf o algo que pueda usar
los datos....

Muchas gracias.

Emilio




Desconectado Liamngls

  • Administrator
  • ******
  • Mensajes: 15511
    • Manuales-e
Re:datos descarga desde mi página web
« Respuesta #1 en: 13 de Marzo de 2018, 07:13:19 am »
Debería de haber algún programa para visualizar los logs de un modo más amigable pero todos los que conozco ahora mismo se instalan en el servidor y se visualizan desde ahí (Awstats, webalizer, etc ...), algo que tal vez debería de haber hecho quien te aloja la página en lugar de enviarte un log en crudo.

Prueba esto: https://www.1and1.es/digitalguide/servidores/herramientas/goaccess-el-analizador-open-source-de-archivos-log/

Desconectado evilaro

  • Member
  • ***
  • Mensajes: 341
  • Viajes, Fotografía, Programador de EvilFOTO
    • EvilFOTO
Re:datos descarga desde mi página web
« Respuesta #2 en: 13 de Marzo de 2018, 01:41:17 pm »
Liam:
No es por hacer de abogado del diablo... 1&1 sí me da las estadísticas y muy bonitas.

Pero:
1) No de todo lo que quiero
2) Si es de lo que quiero... me da la impresión que NO CUENTAN bien... me refiero si comparo esos resultados con sus LOGS, me ponen menos de lo que en el LOG dice

Veo que MI problema lo tienen muchos ya que con el enlace que me das hay empresas que
tratan de solventar el problema.

Lo que veo es que sí, el enlace que me das es mucho mejor en realizar estadísticas que
1&1... increíble... pero nunca hará lo que con mi mente tan retorcida quiere lograr.

Quisiera preguntar lo siguiente para ver si entiendo todo esto y estar más tranquilo al intentar
hacer lo que quiero hacer.

Ha sido para mí una sorpresa el que haya y a mi disposición una carpeta con los LOGS

Mirando ese fichero, veo que por ejemplo en uno de los ficheros que abarca una semana,
hay unas 5 000 entradas... mucha basura claro pero en la estadística que me da 1&1 salen
solo unas 200, me imagino que eliminan mucha de esa basura.

Mi pregunta entonces es: ¿El contenido de los LOGS es realidad la actividad de mi página Web?
¿Puedo usarlo como información válida?
¿ Si me dice que se ha descargado (GET) el fichero xxxxx.pdf realmente se ha descargado? independientemente de que luego se lea o no.

Gracias

Emilio


Debería de haber algún programa para visualizar los logs de un modo más amigable pero todos los que conozco ahora mismo se instalan en el servidor y se visualizan desde ahí (Awstats, webalizer, etc ...), algo que tal vez debería de haber hecho quien te aloja la página en lugar de enviarte un log en crudo.

Prueba esto: https://www.1and1.es/digitalguide/servidores/herramientas/goaccess-el-analizador-open-source-de-archivos-log/

Desconectado Liamngls

  • Administrator
  • ******
  • Mensajes: 15511
    • Manuales-e
Re:datos descarga desde mi página web
« Respuesta #3 en: 13 de Marzo de 2018, 04:27:31 pm »
El problema del log es que un fichero que registra absolutamente toda la actividad de la web, cada archivo que se "descarga" (imágenes, banners, etc ...) es una petición y eso hace que pueda haber miles de peticiones para unas pocas decenas o cientos de visitas. Puede ser que te estén dando menos información porque se estén limitando a enviarte datos, por ejemplo, del número de visitas que siempre será muy inferior al de peticiones.

En el caso concreto de los textos en pdf, pub (o lo que sea) puede no ser tan sencillo saber si se han descargado o no, por ejemplo yo podría pedir la descarga del archivo que quedaría registrada y luego cancelar esa petición o que por problemas de red no llegase a finalizarse.

El log es lo más fiable y preciso que puedes usar para ver toda la actividad de tu web pero tienen el problema de que tal y como has puesto el archivo son muy engorrosos de leer, por eso te decía de buscar algún programa que te permita visualizarlos de una forma más cómoda y segmentada. Una posible opción para esto sería instalar un servidor en modo local con un sistema de estadísticas que te permita verlo en el navegador.

Desconectado evilaro

  • Member
  • ***
  • Mensajes: 341
  • Viajes, Fotografía, Programador de EvilFOTO
    • EvilFOTO
Re:datos descarga desde mi página web
« Respuesta #4 en: 14 de Marzo de 2018, 10:57:52 am »
Liam:
El que el fichero blog contenga TODO (y que según me dices este log es lo mas fiable), me encanta... si bien al mirarlo me parece ver un gran vertedero de basura... en donde en medio de todo hay algo de valor o todo tiene valor si estuviese separado y ordenado ;)

Ya he logrado gracias a dBASE poner orden a todo ese fichero y sacar los datos que me interesan...
Por fechas, tipo de fichero (fotos, pdf, ePUB etc), IP

Lo sorprendente es que la cantidad de accesos que saco por semana de este fichero es mas de 10 veces superior a los que la estadística de mi proveedor me da... no lo entiendo.
Sea como sea... lo que me interesa es la tendencia.

Lo de si al pulsar para descargar y luego cancelan, en mi caso no son grandes ficheros y esto es irrelevante...

Tu idea de tener mi propio servidor, me parece fascinante... lo he pensado alguna vez, pero creo
que es injustificable... creo que por ahora con esto ya estoy logrando lo

Desconectado evilaro

  • Member
  • ***
  • Mensajes: 341
  • Viajes, Fotografía, Programador de EvilFOTO
    • EvilFOTO
Re:datos descarga desde mi página web
« Respuesta #5 en: 14 de Marzo de 2018, 10:59:55 am »
...continuo

lo que quería.

Muchas gracias...

Quisiera cuando lo tenga todo haceros alguna pregunta más

Hasta pronto.

Emilio

Desconectado Dabo

  • Administrator
  • *
  • Mensajes: 15123
    • http://www.daboblog.com
Re:datos descarga desde mi página web
« Respuesta #6 en: 03 de Abril de 2018, 12:44:06 pm »
Hola Emilio, hay herramientas para ver "mejor" esos datos que tiene tu fichero de logs https://goaccess.io/ mira un ejemplo de uso https://www.tecmint.com/goaccess-a-real-time-apache-and-nginx-web-server-log-analyzer/ saludos
Hacking, computing, are in my blood, are a part of me, a part of my life...Debian GNU/Linux rules.

Twitter; @daboblog --> http://twitter.com/daboblog

www.daboblog.com | www.debianhackers.net | www.caborian.com | www.apachectl.com | www.hackeando.com | www.davidhernandez.es

Desconectado evilaro

  • Member
  • ***
  • Mensajes: 341
  • Viajes, Fotografía, Programador de EvilFOTO
    • EvilFOTO
Re:datos descarga desde mi página web
« Respuesta #7 en: 03 de Abril de 2018, 04:44:30 pm »
Dabo:


Madre de Dios...

Si que hay cosas... este programa me parece muy interesante... y completo.
Pero me parece que solo es para Linux??

Creo que hasta me lo recomendaron los de 1&1

Muchas gracias...

Emilio



Desconectado Dabo

  • Administrator
  • *
  • Mensajes: 15123
    • http://www.daboblog.com
Re:datos descarga desde mi página web
« Respuesta #8 en: 03 de Abril de 2018, 04:50:12 pm »
Hasta donde yo sé sí Emilio. no obstante puedes entrar en increíble mundo del pinguino con VirtualBox desde tu Windows y así matamos dos pájaros de un tiro  :destroyer:
Hacking, computing, are in my blood, are a part of me, a part of my life...Debian GNU/Linux rules.

Twitter; @daboblog --> http://twitter.com/daboblog

www.daboblog.com | www.debianhackers.net | www.caborian.com | www.apachectl.com | www.hackeando.com | www.davidhernandez.es

 



condiciones de registro y uso de los foros | Privacidad
el contenido de la web se rige bajo licencia
Creative Commons License