[LAC-TF] search engine ipv6

[Alvaro Vives Martinez]

Hola Antonio,

Las dos posibilidades que propones parecen las más lógicas y no sabría por
cual decantarme, pero sin duda la que daría información más fiable IMHO es
la de tener un bot que fuese indexando toda la internet y para cada URL
intentase primero IPv6 (AAAA) y si no IPv4. Estoy seguro de que las webs
IPv6 forman "islas", por lo tanto el indexar usando solo IPv6 no daría mucho
resultado, hoy en día.

Es curioso, pero parece que ya hay alguien trabajando el tema de los bots e
IPv6. En nuestro servidor web hay muchas entradas como la siguiente:

2001:da8:8000:5:219:b9ff:fee3:b5cf - - [27/Oct/2008:09:32:07 +0100] "GET
/index.php?page=news%2Fnewsroom&id=3586&id_others=3591 HTTP/1.1" 200 168826
"-" "SJTUIPv6bot"

Investigando un poco lo de "SJTUIPv6bot" parece indicar que es un bot IPv6
de la Universidad de Shangai (Shanghai Jiao Tong University)... si alguien
tiene contactos académicos con ellos... ;-)

C:\>whois 2001:da8:8000:5:219:b9ff:fee3:b5cf
% [whois.apnic.net node-1]
% Whois data copyright terms    http://www.apnic.net/db/dbcopyright.html

inet6num:     2001:0DA8:8000::/48
netname:      SJTU6-CERNET2
descr:        ~{IO:#=;M(4sQ'~}
descr:        Shanghai Jiaotong University
descr:        Shanghai 200030, China
admin-c:      WW390-AP
tech-c:       WW390-AP
tech-c:       CER-AP
country:      CN
changed:      hostmaster at net.edu.cn 20041129
mnt-by:       MAINT-CERNET-AP
status:       ASSIGNED NON-PORTABLE
source:       APNIC

Un saludo,
Alvaro

> -----Mensaje original-----
> De: lactf-bounces at lacnic.net [mailto:lactf-bounces at lacnic.net] En
> nombre de Antonio M. Moreiras
> Enviado el: viernes, 24 de octubre de 2008 21:19
> Para: lactf at lac.ipv6tf.org
> Asunto: Re: [LAC-TF] search engine ipv6
> 
> Eu encontrei o sixy.ch em muitas referências, mas não conseguia
> acessar a página. Agora fiz alguns testes adicionais e descobri que
> via IPv4 funciona normalmente... Eu consigo pingar o servidor via
> IPv6, mas não acessá-lo via http! Isso é muito curioso, para um
> diretório de sítios IPv6... Ocorre com vocês também?
> 
> Roque: Tenho me feito essa pergunta... Como implementar um buscador
> IPv6? Ou ainda: como caracterizar o que é hoje a Web IPv6?
> 
> Poderiamos, por exemplo, construir um webspider que, à partir de sites
> conhecidos v6, navegasse e fosse procurando outros, tendo acesso
> apenas à Internet via IPv6. Mas me pergunto se aí teríamos um retrato
> verdadeiro da Web IPv6, ou apenas o de uma ou algumas ilhas v6 dentro
> da Web v4...
> 
> Poderiamos fazer um webspider navegar na Web via IPv4, e testar os
> links por records IPv6 no DNS... E ir armazenando e indexando só os
> IPv6... Mas isso exigiria muitos recursos...
> 
> Um trabalho de caracterização da Web IPv6 seria muito interessante...
> Qual seu tamanho? Está fortemente ligada, ou é composta de muitas
> ilhas? Que tipo de sites ela contém? São sites voltados ao pessoal
> técnico e tratando de temas de rede e IPv6? Ou são sites sobre
> assuntos diversos que já usam a tecnologia? São sites exclusivos
> acessados só via IPv6, ou todos estão disponíveis via IPv4 também?
> Etc, etc... Posso imaginar uma lista bem maior que essa de questões
> sobre o assunto...
> 
> Gostei muito do
> http://plutarco.lab.bt.es/html/ipv6/global_results.html... A idéia de
> pegar a lista dos sites mais acessados na Web (v4) e verificar quais
> estão disponíveis em v6 é muito boa! E nos serve como uma ótima
> referência sobre o crescimento do uso do protocolo... Vocês conhecem
> outras listas como a Alexa?
> 
> []s
> Antonio M. Moreiras.
> 
> 2008/10/24 Roque Gagliano <roque at lacnic.net>:
> > la pregunta seria tambien, como lo implementariamos?
> > - al resultado de la busqueda bucar si tiene registro AAAA?
> > - hacer prueba online?
> > no veo que sea facil de implementar y mantener actualizado, pero no
> soy un
> > especialista en portales de busqueda/indexacion.
> > r.
> >
> _______________________________________________
> LACTF mailing list
> LACTF at lacnic.net
> https://mail.lacnic.net/mailman/listinfo/lactf
> 
> No virus found in this incoming message.
> Checked by AVG - http://www.avg.com
> Version: 8.0.175 / Virus Database: 270.8.3/1748 - Release Date:
> 26/10/2008 19:53



**********************************************
The IPv6 Portal: http://www.ipv6tf.org

Bye 6Bone. Hi, IPv6 !
http://www.ipv6day.org

This electronic message contains information which may be privileged or confidential. The information is intended to be for the use of the individual(s) named above. If you are not the intended recipient be aware that any disclosure, copying, distribution or use of the contents of this information, including attached files, is prohibited.