Le web n'oublie jamais

Forum informatique : choix de matériel, écrans, logiciels, montage et optimisation d'une station de trading, dépannage entre membres.
Avatar du membre
Zeddicus
Chevalier Jedi
Messages : 2333
Enregistré le : 27 juin 2020 08:00

Le web n'oublie jamais

Message non lu par Zeddicus »

Suite de la discussion qui va disparaitre sur la file d amarantine.
Un petit warning pour dire de faire attention à ce que vous mettez sur internet, il n oublie rien.


Et pour preuve une petite image qui ne va pas rajeunir Benoist :-)

Screenshot_20240208_125143_Chrome.jpg
Screenshot_20240208_125143_Chrome.jpg (742.72 Kio) Vu 1309 fois
Papaours74
Chevalier Émérite Jedi
Messages : 3615
Enregistré le : 07 juin 2017 20:24

Re: Le web n'oublie jamais

Message non lu par Papaours74 »

:top: :top:
Avatar du membre
Benoist Rousseau
Trader Futures / CME Member
Messages : 174798
Enregistré le : 06 sept. 2011 22:45

Re: Le web n'oublie jamais

Message non lu par [phpBB Debug] PHP Warning: in file [ROOT]/vendor/twig/twig/src/Extension/CoreExtension.php on line 570: strtr(): Ignoring replacement of empty string
Benoist Rousseau
»

wayback machine

Sympa j'avais oublié la première version en rouge

Il y a 14 ans déjà
Avatar du membre
Zeddicus
Chevalier Jedi
Messages : 2333
Enregistré le : 27 juin 2020 08:00

Re: Le web n'oublie jamais

Message non lu par Zeddicus »

Oui benoist, pas osé donné le nom car il se rappelle de beaucoup de choses, que parfois vous avez retiré volontairement du forum.
Je ne voulais pas vous créer de pb.

Mais cet outil est absolument dingue, j aimerais connaître leur infra derrière pour être cappable de retenir tout le Web sur 20 ans d historique.
Je trouve cela incroyable, impossible même ! Mais il l ont fait ...
Avatar du membre
nuts
Membre du Conseil Jedi
Messages : 15618
Enregistré le : 06 juil. 2023 21:02

Re: Le web n'oublie jamais

Message non lu par nuts »

il n'y a pas tout le web. c'est estimé autour de 40% je crois. et ça n'archive pas toutes les pages d'un site chaque jour / chaque heure.... c'est partiel

c'est du texte un peu d'image. le web 1.0 ne pèse rien
Avatar du membre
Benoist Rousseau
Trader Futures / CME Member
Messages : 174798
Enregistré le : 06 sept. 2011 22:45

Re: Le web n'oublie jamais

Message non lu par [phpBB Debug] PHP Warning: in file [ROOT]/vendor/twig/twig/src/Extension/CoreExtension.php on line 570: strtr(): Ignoring replacement of empty string
Benoist Rousseau
»

Quand on retire des choses c'est que la justice nous l'a demandé ou un membre.

On peut facilement interdire ce crawler de passer avec une simple ligne dans le robot.txt et le site n'est pas archivé. Il l'est si le webmaster le veut bien
Avatar du membre
Francis1
Le Sage
Messages : 30212
Enregistré le : 20 mars 2019 15:50

Re: Le web n'oublie jamais

Message non lu par Francis1 »

:top:
Avatar du membre
Zeddicus
Chevalier Jedi
Messages : 2333
Enregistré le : 27 juin 2020 08:00

Re: Le web n'oublie jamais

Message non lu par Zeddicus »

Nuts oui bien sur mais c est déjà astronomique.

Benoist : effectivement il suffisait d interdire le user agent de la wayback machine a parser le site.
merci pour ta réponse très claire
Avatar du membre
ChristelleP
La Battante
Messages : 69196
Enregistré le : 23 janv. 2018 09:53

Re: Le web n'oublie jamais

Message non lu par ChristelleP »

:shock: :shock:

merci Zedicus pour le partage :mercichinois:
Avatar du membre
HellionReign
Membre du Conseil Jedi
Messages : 8596
Enregistré le : 24 oct. 2016 15:00

Re: Le web n'oublie jamais

Message non lu par HellionReign »

:merci: Zeddicus :mercichinois:
Ça Ne Nous Rajeunit Pas :? :mrgreen:
:top: Ahhhh Wayback Machine = Souvenirs :), Modem 56K, Lycos, Msn... :bravo:
Avatar du membre
Zeddicus
Chevalier Jedi
Messages : 2333
Enregistré le : 27 juin 2020 08:00

Re: Le web n'oublie jamais

Message non lu par Zeddicus »

Nuts en 2023 internet archives rapportait devoir ajouter environ 5 peta octets ( 5 millions de Go ) par mois à leur infrastructure. A cela s ajoutent les infrastructures de calcul + ram pour réaliser et stocker l indexation nécessaire à une consultation dans de bonnes conditions.

Sachant que ce projet a commencé en 1996 et que le volume est en augmentation constante je ne pense pas que l on puisse dire que cela ne pèse pas grand chose.

J ai visité de nombreux datacenters, et des gros, et je peux te dire que ce type d infra ne se trouve pas à tous les coins de rue ...
Avatar du membre
Benoist Rousseau
Trader Futures / CME Member
Messages : 174798
Enregistré le : 06 sept. 2011 22:45

Re: Le web n'oublie jamais

Message non lu par [phpBB Debug] PHP Warning: in file [ROOT]/vendor/twig/twig/src/Extension/CoreExtension.php on line 570: strtr(): Ignoring replacement of empty string
Benoist Rousseau
»

oui la NSA est forte
Avatar du membre
nuts
Membre du Conseil Jedi
Messages : 15618
Enregistré le : 06 juil. 2023 21:02

Re: Le web n'oublie jamais

Message non lu par nuts »

tu as raison c'est quand même considérable.
mais le coût a lui même considérablement diminué.

enregistrer TOUTES les communications SMS et vocales des allemands ne coûterait "que" quelques milliards par an. ou quelques millions ? j'ai le chiffres de 12 mais je ne sais plus c'est quoi ? millions, milliards ?
avant ce n'était même pas chiffrable. ça a été estimé il y'a quelques années.

après j'avais quand même conclu au détour d'une file sur ce forum, que les supports numériques étaient tout sauf durables. et le NET en prime.

certes il y'a des sites comme celui cité qui font des screenshots... mais regarde Skyblog a fermé, MSN...
et une grande partie du Web 1.0...
pourtant tout ça est jeune ; 1994 le NET grand public
Avatar du membre
Benoist Rousseau
Trader Futures / CME Member
Messages : 174798
Enregistré le : 06 sept. 2011 22:45

Re: Le web n'oublie jamais

Message non lu par [phpBB Debug] PHP Warning: in file [ROOT]/vendor/twig/twig/src/Extension/CoreExtension.php on line 570: strtr(): Ignoring replacement of empty string
Benoist Rousseau
»

ah oui les Skyblog, des centaines de millions de pages, j'avais oublié
Avatar du membre
Cgz
Maître Jedi
Messages : 4029
Enregistré le : 11 nov. 2020 10:40

Re: Le web n'oublie jamais

Message non lu par Cgz »

Gain du jour 15€.

Ça mérite un back up de cet article Benoist 😂