Reprise du message précédent :
la doc à l'air pourrie je trouve rien mais si l'utilisation de cloudfalre est en fonction du trafic comme dit ici https://github.com/weserv/images/wi [...] e-caching) il doit y avoir moyen de régler ça pour le désactiver ... ?
 
par contre attention au trafic quand même, si le service fonctionne ça serait utilisé pour réhoster les images du topic images (à minima) ce qui générerait un trafic bien plus important que l'upload j'imagine ...

J'ai édité mon post au-dessus

Sinon il ne faut pas oublier que le cache et le CDN c'est bien mais il faut toujours stocker ce qui est uploadé localement, et ça c'est pas illimité (j'ai pas eu besoin de prendre une offre type Amazon S3, tout du moins tant que j'ai pas de financement)...

Donc dans le cas présent, si c'était pour le topic des images étonnantes il va me falloir des To de disques (c'est pas pour rien que DiB stockage tout en local) et comme déjà dit, quand bien même je demanderais une contribution, je suis salarié à temps complet et auto-entrepreneur et je n'aurais pas le temps d'assurer une QoS comme on peut s'y attendre quand on paie pour un service (surtout l'aspect modération car je ne veux pas avoir les flics chez moi une seconde fois !)...

S'il y avait une solution simple ça fait bien longtemps qu'on l'aurait vue ici

certes
 
bon pour la modération je partais du principe qu'à partir du moment où c'est du rehost l'image originale étant hébergée ailleurs la problématique de responsabilité est déporté sur l'hébergeur original (enfin je me disais que c'est pour ça que sly a réouvert le service, j'en sais rien en vrai)
 
et c'est vrai que pour le stockage je me disais aussi que c'était pas un problème non plus vu le prix du Go et vu qu'il suffit de tuner la durée de rétention, on veux pas du "pour toujours" pour ce service, c'est juste pour que les branleurs puisse regarder le topic images au travail ...
 
mais bref merci pour la réponse et du coup te prends pas la tête vu que des mécènes j'en connais pas et que moi j'ai pas un rond

Je viens de réessayer mais ça ne passe pas non plus :

 
Merci pour ton suivi.

On va poursuivre en mp pour ma trop polluer le topic

Il existe des softs plus simples en self hosted sans cloudflare, par exemple : https://github.com/willnorris/imageproxy
Évidemment il n'y a plus de cache mondial

Une instance de test : https://hfr-rehost.aurait.eu/

ça à l'air intéressant en effet

Top ça, merci !

Je te monte ça ce weekend

Edit : Configuration en cours

Hello,
 
Désolé du lag mais c'est en place :
 
http://rehost.super-h.fr/https://i [...] 79feb6.jpg

en quote

ah oui

ça déchire

Faut que je règle le souci du TLS, le certificat est en place mais il doit manquer un paramètre dans les variables de lancement...

test avec l'url encodée

ah dommage (ça aurait permis de gérer les urls avec paramètres sans risque de conflit)

reho.st ne le gère pas non plus

et diberie le gère parce qu’il gère déjà l'url en paramètre

/bref osef c'était pour savoir si on l'utilise dans un script

ça marche pas quand y'a trop de requêtes d'un coup : https://forum.hardware.fr/forum2.ph [...] se=2434326 ?

ah oui le forum vire le double http ... bref faut que je me refasse des images de test en https

/nevermind

Je vais activer la mise en cache.

Edit : Je viens d'activer la mise en cache, tu me diras si ça règle le problème des requêtes concurrentes... Au besoin j'ajouterai un core à la VM...

Edit : Y'a du mieux mais cela ne prend pas les URL non-encodées comme tu l'as fait remarquer

Je creuse...

non non les url encodées c'était juste un test pour savoir comment on peut l'utiliser, le truc a l'air suffisamment bien foutu comme ça, cherche pas
 
et pour le cache ma fois ça a l'air d'aller

Merci pour ton retour

par contre le https ça serait pas mal

Je sais, j'ai un souci avec Let's Encrypt & Certbot, je voulais pas avoir besoin d'installer un serveur web ou un reverse proxy car là nativement ça passe pas... Je vais creuser cette semaine.

ok c'est cool
 
mais fais pas de frais, y'a pas de sous

Ca marche assez bien avec traefik et ce dernier gère l'obtention et le renouvellement du certificat.

Exemple avec cache mémoire puis cache object storage :

alors pour info
 
le forum vire le http de l'url rehosté
 
il le vire pas si c'est https
 
et votre imageproxy à vous deux ne le gère pas (il se retrouve avec une url incomplète dont il ne sait pas quoi faire)
 
je me permets d'en parler parce que sly le gère sur reho.st (et que c'est aussi un truc que j'ai géré dans mes bidouilles à droite et à gauche) et que du coup je me dis que c'est une petite modif qui serait pas de trop à faire ni très compliqué (éventuellement, j'en sais rien en vrai, j'ai pas regardé le code)
 
voila c'est tout
 
exemple ici : https://forum.hardware.fr/forum2.ph [...] 0#t1206546 (dans le bbcode y'a bien le http, à l'affichage il saute)

J'ai configuré traefik pour renvoyer le http vers HTTPS , la solution c'est pas plutôt de tout faire en HTTPS ?

rien à voir avec votre gestion du https, je parle de l'url de l'image lorsqu'elle est réhosté

si l'url elle est en http le forum vire le http de l'url

ça done ça

au lieu de ça

edit : c'est pareil pour aurait.eu, pas de jaloux

Ok c'est clair . Imgproxy attend une url complète et donc ne fonctionne pas si le http manque :

Une option est de paramétrer le reverse proxy pour ajouter le http manquant , exemple nginx (mais qui ne prendra pas en compte les options type redimensionnement) :

bah j'ai pas d'avis, sinon que c'est dommage de perdre les options

je pensais plus à un hack au niveau du code mais je sais que reho.st gère aussi beaucoup de choses au niveau avec des rewriterule et des rewritecond de appache donc bon après je sais que c'est un cas de merde et qu'on peux s'en foutre

bon, un coup d’œil au code j'imagine un hack à la ligne 161 de imageproxy.go (dans la branche main) avant la création de req :

tester r, si il commence pas par "http", rajouter "http://" ou un truc comme ça ... (j'aime pas le go )

y'a aussi ce

je me demande si on peut lui donner "http://" ça me parait foireux mais il existe...

Hello  
 
La taille maxi des images uploadées a changé?
Il me dit que 2,1 Mo c'est trop gros. J'ai déjà réussi à charger des images plus grosses pourtant

Hello,

Tu passes par quelle instance, img ou img3 (via l'appli iOS) ? Tu as un compte ou pas ?

Edit : J'ai trouvé ton compte. En fait le dev s'est merdé sur la dernière update : avant les comptes invités étaient limités à 2 Mo et les comptes normaux à 5 Mo et lors de la dernière MAJ il a inversé les valeurs

Je viens de corriger ça, merci de m'indiquer si ça fonctionne bien

Je vois bien une limite à 5 Mo maintenant, merci de la correction et du retour

Hello,
 
C'était 10 avant, est-ce possible d'y revenir ?
 
Merci.

Et c'était passé à 5 pour les guests comme indiqué dans le premier post.

Hello,

Non désolé car les deux instances consomment près de 80 Go actuellement et c'est sur du disque NVMe qui ne fait que 450 Go (qui n'est pas réservé aux deux instances img/img3). J'ai prévu de migrer ça sur un stockage SATA à terme. De plus c'est un service destiné à la publication d'images sur HFR (c'est le cas à 95%) et en aucun cas de sauvegarde d'images (type RAW) donc même 5 Mo par image est très élevé pour de l'affichage sur un forum, et ce n'est pas impossible qu'à terme je doive diminuer cette limite...

En tout cas la loi de Pareto s'applique ici car 80% de la consommation totale du stockage est consommé par 20% des usagers (voire 10% )...

Actuellement c'est 2 Mo pour les guest et 5 Mo pour les comptes.

tu as pensé à convertir toutes ces merdes en webp ou avif ?  

C'est sur la roadmap de l'éditeur et donc pas encore proposé...

Sinon, quand ça sera disponible je pourrais faire un traitement en mode batch pour tout convertir (et faire du rewriting) mais il me faudra provisionner 50% de stocakge additionnel (ou pas si je supprime la source dans le batch mais attention aux erreurs !) et surtout je pourrais couper le service pendant une semaine car la conversion de 80 Go d'images ne se fera pas en quelques heures sur les CPU assignés à cette VM...

Edit : Cela dit je risque prochainement de faire des deletes de masse contre les uploads ou comptes qui se servent de ma plate-forme comme backup car il faut garder à l'esprit que l'infra derrière me coûte de l'argent (backup externalisés inclus) et que n'en tire absolument aucun bénéfice (j'ai même viré les pubs, pour les 5 euros qu'elles me rapportaient par an)...
Edit : Plutôt que de supprimer les images stockées de façon abusives je pourrais mettre des watermark cela dit...

Mais pas de stress, je ne ferais rien pour l'instant, je compte sur l'auto-modération de chacun

 
Tu peux essayer de supprimer les images qui n'ont pas été request depuis 60 jours ou 6 mois, ça fera du nettoyage déjà.
Et même les images uploadées mais jamais request depuis 1 mois, hop poubelle ou avertissement à l'utilisateur.

Effectivement, je vais supprimer toutes les images qui n'ont jamais été accédées car ça voudra dire que ce n'est que de la sauvegarde, ce qui n'est pas permis...
 

 
Préviens quand même que tu vas effacer les sauvegardes
"Je vire dans 10 jours, prenez vos précautions, bisous"

Je ne fais pas de sauvegarde mais par précaution, je vais migrer sur Diberie. Merci pour ce temps d'hébergement.

Alors c'est pas prévu dans l'immédiat donc pas de stress mais le service offert n'est pas destiné à héberger des photos qui ne sont pas consulté
 

Comme dit, les photos qui ont au moins une vue ne seront pas impactées mais effectivement, c'est plus sûr... De toute façon je vais laisser tes 3 Go de photos en ligne (3 Go car chaque image génère 4 formats)

 
Ha mais c'est pas pour moi. J'utilise le service uniquement pour les photos publiées sur HFR (principalement des photos de mon chat, de Lego et de CR voyages )
Mes sauvegardes sont gérées autrement.
 
Je disais ça pour ceux qui ont sauvegardé sur le service, pour pas qu'ils perdent leurs sauvegardes d'un coup. Mais après tout c'est leur problème, pas le mien

J'avais pas prévu de faire le sauvage, j'ai eu un service d'hébergement web associatif gratuit pendant 12 ans, et quand je l'ai arrêté j'avais laissé deux ans aux associations pour s'organiser. Par contre, dans le cas présent je ne pourrais strictement rien faire pour ceux qui n'ont pas de compte et qui uploadent en guest...
 
Je vais quand même avertir ceux qui ont un compte et qui uploadent des images avec 0 vues