Samedi sécurité : travaux pratiques de sauvegarde, Réactions à la publication du 04/05/2024

[Paul Emploi]

J'étais sur un évènement lundi dernier, comme photographe, à la fois pour documenter, avoir des visuels mais aussi pour des portraits rapides dans un photobooth.

Deux appareils photos numériques, avec des objectifs interchangeables entre eux, deux slots dans chacun avec 2 cartes, et 2 cartes mémoires en sus: la base.

Pour les détails techniques, quand on utilise deux carte-mémoires ça n'est pas du RAID (RAID-1) mais ça enregistre en doublon, la duplication n'étant pas faite au niveau du driver RAID situé entre le filesystem et le ou les drivers chargés des IO, mais au niveau applicatif par une double écriture des fichiers.

À chaque grosse pause, à midi et en fin d'après-midi, retour à l'hôtel et là je sauvegarde.
Je recopie chacune des cartes sur mon Mac: j'évite ainsi le risque qu'une photo soit corrompue sur une carte et pas l'autre.

Puis je refais une autre copie de ces 2 cartes sur mon SSD externe chiffré (petit mais 4 To), que je peux lui ranger dans le coffre prévu pour les biens de valeur.

Dans la soirée après l'évènement et ma dernière sauvegarde, je ressors sans mes appareils laissés à l'hôtel, avec mon SSD dans une poche.

La stratégie consiste à limiter les risques autant que possible:
- panne d'une carte mémoire
- panne ou bris d'un appareil photo
- panne de mon Mac
- corruption silencieuse de carte mémoire
- vol ou incendie dans la chambre d'hôtel
- vol lorsque je sors

Idéalement, les photos devraient être envoyées en temps-réel sur un stockage au travers d'une connexion mobile et d'Internet, diminuant alors énormément les risques restant.
Mes appareils supportent cela, c'est une voie que je vais explorer si je trouve l'équipement adéquat d'occasion...

Et vous, comment faites-vous en pratique?

Lien vers le billet original

[annapurna]

bonjour, idem pour moi.

[Sergitest]

Moi je ne prends pas de photos de filles avec une robe fine en fort contre jour et en contre plongée qui rend les costumes transparents sans parler du cadrage.
Autrement dit , au lieu d’avoir des Terra octets de sauvegarde une technique à intégrer aussi est de travailler en amont à ce que les images soient de qualité à la base et en limiter ainsi le volume. Ça fait partie de la procédure sauvegarde.
La suite des procédures n est pas la même s il y a 5 To à sauvegarder ou 5Go.
Idem si la moitié des images sont perdues ce est pas grave non plus si les prises de vues ont été multipliée avec différents appareil par exemple. Ça fait aussi parti de la prise en compte du processus si on sait qu on a 2 appareils photos alors qu un seul aurait suffit.
Bon maintenant faut qu on voit d autres images plus jolies pour se projeter dans la problématique.

[Paul Emploi]

Je t'avouerais que ce que tu as écris m'a rendu perplexe, et comme artiste, insécure.
Car il y a un aspect artistique, personnel, tout en devant caler aux choix artistiques faits par l'organisateur et créateur, et il y a beaucoup d'inconnu et de doute aussi, à chaque étape.
J'en suis là à l'étape du déboisement, où je vire toute photo qui me parait inférieure. Je garde 1 photo sur 36 comme en argentique.
J'ai sélectionné cette photo rapidement, car je la trouvais représentative de l'instant et "montrable" même sans tirage (elle est totalement brute).

Je travaille pour le client, et voilà son avis sur la première de mes photos qu'il voit de cet évènement d'ailleurs, que je publie ici avec son accord:


Mais surtout, n'oubliez pas de sauvegarder!
Et d'avoir tout en double: pour l'ordinateur il y avait celui de ma moitié, pour le lecteur de cartes, celui intégré dans ce second ordinateur. Pour le doute, une seconde paire d'yeux!

[yvourss]

Moi ton image je la trouve top. T'inquiètes pas plus que ça, ceux qui vont chercher des problèmes là où il n'y en a pas ce sont souvent des gens qui ont un vrai problème.
Pour le le reste, la procédure de sauvegarde je trouve cela quand meme tres tres "conservatif. Mais si c'est pro, évidemment,..."

[Sergitest]

Si le client est content … enfin il a plus l’air d un ami biaisé mais bon … mais quand même on a pas le droit à une autre photo mieux exposée ou la même avec un petit flash et cadrée sans couper au milieu des mollets/genou/chevilles ? Au pire avec un filtre HDR Photoshop ..

[gpv]

Salut,

Dupliquer chaque élément de la chaine, ça c'est être Pro.
Quant au côté artistique, ne t'inquiète pas, tu n'es critiqué que par les envieux qui ne sont pas à ton niveau. (Comme l'a si bien dit Jean Ferrat : "Quand on n'interdira plus mes chansons, je serais bon à jeter sous les ponts").

Lorsque je travaillais, dans le milieu industriel, les sauvegardes c'était quotidiennement sur DLT, avec relecture après écriture (merci OpenVMS) et stockage des bandes dans un coffre ignifugé au sein d'un autre bâtiment que les serveurs.
10 bandes de sauvegarde quotidienne (2 semaines d'historique) ;
La sauvegarde du vendredi devenant la sauvegarde hebdomadaire, conservée sur 5 semaines ;
La sauvegarde du dernier jour ouvré du mois devenant la sauvegarde mensuelle, conservée sur 13 mois ;
La sauvegarde du dernier jour ouvré de décembre devenant la sauvegarde annuelle, conservée aussi longtemps que le serveur lui-même (ce qui a l'avantage de renouveler le stock de bandes...).

Concernant mes Mac (dont le 1er a été un G5), ça a toujours été des clones bootables sur des disques externes (SSD depuis le M2) avec redémarrage sur le clone et test de quelques applis et fichiers, en trois exemplaires en rotation (la nouvelle sauvegarde écrase la plus ancienne), la plus récente étant conservée chez un amis. (dont la sauvegarde de son PC, sous Linux, est conservée chez moi).

Le Mac de bureau est sauvegardé lorsque je ne veux pas perdre les nouveaux fichiers. Le Mac portable (contenant les mêmes photos, vidéos et musiques) est en plus sauvegardé avant chaque sortie.

Ce message a été modifié par gpv - 5 May 2024, 00:30.

[gimly]

je ne critiquerai jamais une contre plongé ou un contre jour car la c'est de la recherche artistique, meme un flou, qui ne plait pas, peut etre voulu. par contre un mauvais réglage technique peut etre critiqué

par contre pour le sauvegarde a distance, meme mon vieux dos phase one le fait deja avec son avec câble firewire, alors perso j'aurai deja mi un disque de sauvegarde groupé (raid ), en wifi, dans un coin de la salle

[Paul Naurd]

Merci Philippe, pour cette grande saga d'articles sur la stratégie de sauvegarde.
J'hallucine de voir qu'une personne se permette de critiquer gratuitement comme ça ton travail.

Personnelement je ne peux que lui répondre : "Moi je ne prends pas de photos de filles avec une robe fine en fort contre-jour et en contre plongée qui rend les costumes transparents sans parler du cadrage."
Primo : vous faites bien ce que vous voulez et Philippe fait bien aussi ce qu'il veut.
On appelle ça la liberté artistique.

Maintenant je sens poindre une certaine règle de puritanisme dans votre propos.
Bien que je pourrais digresser là-dessus, je ne vais pas vous dire que, au-delà de la photo de Philippe, en suivant votre principe, l'histoire de l'art ne serait pas allée bien loin.
Évitez de mettre un pied au Louvre ou au Musée d'Orsay, vous risquez de nous faire une petite syncope et de vous sentir obligé d'aller pondre un article sur leur forum...

Mais blague à part de toute façon, ce n'est pas le propos.
J'ai beau relire l'article de Phillipe, je ne vois pas une seule ligne qui vous demande votre avis.
Votre critique est donc totalement malvenue, en plus d'être ridicule dans son argumentation.
Libre à vous de penser ce que vous voulez, mais si vous vous vantez humblement de maitriser l'art de la photographie, vous avez beaucoup à apprendre dans celui de la bienséance et de la communication.

Revenons à nos moutons : la sauvegarde.
Moi je suis réalisateur de documentaire. Je cadre moi-même la plupart du temps.
Je suis un peu moins sécure que toi Philippe : je filme sur une seule carte en général ( certaines caméras ont de toute façon qu'un seul slot CFAST ).
En déplacement, le soir, une fois le tournage terminé : tout est dupliqué sur 2 disques.
Et ce à toute heure... Je ne compte pas les tournages ou la sauvegarde est faite à 1 ou 2 heures du matin, une fois certaines contraintes terminées.
À ce sujet : vive les SSDs. J'ai travaillé avec une prod qui a utilisé très longtemps des disques mécaniques comme système de sauvegarde sur le terrain... oui oui...
J'avais beau leur dire, rien n'y faisait. Le prod qui faisait les sauvegardes n'était pas la personne qui décidait des achats... Du coup les longues sauvegardes à 2 heures du matin, quand tu es crevé et que ca repart le lendemain 7h... super...
D’autant que tu dois enregistrer Cam A, Carte 1 + 2, Cam B, Carte 1+2, Son Perche, Son HF etc...
Bref maintenant ca va bcp plus vite ^^

Depuis plusieurs années je bosse sur un documentaire au long court. Je suis plusieurs personnes sur des années. Je gère les sauvegardes moi-même. La prod m'a donné un disque. Pour ce projet, je triple, voir quadruple le soir en rentrant chez moi du tournage.

Trois sauvegardes à la maison et un backup à 800km. La prod m’a proposé un cloud, mais pour des raisons qui me sont propres, je préfère gérer et conserver mes rushs pour le moment.

En tout cas, je suis dans le monde vidéo numérique depuis 30 ans... Je passe ma vie à acheter des disques dur ( quand je pense que j’appelais, mes premiers disques durs de 1 Terra : Massive1TO, hahahaha )

[g4hd]

Nos maîtres en argentique noir et blanc disposaient d'un ou deux appareils chargés chacun pour quelques dizaines de clichés.
Pas question de gaspiller, donc c'est sûr que le coup d'oeil pour cadrer et saisir l'instant… c'était primordial.
Aujourd'hui, le photographe numérique est à même de rafaler sans réfléchir et choisir après coup l'image fortuite qui excite enfin le coup de génie dû autant au hasard qu'à l'habileté de l'artiste… lourdement armé pour engranger des To au lieu de quelques précieux Mo.

C'est sous cet angle que je lis le post-it de Sergitest qui a, hélas, débordé avec agressivité du sujet (les sauvegardes numériques).
Et pour témoigner sur le sujet, j'utilise mon iPhone en essayant de composer mes prises de vues "à l'ancienne" et en nombre très réduit, jamais de rafales… puis je jette sans remords les erreurs.
Mais c'est un comportement d'amateur, pas du tout le travail qui consiste à couvrir un évènement pour le compte d'un client qui en veut pour son argent(-tic-tic !).


Astuce : j'aime bien régler l'écran en mode Noir et blanc pour la prise de vues… ça oblige à observer-travailler la composition.
Et nos appareils d'aujourd'hui sont géniaux : l'image est enregistrée en couleurs qu'on peut restituer au choix, après coup.

[Paul Naurd]

Certes, mais ce n'est pas le sujet de l'article.
C'est à propos de stratégies de sauvegardes, peut importe si ce sont des photos, des vidéos, des jeux...
Philippe écrit un article pour Macbidouille, il n'a pas sollicité vos avis sur sa façon de faire de la photographie.
C'est ouf de se permettre de dire à quelq'un que vous ne connaissais pas, qui donne de son temps pour faire vivre un site gratuitement : ce que tu fais, tu le fais mal... Vous avez rien d'autre à faire ?

Nos maîtres en argentique noir et blanc disposaient d'un ou deux appareils chargés chacun pour quelques dizaines de clichés.
Pas question de gaspiller, donc c'est sûr que le coup d'oeil pour cadrer et saisir l'instant… c'était primordial.
Aujourd'hui, le photographe numérique est à même de rafaler sans réfléchir et choisir après coup l'image fortuite qui excite enfin le coup de génie dû autant au hasard qu'à l'habileté de l'artiste… lourdement armé pour engranger des To au lieu de quelques précieux Mo.

C'est sous cet angle que je lis le post-it de Sergitest qui a, hélas, débordé avec agressivité du sujet (les sauvegardes numériques).
Et pour témoigner sur le sujet, j'utilise mon iPhone en essayant de composer mes prises de vues "à l'ancienne" et en nombre très réduit, jamais de rafales… puis je jette sans remords les erreurs.
Mais c'est un comportement d'amateur, pas du tout le travail qui consiste à couvrir un évènement pour le compte d'un client qui en veut pour son argent(-tic-tic !).


Astuce : j'aime bien régler l'écran en mode Noir et blanc pour la prise de vues… ça oblige à observer-travailler la composition.
Et nos appareils d'aujourd'hui sont géniaux : l'image est enregistrée en couleurs qu'on peut restituer au choix, après coup.

[g4hd]

Hélas… c'est la contamination des réseaux X ou Facebook et similaires, farcis d'agressivité masquée lâchement sous les pseudos !
Plus des relents de wokisme.

[cafefroid]

Ah non, Philippe, ne te fais pas démolir pour si peu.
C’est ta sensibilité d’artiste qui te joue des tours !

Ce message a été modifié par cafefroid - 6 May 2024, 14:37.

[Paul Emploi]

Au passage, j'applique aussi des stratégies lors des déplacements, ce que j'ai du appliquer il y a une semaine, en m'assurant que les données soient à plusieurs endroits simultanéments, que ça soit pour les photos mais aussi pour les sauvegardes.
Je reviendrais dessus dans cette série, notamment lorsque je vais parler du chiffrement des stockages.

Pour mon Mac que j'ai emporté, j'ai évidemment de la sauvegarde chez moi.
Pour les photos au retour, une copie chiffrée a été confié à un des organisateurs sur place, et j'avais mon petit SSD sur moi.
Là c'est pour prévenir les risques de vol, incendie, accident, etc.

Je vais aussi aborder la question de la sauvegarde distante, ou quand vous êtes distant, et là la clé USB ou la microSD vont se révéler utiles!

[Sergitest]

Désolé mais la stratégie de sauvegarde doit dépendre de l’enjeu !
Si c est la sauvegarde d’un événement unique à 10 millions d euros avec une seule prise ou une éclipse totale de soleil à Sherbrooke
Ce n est pas la même chose que si c est une photo souvenir floue volée d’une pièce de théâtre qui joue depuis 60 ans..
Alors la forme du propos dérange peut être certains mais c est un paramètre à prendre en compte et le post original demandait à la manière des posts sur réseaux sociaux qui demandent à faire un commentaire pour faire plaisir à l’algo :
“ Et vous, comment faites-vous en pratique?”
Je persiste que si je vois que les photos sont ratées car le flash a pas marché , ben c est pas la peine de faire des sauvegardes et faudra recommencer la prise de vue un autre jour. Mais ce n est que mon avis de comment moi je fais. L article disait pas que c était de la recherche artistique non plus mais plutôt pour de la documentation plutôt objective .

Quand aux News de Philipe je les apprécie aussi sinon je ne serais pas là mais c est pas le sujet.

Ce message a été modifié par Sergitest - 7 May 2024, 00:40.

[Paul Naurd]

Ça va oui ? Tranquille toi. Génial ton expertise ...
Si tu veux, on t'envoie nos images et vidéos, tu pourras nous dire si elles méritent d'être sauvegardées, ça nous fera des économies ...

Mais en fait tu dois surement être une star de la photographie sous pseudo non ?
Avec une telle arrogance, je suis certain que tu es reconnu dans ton milieu, que tu exposes partout, que tes photos sont publiées dans les meilleurs magazines et ouvrages artistiques.
T'es trop un pro en fait...

Désolé mais la stratégie de sauvegarde doit dépendre de l’enjeu !
Si c est la sauvegarde d’un événement unique à 10 millions d euros avec une seule prise ou une éclipse totale de soleil à Sherbrooke
Ce n est pas la même chose que si c est une photo souvenir floue volée d’une pièce de théâtre qui joue depuis 60 ans..
Alors la forme du propos dérange peut être certains mais c est un paramètre à prendre en compte et le post original demandait à la manière des posts sur réseaux sociaux qui demandent à faire un commentaire pour faire plaisir à l’algo :
“ Et vous, comment faites-vous en pratique?”
Je persiste que si je vois que les photos sont ratées car le flash a pas marché , ben c est pas la peine de faire des sauvegardes et faudra recommencer la prise de vue un autre jour. Mais ce n est que mon avis de comment moi je fais. L article disait pas que c était de la recherche artistique non plus mais plutôt pour de la documentation plutôt objective .

Quand aux News de Philipe je les apprécie aussi sinon je ne serais pas là mais c est pas le sujet.

Ce message a été modifié par Paul Naurd - 7 May 2024, 08:59.

[Hebus]

Il y a une vingtaine d’années, j’avais des photos d’un collègue de travail, notre IT venu me visiter dans le sud en vacance, une crème ce garçon, d’une gentillesse infinie, décédé à 35 d’une maladie du sang, les photos étaient uniquement sur le disque dur du Titanium G4 du taff, le disque dur a lâché, j’ai perdu ces précieuses photos, il n’avais pas 2 ans ce disque ! Je ne sais plus si elles étaient floues et on s’en fout…

Grande tristesse de n’avoir pu les montrer à sa mère, le jour de la cérémonie pour lui dire adieu

20 ans plus tard j’y pense encore !

Ce message a été modifié par Hebus - 7 May 2024, 10:00.

[Alex5555]

En tant qu’amateur (au sens où mon mac et les iBidules autours sont pour un usage perso/loisir) j’avoue que suivre les « samedis sécurité » ça rend parano.
J’exagère parce qu’en fait non, ça rend pas parano, ça remet les pieds sur terre.
Qu’est ce qu’il y a à sauvegarder : ça va en partie répondre à ce qui est dit plus haut. Tout ce qu’on a envie de sauvegarder.
J’ai mes cours d’étudiants (alors on se détend, j’ai plus 20 ans, les cours étaient sur papier mais on avait quelques ressources sur informatiques, mémoires de stage, soutenances, ppt etc…). Pourquoi garder le mémoire de fin d’étude du stage truc chez Xxx ?… Ben peu importe, ça n’intéresse plus que moi pour peu que ça ait intéressé qq’un un jour. Mais en gardant ça on fait la même chose que les anciens qui ont recopié des tas d’écrit pour les diffuser, c’est pour la mémoire de l’humanité.
Idem pour les papiers administratifs : exemple j’ai fait une rectification de nom de famille, procédure simple quand l’erreur découle de l’administration. J’ai gardé les papiers (mais aussi les versions scannees). Je le mets dans mes sauvegardes. Pourtant on s’en fout, c’est fait et acté.
Les photos de mes téléphones (et auparavant appareils numériques), en vacances, en soirée, en mariage, naissances… etc. Des milliers de photos, avec des doublons « tiens, il sourit, attends, arf, il va recommencer, trop tard… 7 photos, un sourire sur 1 seule et encore c’est à contre jour.
La stratégie va dépendre en effet, de ce à quoi on accorde de l’importance.
Au final, je sauvegarde sur un dd externe de bureau, un dd portable, et un nas (raid 5) (+ cloud pour les données de santé mais c’est une question pratique). Je ne suis pas régulier dans mes sauvegardes. Ma seule priorité ce sont les photos : Sauvegardées sur tous les supports et régulièrement. (Au pire en cas de défaillance de mon iPhone, je perds mes dernières semaines de souvenir).le reste c’est dans le tas de sauvegarde, mais je m’enquiquine pas plus que ça.
Il y a quelques semaines, petite alerte pendant les vacances, crainte d’un cambriolage. J’ai passé une nuit blanche (en attente de rentrer chez moi j’étais loin etc…) à penser à ce qui me ferait le plus chier. Les photos ! Pourtant je les regarde rarement, je ne les tries pas. Le reste on s’en fout en réalité. Je sauvegarde parce que je peux. Les photos. Je sauvegarde parce que je veux les garder. Dans cet exemple ma crainte était que des dégâts (incendie, eaux etc..) aient pu endommager tous les supports (qui sont dans des pièces différentes).

Pour un pro, je comprends que l’usage sera de sauvegarder en fonction du besoin. Si couvrir un événement (faut voir les circonstances) ça demande de remplir des cartes mémoires en peu de temps, je comprends le besoin de sauvegarder la source en masse. Un autre pro, aura peut être le temps été trier avant de sauvegarder.
Pas sur que le photographe sur le bord du terrain de final de coupe du monde regarde sa rafale du but pour ne garder que la belle photo, pendant que le contre se joue sur le terrain.

Et parce que ça démange : la photo d’illustration de l’article je n’avais même pas pensé qu’elle venait de l’événement en question. Je me suis dit, photo d’illustration trouvée dans une bibliothèque quelconque pour faire style « événementiel ». C’est ni péjoratif ni flatteur mais des photos de cette qualité on en trouve partout en illustration de plein de chose. Je dirais même qu’en lisant le commentaire qui parle de flash que je ne comprend pas : tout l’intérêt de cette photo c’est qu’elle ne montre aucun visage, rien de plus qu’une scène qui me fait clairement pensé à une fête un peu branchée. En plus on ne connaît ni l’évènement, ni le cahier des charges.
Typiquement elle serait en page d’accueil d’un site d’un cabaret / repas spectacle, je serais bon pas surpris.
autre chose : le « et vous … » ça veut dire - débattons du sujet, comment vous vous y prenez, raconter comme le fait l’auteur de la news, sur la base d’un vécu et d’une méthode. Ça veut pas dire « et vous que pensez vous de mon style d’écriture ? Ou de la photo d’illustration ? »

[Sergitest]

Autre sujet :

En quoi l’ia change votre stratégie de sauvegarde ?

Sauvegarder 1500 photos d’un événement ,il y a beaucoup de redondance.
Au final on imagine si on donne 5 photo à une ia générative et elle reconstruit tout.
Les vues avec les yeux ouverts , les sourires , mais aussi les vues de derrières, en 3D, meme des films à partir des photos.
D’un point de vue compression de données, c est comme si il ne fallait plus voir
une photo comme un fichier isolé mais comme une image dans un film. La compression ne stocke que ce que il y a de différent dans une image par rapport à la précédente.
Mais avec l’ia et le cloud, il faut imaginer que il ne faudrait stockier que ce que les 1500 photos apportent de nouveau non pas entre elle mais en prenant en compte toutes les photos de l’humanité qui ont déjà été prises et à partir desquelles l’ia a appris.
On pourrait imaginer que 1500 photos d un spectacle ne prenne en fin de compte que quelques ko.
Alors pourquoi sauvegardez vous tant de photos ? Pour servir de base d apprentissage aux ia ?🤖

Comme précédemment ,ça serait dommage de répondre en regardant le doigt de celui qui pointe la lune et de juste dire que vous sauvegardez ce que vous voulez et que vous n’avez pas confiance aux fake News générées par ia, et que vous voulez les vrais choses. Ok
Mais comment intégrer qu’il faut se concentrer que sur ce que l IA globale ne pourra pas régénérer demain ?

Je n ai Jamais entendu parler d Algo de compression dans le cloud qui sache fournir une fois décompressé un jpeg en sortie et qui se base sur plusieurs jpeg en sa possession dans le cloud par exemple. Une sorte de .zip d’un dossier de .jpeg mais en plus intelligent.

[captaindid]

Autre sujet :
En quoi l’ia change votre stratégie de sauvegarde ?
Sauvegarder 1500 photos d’un événement ,il y a beaucoup de redondance.
Au final on imagine si on donne 5 photo à une ia générative et elle reconstruit tout.
...

Il ne faut pas fantasmer sur ce que peut faire une IA. Elle ne va pas pouvoir générer des photos de cet évènement, mais seulement des photos sur le thème de ce genre d'évènement, ce qui est très différent!
De plus, contractuellement, Philippe devait prendre des photos de cet évènement et pas fournir des photos génériques d'évènement, ce que fait une IA puisqu'elle se base sur des milliers de photos d'évènements similaires pour la générer.

De plus il a certainement voulu saisir des moments particuliers, dans des positions particulières, des compositions particulières, qui sont uniques et impossibles de re-générer via une phrase du genre:
fais moi une photo d'un évènement où on voit des mannequins avec des chapeaux bizarres et des robes bigarrées et étincelantes ...

Je n ai Jamais entendu parler d Algo de compression dans le cloud qui sache fournir une fois décompressé un jpeg en sortie et qui se base sur plusieurs jpeg en sa possession dans le cloud par exemple. Une sorte de .zip d’un dossier de .jpeg mais en plus intelligent.

et pour cause!
un algo de type ZIP, bien souvent à base d'algo LZW compresse de manière non destructive, puis décompresse pour obtenir exactement le même fichier que l'original, au bit près.
là, tu suggères de ne plus prendre tes photos de quelque chose qui était devant toi, mais de te contenter d'avoir les photos d'un autre (au hasard un certain M. midjourney ou une certaine Mme DALL-E) sur une scène de quelque chose qui n'existe pas, qui n'est pas un de tes souvenirs, mais qui est sur le même thème :
- un couple devant sa maison de campagne (mais des gens inconnus devant une maison tout aussi inconnue)
- un paysage de montagne sur fond de soleil couchant (mais d'une quelconque montagne qui n'existe pas mais ressemble à beaucoup d'autres)
- etc ...

quand je pense que sur ce même forum (pas sur ce thread) beaucoup de gens s'indignent car pour eux les smartphones travestissent la réalité, juste parce qu'ils font juste un traitement qui améliore la photo en débruitant ce que le minuscule capteur peut fournir, au prix d'un lissage des textures, qu'ils améliorent la colorimétrie et la dynamique pour faire des photos plus aguicheuses ...
avec la solution que tu aimerais, ces mêmes personnes sont déjà en PLS

[Jedge]

Je n ai Jamais entendu parler d Algo de compression dans le cloud qui sache fournir une fois décompressé un jpeg en sortie et qui se base sur plusieurs jpeg en sa possession dans le cloud par exemple. Une sorte de .zip d’un dossier de .jpeg mais en plus intelligent.

Pour ceux qui connaissent les stockage pro de type SAN ça s'appel de la déduplication, chaque élément similaire n'est stocké physiquement qu'une seule fois et les autres ne sont que des alias qui renvoient vers l'unique élément. Ce n'est pas miraculeux mais on peut espérer un gain assez important au total.

[captaindid]

Je n ai Jamais entendu parler d Algo de compression dans le cloud qui sache fournir une fois décompressé un jpeg en sortie et qui se base sur plusieurs jpeg en sa possession dans le cloud par exemple. Une sorte de .zip d’un dossier de .jpeg mais en plus intelligent.

Pour ceux qui connaissent les stockage pro de type SAN ça s'appel de la déduplication, chaque élément similaire n'est stocké physiquement qu'une seule fois et les autres ne sont que des alias qui renvoient vers l'unique élément. Ce n'est pas miraculeux mais on peut espérer un gain assez important au total.

ce que tu décris permet effectivement de gagner de la place : ne pas stocker N fois un fichier mais seulement une fois et le reste étant des liens/alias vers ce fichier.
mais dans le cadre de cette discussion où on essaie de sauvegarder le même fichier à plusieurs endroits au cas où une sauvegarde viendrait à défaillir, la technique que tu décris reste très fragile: si le support du fichier sauvegardé défaillé, toutes les références à ce fichier (liens, alias ...) pointent vers du vide : le fichier est perdu. Plus grave, ça donnait à l'utilisateur le sentiment que son fichier était à plusieurs endroits donc "en sécurité", alors que pas du tout!

[Sergitest]

J'ai fait le test avec une base de 100 images (seulement).
A qualité identique, si on enregistre chaque fichier séparément d'une part

ou avec mon algo si on compresse les 100 images d'un coup (chacune profitant de l'apprentissage des autres)
=> on divise par 2 la taille a qualité identique !!!

On fait 2 fois mieux que le JPEG !

A gauche morceau d'une image compressée en JPEG, on arrive a 200Mo pour 100 images.
Au milieu avec mon algo le meme morceau d'image mais qui ne prend que 100Mo
A droite la première image en JPG plus compressée pour atteindre aussi 100Mo

Il n'y a pas photo mon algo du milieu est génial pour reprendre le mot d'un message plus haut et 2 fois mieux que le jpeg que tout le monde emploie de nos jours ... !

Fichier(s) joint(s)

 Capture_d___e__cran_2024_05_09_a___18.01.41.jpg ( 216.96 Ko ) Nombre de téléchargements : 8

 

[captaindid]

tu parles de "mon algo" : quel est-il?
concrètement quels outils utilises-tu?

le JPEG n'est plus l'algo le plus efficace depuis longtemps

tu compresses 100 images d'un coup: sont elles toutes semblables (1) , ou y en a-t-il de très différentes (2) ?

je ne me rend pas bien compte avec l'exemple donné: un détail d'une image qui ne m’évoque rien!
Je vois des petits détails différents mais qui est le plus proche de la source, non compressée (ou très peu) ?

(1) : premier cas d'usage: 100 photos de la manifestation en exemple de l'article plus haut, qui photographient toujours les mêmes mannequins avec les mêmes colorimétries, les mêmes conditions lumineuses etc ...
là, il y a certainement des caractéristiques communes qu'une IA pourra peut être exploiter

(2) : deuxième cas d'usage: 100 photos prises lors d'un WE ou de vacances: toutes très différentes: sujets, conditions (plein jour, nuit tombante ... extérieur, intérieur etc ...) donc pas de point commun: un algo de compression devra traiter les photos une par une indépendamment

[Sergitest]

(1) et (2) c'est la même chose, car même si les photos sont "tres differentes", parmi 100, elles ne le seraient pas, parmi dix milliards de photos car parmi les 10 milliards de photos, il y en auraient d'autres photos qui ressembleraient à chacune des 100.
Donc dans mes 100 photos, biensûr ce n'est pas représentatif de dix milliards et c'est biaisé, mais bon.
Dans le (1) "il y a certainement des caractéristiques communes qu'une IA pourra peut être exploiter", c'est tout. c'est gagné. car aujourd'hui il n'y a pas d'algo qui permettent de gagner sur un lot de photos en considérant le lot. Ca permettrait de diviser par 2 l'espaces des photos sur iphone par exemple.

J'ai quand même décrit les grandes lignes ci-dessus de mon algo, mais il n'est pas open source faut que j'y ajoute des commentaires etc mais je veux bien le faire tourner sur un autre lot de 100 photos..

J'ai essayé de joindre une photo, mais je ne sais pourquoi il y en a plusieurs, c'est la meme.

Ce message a été modifié par Sergitest - 9 May 2024, 21:11.

Fichier(s) joint(s)

 Capture_d___e__cran_2024_05_09_a___21.37.57.jpg ( 304.67 Ko ) Nombre de téléchargements : 6
 Capture_d___e__cran_2024_05_09_a___21.37.57.jpg ( 304.67 Ko ) Nombre de téléchargements : 3
 Capture_d___e__cran_2024_05_09_a___21.37.57.jpg ( 304.67 Ko ) Nombre de téléchargements : 2
 Capture_d___e__cran_2024_05_09_a___21.37.57.jpg ( 304.67 Ko ) Nombre de téléchargements : 4

 

[captaindid]

(1) et (2) c'est la même chose, car même si les photos sont "tres differentes", parmi 100, elles ne le seraient pas, parmi dix milliards de photos car parmi les 10 milliards de photos, il y en auraient d'autres photos qui ressembleraient à chacune des 100.
Donc dans mes 100 photos, biensûr ce n'est pas représentatif de dix milliards et c'est biaisé, mais bon.
Dans le (1) "il y a certainement des caractéristiques communes qu'une IA pourra peut être exploiter", c'est tout. c'est gagné. car aujourd'hui il n'y a pas d'algo qui permettent de gagner sur un lot de photos en considérant le lot. Ca permettrait de diviser par 2 l'espaces des photos sur iphone par exemple.

J'ai quand même décrit les grandes lignes ci-dessus de mon algo, mais il n'est pas open source faut que j'y ajoute des commentaires etc mais je veux bien le faire tourner sur un autre lot de 100 photos..

J'ai essayé de joindre une photo, mais je ne sais pourquoi il y en a plusieurs, c'est la meme.

ce que tu dis est intéressant, je n'aurai pas pensé à l'IA pour la compression de photos, mais plutôt à des algo plus classiques (ceux utilisés dans les formats de fichiers images, actuels et à venir : JPEG, JPEG2000 , par ondelettes, par fractales, HEIF, WEBP etc...
pourrais-tu en dire plus sur cet algo, dont tu es apparemment un des développeurs?

"parmi 10 milliards de photos": ceci me suggère les 3 réflexions suivantes:
1 - ça passe donc par le cloud? l'idée de soumettre mes photos (et pourtant je n'ai rien à cacher) à une entité pour qu'elle les traite:
qu'en fait-elle après? pour son propre usage, surtout si cela est gratuit!
car selon l'adage bien connu : si le produit est gratuit, ce que tu es le produit
2 - quelle quantité d'énergie tout cela consomme-t-il? toutes ses infrastructures "invisibles" (car distantes) consomment énormément d'énergie.
3 - une interrogation d'ordre technique, dont je n'ai pas la réponse:
- compresser 100 photos semblables (ex: mon premier cas d'usage: l'évènement de Philippe en illustration de son article) qui se ressemblent toutes (même sujets, même conditions lumineuses etc...) : ça me semble judicieux, en effet: si l'IA sait extraire la caractéristique commune de ces photos pour ne l'inclure qu'une seule fois dans le lots de 100, puis pour chaque photos, n'y mettre que ce qui diffère, on doit pouvoir gagner de la place.
- compresser 100 photos disparates (ex: mon deuxième cas d'usage), que ce soit en se basant uniquement sur ces 100 photos, ou sur plusieurs milliards venant du cloud: j'ai du mal à imaginer comment l'IA va réussir à trouver le point commun de ces photos, en fait il n'y en a pas à priori.
j'aimerai bien avoir une réponse à ce défi technique

[jeandemi]

La bonne question à se poser, c'est "est-ce vraiment utile de garder une série de photos qui sont proches ou similaires?"
Un bon tri avec une bonne sélection des meilleures images avec élimination du superflu est le meilleur moyen de gagner de la place!

Ce message a été modifié par jeandemi - 11 May 2024, 20:28.

[Paul Emploi]

Les photographes gardent beaucoup de photos, hors erreur technique, car nul ne peut prévoir l'avenir.
Et si dans une série une photo parait la bonne pour un contexte spécifique, par exemple celui dans lequel a été réalisé la photo, un autre contexte pourra amener à en sélectionne une ou des autres de la même série.

De la même manière, les photographes ne stockent pas de JPEG en général, à cause de la perte d'information de différentes façons même en l'absence de perte lors de la quantization, et de la possibilité de profiter ultérieurement de meilleurs traitements de derawtisation.

Diminuer l'espace de stockage nécessaire pour l'archivage est une bonne idée, mais elle se heurte au nombre incroyable de formats de fichiers et de spécificités au sein même de ces formats, appareil par appareil.

[jeandemi]

J'ai fait récemment le reportage d'un baptême d'une amie (baptême d'adulte, ce n'est pas courant)
350 photos environ (je suis déjà économe à la prise de vues), gardé environ 180, la moitié donc passe à la benne.
Le reste de la sélection sera faite par elle. Ce que j'ai estimé pas bon, elle n'en connaîtra jamais l'existence

Avant je gardais tout, ou trop. J'ai décidé d'être beaucoup plus sélectif et que, si j'ai décidé qu'une photo n'était pas bonne à l'instant T, elle ne sera pas bonne à T+1 ou T+36000.

Pareillement, je fais les photos en RAW + JPEG (pour un accès rapide et/ou par sécurité), une fois les photos RAW triées et traitées puis délivrées, les JPEG sortis du boîtier passent à la benne. Je garde un ou deux mois les JPEG traités en version full + réduits pour le web, puis je les jette aussi, en ne gardant que les RAW.
Si c'est pour un client occasionnel, je ferais l'inverse, garder les JPEG full et virer les RAW car je ne reviendrai jamais dessus.
S'il y a une photo vraiment exceptionnelle dans le lot, je la garderai évidemment de côté, RAW + JPEG full

L'editing fait partie du travail photographique, et ce n'est ni la partie la plus simple, ni la plus sympa, de ce travail, mais elle est indispensable. Si tu cherches une photo particulière, vas-tu chercher dans 300 dossiers de milliers de photos ? Jamais, tu seras découragé dans ta recherche.
C'est comme un fichier pas rangé, ça équivaut à un fichier perdu