Forum |  HardWare.fr | News | Articles | PC | S'identifier | S'inscrire | Shop Recherche
1968 connectés 

 

Sujet(s) à lire :
    - Who's who@Programmation
 

 Mot :   Pseudo :  
  Aller à la page :
 
 Page :   1  2  3  4  5  ..  22566  22567  22568  ..  27191  27192  27193  27194  27195  27196
Auteur Sujet :

[blabla@olympe] Le topic du modo, dieu de la fibre et du monde

n°2316943
BenO
Profil: Chercheur
Posté le 14-06-2018 à 09:45:25  profilanswer
 

Reprise du message précédent :

el muchacho a écrit :


Et la réponse: https://dzone.com/articles/on-ubers-choice-of-databases
 
En gros, ils ne sont pas passés de PostgreSQL à MySQL mais de PostgreSQL à du NoSQL similaire à Google BigTable. Leur vrai problème est qu'ils ont dépassé les limites d'un RGDB. C'est facile d'imaginer qu'avec une flotte de 10 000 taxis envoyant leur position toutes les 10s, ça fait 100k inserts/s, ce qui dépasse les capacités de Postgres d'un facteur 5 grosso merdo (MySQL est un peu plus rapide, mais pas de beaucoup).
Et il s'avère que pour faire une base NoSQL, MySQL en shard est un bon back-end. Mais bon, ils n'ont fait que réimplémenter Cassandra en moins bien.


 

el muchacho a écrit :


Normal si t'as quelques centaines de millions de lignes indexées. Les index bouffent autant de place que les données si ce n'est plus.


 
J'ai environ 15 milliards de lignes :o avec un index de type Clustered qui duplique l'intégralité de chaque ligne.


---------------
Python Python Python
mood
Publicité
Posté le 14-06-2018 à 09:45:25  profilanswer
 

n°2316944
Jubijub
Parce que je le VD bien
Posté le 14-06-2018 à 09:52:47  profilanswer
 

gfive a écrit :


 
C'est pour le voyage en Russie en septembre : je dois prendre les billets qui devraient m'être remboursés par le musée qui nous invite quand on aura nos passeports (les demandes sont faites, on les aura dans 3 semaines)
 
Donc les risques d'annulation, c'est en cas de maladie (et encore, si c'est un des enfants on peut aussi le laisser une semaine avec ses grands parents), ou problème majeur type géopolitique qui rendrait le voyage compliqué...  
On n'aura aucun autre frais sur place (sauf pour les 2 jours qu'on passe à Moscou, soit 2 nuits d'hôtel, quoi).
 


Regarde les conditions de ta CB, ça peut suffir dans ces cas là


---------------
Jubi Photos : Flickr - 500px
n°2316945
flo850
moi je
Posté le 14-06-2018 à 10:01:50  profilanswer
 


 
C'est une bonne approche ( celle d'heroku)
ça a au moins 5 ans, je l'avais utilisé pour mobops en 2012 -2013


---------------

n°2316946
Dion
Acceuil
Posté le 14-06-2018 à 10:05:43  profilanswer
 


Le jour où tu vas découvrir Heroku tu seras tellement heureux  :love:


---------------
It is not called show art
n°2316948
el muchach​o
Comfortably Numb
Posté le 14-06-2018 à 12:28:53  profilanswer
 

Ouais mais je parle à Harko moi :o


---------------
Les aéroports où il fait bon attendre, voila un topic qu'il est bien
n°2316949
DDT
Few understand
Posté le 14-06-2018 à 13:47:24  profilanswer
 

https://medium.com/@adamhooper/in-m [...] 761243e434
 
Est-ce que c'est pour ça que le forum supporte ⭐ mais pas [:daddyfatsax:5] par exemple?


Message édité par DDT le 14-06-2018 à 13:48:19

---------------
click clack clunka thunk
n°2316950
sligor
Posté le 14-06-2018 à 13:57:55  profilanswer
 

Citation :

Of course, they never advertised this (probably because the bug is so embarrassing).


si c'est vraiment la raison alors c'est "techniquement criminel" :/ on ne cache pas un bug sérieux sous le tapis. C'est bien plus embarrassant que le bug lui même

Message cité 2 fois
Message édité par sligor le 14-06-2018 à 13:58:23
n°2316951
Xavier_OM
Monarchiste régicide (fr quoi)
Posté le 14-06-2018 à 14:03:48  profilanswer
 

Je ne fais pas de mysql mais en tout cas je savais qu'il fallait utf8mb4, c'est pas "si" obscure que ça comme savoir


---------------
Il y a autant d'atomes d'oxygène dans une molécule d'eau que d'étoiles dans le système solaire.
n°2316952
gelatine_v​elue
Posté le 14-06-2018 à 14:05:18  profilanswer
 

sligor a écrit :

Citation :

Of course, they never advertised this (probably because the bug is so embarrassing).


si c'est vraiment la raison alors c'est "techniquement criminel" :/ on ne cache pas un bug sérieux sous le tapis. C'est bien plus embarrassant que le bug lui même

 

Cet article explique bien la possible raison: aligner les columns de type char sur une largeur prévisible pour permettre un gain de perf sans exploser la taille des tables.


Message édité par gelatine_velue le 14-06-2018 à 14:05:44
n°2316953
el muchach​o
Comfortably Numb
Posté le 14-06-2018 à 14:20:58  profilanswer
 

BenO a écrit :


J'ai environ 15 milliards de lignes :o avec un index de type Clustered qui duplique l'intégralité de chaque ligne.


C'est beaucoup :o


---------------
Les aéroports où il fait bon attendre, voila un topic qu'il est bien
mood
Publicité
Posté le 14-06-2018 à 14:20:58  profilanswer
 

n°2316954
masklinn
í dag viðrar vel til loftárása
Posté le 14-06-2018 à 14:24:27  profilanswer
 

sligor a écrit :

Citation :

Of course, they never advertised this (probably because the bug is so embarrassing).


si c'est vraiment la raison alors c'est "techniquement criminel" :/ on ne cache pas un bug sérieux sous le tapis. C'est bien plus embarrassant que le bug lui même


Le post est faux, c'est pas un bug c'est une décision / un raccourci technique sciemment implémenté typique de la grande époque mysql, ça n'avait rien de secret.

 

C'était un hack parce-que "personne n'a besoin des plans astraux" donc ils ont décidé de se faciliter la vie, d'implémenter cette "optimisation"[0] et de supporter que le BMP, avec double combo failles de sécurité et arrivée des "emoji" dans le SMP en 2010. À noter que cette décision était en 2004, pas genre en 1995.

 

[0] parce qu'avec leurs index moisis, utf8mb4 ne permettait pas d'indexer au dessus du VARCHAR(191): ils pouvaient pas indexer des colonnes de plus de 767 octets, utf8mb4 est stocké en UTF32, donc VARCHAR(192) fait 768 octets et passait pas [:jar jar] Ça a été fixé genre en 2015.

Message cité 1 fois
Message édité par masklinn le 14-06-2018 à 14:34:38

---------------
I mean, true, a cancer will probably destroy its host organism. But what about the cells whose mutations allow them to think outside the box by throwing away the limits imposed by overbearing genetic regulations? Isn't that a good thing?
n°2316956
sligor
Posté le 14-06-2018 à 14:52:08  profilanswer
 

it's not a bug it's a feature ©

n°2316958
BenO
Profil: Chercheur
Posté le 14-06-2018 à 14:58:36  profilanswer
 

el muchacho a écrit :


C'est beaucoup :o


 
et on me demande si on peut supporter x100 [:canard rouge:3]


---------------
Python Python Python
n°2316959
Shinuza
This is unexecpected
Posté le 14-06-2018 à 15:01:03  profilanswer
 

Re: Les services de musique en ligne. Amazon a inclu son offre musicale dans le Prime. Du coup, l'intêret de prendre un abonnement chez un tiers est largement diminué, quelqu'un l'a utilisé ou testé? L'app est bien notée sur le store, c'est déjà ca...


---------------
Mains power can kill, and it will hurt the entire time you’re dying from it.
n°2316960
Blackyell
$question = $to_be || !$to_be;
Posté le 14-06-2018 à 15:05:20  profilanswer
 

Shinuza a écrit :

Re: Les services de musique en ligne. Amazon a inclu son offre musicale dans le Prime. Du coup, l'intêret de prendre un abonnement chez un tiers est largement diminué, quelqu'un l'a utilisé ou testé? L'app est bien notée sur le store, c'est déjà ca...

 

Une version très light :o

 

De mémoire, il n'y a que 10% des titres je crois.

Message cité 1 fois
Message édité par Blackyell le 14-06-2018 à 15:05:36
n°2316961
Shinuza
This is unexecpected
Posté le 14-06-2018 à 15:12:57  profilanswer
 

Blackyell a écrit :


 
Une version très light :o
 
De mémoire, il n'y a que 10% des titres je crois.


En effet, cela n'a pas l'air très clair  [:daddyfatsax:5]


---------------
Mains power can kill, and it will hurt the entire time you’re dying from it.
n°2316962
el muchach​o
Comfortably Numb
Posté le 14-06-2018 à 15:13:10  profilanswer
 

BenO a écrit :


et on me demande si on peut supporter x100 [:canard rouge:3]


C'est du big data :o
Ou alors faut jeter des données et ne garder que celles qui sont vraiment pertinentes avec un filtrage intelligent à l'entrée.
C'est quoi le use case qui génère autant de données ?

Message cité 1 fois
Message édité par el muchacho le 14-06-2018 à 15:15:58

---------------
Les aéroports où il fait bon attendre, voila un topic qu'il est bien
n°2316963
Blackyell
$question = $to_be || !$to_be;
Posté le 14-06-2018 à 15:14:57  profilanswer
 

Shinuza a écrit :


En effet, cela n'a pas l'air très clair  [:daddyfatsax:5]

 

Ah, et c'est limité à 40h d'écoute par mois aussi.


Message édité par Blackyell le 14-06-2018 à 15:19:45
n°2316964
BenO
Profil: Chercheur
Posté le 14-06-2018 à 15:23:40  profilanswer
 

el muchacho a écrit :


C'est du big data :o
Ou alors faut jeter des données et ne garder que celles qui sont vraiment pertinentes avec un filtrage intelligent à l'entrée.
C'est quoi le use case qui génère autant de données ?


 
Mesure d'audience dans le monde physique.
Il va falloir commencer à réfléchir en tout cas [:cerveau o]


---------------
Python Python Python
n°2316965
el muchach​o
Comfortably Numb
Posté le 14-06-2018 à 15:42:39  profilanswer
 

BenO a écrit :


Mesure d'audience dans le monde physique.
Il va falloir commencer à réfléchir en tout cas [:cerveau o]


C'est vachement aggrégable, ça. On vire les données foireuses, puis une moyenne par 100 et on n'en parle plus. :o

 

- oh la la noooon, c'est impensable ça vaut de l'or ces données !!!
- non, 99% de tes données c'est de la merde, ça sert à rien de s'emmerder à les stocker :o


Message édité par el muchacho le 14-06-2018 à 15:46:55

---------------
Les aéroports où il fait bon attendre, voila un topic qu'il est bien
n°2316966
___alt
Posté le 14-06-2018 à 16:13:06  profilanswer
 

Data is a liability.


---------------
TRIPS RIGHT BUNCH F SHUTTLE TOM AND JERRY RIGHT YELLOW
n°2316968
Harkonnen
Un modo pour les bannir tous
Posté le 14-06-2018 à 16:24:51  profilanswer
 

J'ai trouvé le compte reddit sous lequel poste Muchacho : https://www.reddit.com/r/france/com [...] ix/e0njao1


---------------
J'ai un string dans l'array (Paris Hilton)
n°2316969
masklinn
í dag viðrar vel til loftárása
Posté le 14-06-2018 à 16:35:13  profilanswer
 

Harkonnen a écrit :

J'ai trouvé le compte reddit sous lequel poste Muchacho : https://www.reddit.com/r/france/com [...] ix/e0njao1


Enfoiré t'as brulé son throwaway!


---------------
I mean, true, a cancer will probably destroy its host organism. But what about the cells whose mutations allow them to think outside the box by throwing away the limits imposed by overbearing genetic regulations? Isn't that a good thing?
n°2316970
el muchach​o
Comfortably Numb
Posté le 14-06-2018 à 16:38:16  profilanswer
 

Harkonnen a écrit :

J'ai trouvé le compte reddit sous lequel poste Muchacho : https://www.reddit.com/r/france/com [...] ix/e0njao1


Nan, mon compte reddit, c'est el_muchacho :o


---------------
Les aéroports où il fait bon attendre, voila un topic qu'il est bien
n°2316971
Harkonnen
Un modo pour les bannir tous
Posté le 14-06-2018 à 16:40:45  profilanswer
 

el muchacho a écrit :


Nan, mon compte reddit, c'est el_muchacho :o


Alors c'est Masklinn qui a raison, j'ai cramé ton throwaway :o


---------------
J'ai un string dans l'array (Paris Hilton)
n°2316972
el muchach​o
Comfortably Numb
Posté le 14-06-2018 à 16:45:28  profilanswer
 

J'ai jamais eu de throwaway, ni sur reddit, ni ici, ni ailleurs. :o


---------------
Les aéroports où il fait bon attendre, voila un topic qu'il est bien
n°2316973
Devil'sTig​er
Posté le 14-06-2018 à 16:46:12  profilanswer
 

masklinn a écrit :


[0] parce qu'avec leurs index moisis, utf8mb4 ne permettait pas d'indexer au dessus du VARCHAR(191): ils pouvaient pas indexer des colonnes de plus de 767 octets, utf8mb4 est stocké en UTF32, donc VARCHAR(192) fait 768 octets et passait pas [:jar jar] Ça a été fixé genre en 2015.


Les mauvais souvenirs que tu remontes la [:adnauseam:4]

n°2316975
Harkonnen
Un modo pour les bannir tous
Posté le 14-06-2018 à 16:53:48  profilanswer
 

el muchacho a écrit :

J'ai jamais eu de throwaway, ni sur reddit, ni ici, ni ailleurs. :o


Citation :


Informations sur : el muchacho
(...)
Multipseudos : vapeur_cochonne
jdbh
douleur postnuptiale
vanessa59
peggy_de_lille
steph_plazza
william L petersen
jessica59
Jessica_59
jacques friggit
laboratoire roche
melanie_arras
jane winecooler
Cassandra02
supernovaehendaye


[:figti]

 

edit: t'es sur de ne jamais avoir été victime d'une man in the middle attack de la part de vapeur ? [:ddr555]

Message cité 3 fois
Message édité par Harkonnen le 14-06-2018 à 16:54:52

---------------
J'ai un string dans l'array (Paris Hilton)
n°2316976
nraynaud
lol
Posté le 14-06-2018 à 16:57:33  profilanswer
 

Harkonnen a écrit :


Citation :


Informations sur : el muchacho
(...)
Multipseudos : vapeur_cochonne
jdbh
douleur postnuptiale
vanessa59
peggy_de_lille
steph_plazza
william L petersen
jessica59
Jessica_59
jacques friggit
laboratoire roche
melanie_arras
jane winecooler
Cassandra02
supernovaehendaye


[:figti]

 

edit: t'es sur de ne jamais avoir été victime d'une man in the middle attack de la part de vapeur ? [:ddr555]


Je crois que je vais ouvrir une micro-brasserie de hipster et la nommer "douleur postnuptiale" [:rofl]

 

"douleur postnuptiale", la bière qu'elle provoque des rougeurs.


Message édité par nraynaud le 14-06-2018 à 16:58:19

---------------
trainoo.com, c'est fini
n°2316977
gelatine_v​elue
Posté le 14-06-2018 à 16:59:10  profilanswer
 

Harkonnen a écrit :


Citation :


Informations sur : el muchacho
(...)
Multipseudos : vapeur_cochonne
jdbh
douleur postnuptiale
vanessa59
peggy_de_lille
steph_plazza
william L petersen
jessica59
Jessica_59
jacques friggit
laboratoire roche
melanie_arras
jane winecooler
Cassandra02
supernovaehendaye


[:figti]
 
edit: t'es sur de ne jamais avoir été victime d'une man in the middle attack de la part de vapeur ? [:ddr555]


 
 [:jean paul roux:4]  

n°2316980
el muchach​o
Comfortably Numb
Posté le 14-06-2018 à 18:23:54  profilanswer
 

Harkonnen a écrit :


Citation :


Informations sur : el muchacho
(...)
Multipseudos : vapeur_cochonne
jdbh
douleur postnuptiale
vanessa59
peggy_de_lille
steph_plazza
william L petersen
jessica59
Jessica_59
jacques friggit
laboratoire roche
melanie_arras
jane winecooler
Cassandra02
supernovaehendaye


[:figti]

 

edit: t'es sur de ne jamais avoir été victime d'une man in the middle attack de la part de vapeur ? [:ddr555]


lol wtf ? xD
Le seul moment où il aurait pu faire des trucs avec mon compte, c'est quand j'étais à Lilles. Mais ouais c'est tout des multis de vapeur [:petrus75]


Message édité par el muchacho le 14-06-2018 à 18:24:43

---------------
Les aéroports où il fait bon attendre, voila un topic qu'il est bien
n°2316981
flo850
moi je
Posté le 14-06-2018 à 20:07:20  profilanswer
 

J'ai merdé la demande de visa, je gagne le droit de faire un aller retour a marseille :cry:


---------------

n°2316982
Hermes le ​Messager
Breton Quiétiste
Posté le 14-06-2018 à 20:32:01  profilanswer
 

nraynaud a écrit :

´tain j’ai toujours du mal avec les restaus ici, attendre une heure pour avoir une table et bouffer en 30min, ça me dépasse.


 
Tu oublies pas de donner un bon pourboire au moins ?  :lol:


---------------
Expert en expertises
n°2316984
ratibus
Posté le 14-06-2018 à 23:15:35  profilanswer
 

flo850 a écrit :

J'ai merdé la demande de visa, je gagne le droit de faire un aller retour a marseille :cry:


T'as merdé quoi dans la demande, par curiosité ?

n°2316985
boblenain2​00
Posté le 14-06-2018 à 23:18:39  profilanswer
 

el muchacho a écrit :


Et la réponse: https://dzone.com/articles/on-ubers-choice-of-databases
 
En gros, ils ne sont pas passés de PostgreSQL à MySQL mais de PostgreSQL à du NoSQL similaire à Google BigTable. Leur vrai problème est qu'ils ont dépassé les limites d'un RGDB. C'est facile d'imaginer qu'avec une flotte de 10 000 taxis envoyant leur position toutes les 10s, ça fait 100k inserts/s, ce qui dépasse les capacités de Postgres d'un facteur 5 grosso merdo (MySQL est un peu plus rapide, mais pas de beaucoup).
Et il s'avère que pour faire une base NoSQL, MySQL en shard est un bon back-end. Mais bon, ils n'ont fait que réimplémenter Cassandra en moins bien.


 
Ca fait plutot du 1k/s INSERT, ce qui est tres raisonnable pour n'importe quel SGBD en soit. Apres l'interet d'avoir du relationnel la dessus c'est une autre histoire..

n°2316986
Jubijub
Parce que je le VD bien
Posté le 15-06-2018 à 00:29:22  profilanswer
 

Vous feriez ça comment vous :
 
- j'ai mon blog généré statiquement via Hugo
- le source est sur Gitlab
- Gitlab pages a configuré automatiquement un pipeline d'intégration qui se déclenche à chaque commit, lance un runner Docker, pull les sources, lance Hugo, et publie le résultat
- Gitlab pages gère le HTTPS via un certificat Let's encrypt que je dois gérer manuellement
 
Mon soucis :
- je peux pas publier de fichiers statiques (genre un pdf, ou même les acme-challenges) puisque j'ai pas la main sur la partie publication
- je dois gérer les certificats à la main
- si je veux héberger une partie dynamique, je suis marron
- idem si je veux mixer les générateurs (eg : jupyter notebooks)
 
Du coup je voudrais pouvoir conserver ce pipeline qui marche bien, mais dans un environnement que je contrôle où je peux exécuter des scripts, poser des fichiers dans la zone publique, etc...
 
Le plus simple c'est une VM, mais si je pouvais conserver certains aspects managés ce serait top


---------------
Jubi Photos : Flickr - 500px
n°2316988
flo850
moi je
Posté le 15-06-2018 à 08:47:05  profilanswer
 

ratibus a écrit :


T'as merdé quoi dans la demande, par curiosité ?


 
il fallait mettre les originaux des passeports et il fallait un ordre de mission signé de ma boite


---------------

n°2316994
el muchach​o
Comfortably Numb
Posté le 15-06-2018 à 16:48:59  profilanswer
 

boblenain200 a écrit :


Ca fait plutot du 1k/s INSERT, ce qui est tres raisonnable pour n'importe quel SGBD en soit. Apres l'interet d'avoir du relationnel la dessus c'est une autre histoire..


Ah merde tu as raison. [:prozac]
Heureusement qu'il y en a un qui suit :o
Effectivement, du coup on se demande un peu ce qui pose vraiment problème.


---------------
Les aéroports où il fait bon attendre, voila un topic qu'il est bien
n°2316997
___alt
Posté le 15-06-2018 à 16:54:36  profilanswer
 

C'est des branlos de la sillicon valley hein, il font du hype driven development, Postgres c'est pour les nazes, la hype c'est le nosql.


---------------
TRIPS RIGHT BUNCH F SHUTTLE TOM AND JERRY RIGHT YELLOW
n°2317011
nraynaud
lol
Posté le 15-06-2018 à 23:29:35  profilanswer
 

'tain ce désastre, aujourd'hui je prenais la journée pour passer mon imprimante 3D en 24V pour essayer de réduire le bruit.
 
1) l'alim 24V a pas les même trous de fixation et ni les mêmes tailles de vis que l'ancienne
2) les moteurs font plus de bruit.


---------------
trainoo.com, c'est fini
n°2317012
Shinuza
This is unexecpected
Posté le 16-06-2018 à 00:47:52  profilanswer
 

nraynaud a écrit :

'tain ce désastre, aujourd'hui je prenais la journée pour passer mon imprimante 3D en 24V pour essayer de réduire le bruit.
 
1) l'alim 24V a pas les même trous de fixation et ni les mêmes tailles de vis que l'ancienne
2) les moteurs font plus de bruit.


Tu as quoi comme drivers?


---------------
Mains power can kill, and it will hurt the entire time you’re dying from it.
mood
Publicité
Posté le   profilanswer
 

 Page :   1  2  3  4  5  ..  22566  22567  22568  ..  27191  27192  27193  27194  27195  27196

Aller à :
Ajouter une réponse
 

Sujets relatifs
Plus de sujets relatifs à : [blabla@olympe] Le topic du modo, dieu de la fibre et du monde


Copyright © 1997-2025 Groupe LDLC (Signaler un contenu illicite / Données personnelles)