Fou à lier
Nuage de tags
Mur d'images
Quotidien
Flux RSS
  • Flux RSS
  • ATOM Feed
  • Daily Feed
Liens par page
  • 20 links
  • 50 links
  • 100 links
7 results tagged performances  ✕
Yoshinori Matsunobu's blog: Tables on SSD, Redo/Binlog/SYSTEM-tablespace on HDD
03/08/2017 16:56:10 archive.org
QRCode
cluster icon
  • Friends don't let friends use BTRFS for OLTP | PostgreSQL Addict : BTRFS est-il adapté pour les bases de données d'analyse ? Non. Intéressant *benchmarking*. *Shorter*: l'utilisation du *copy-on-write* plombe les ...
  • Cache is the new RAM | MemSQL - The Database for Speed, Scale & Simplicity : Très bon historique des technologies de stockage de données. Où l'on voit que tout n'est qu'un problème de performance et de bottleneck. via : http...
  • Comment OVH sauvegarde un million de bases de données chaque jour ? : Comment OVH gère le *backup* de dizaines de milliers de bases de données (MySQL et PostgreSQL) ? TL;DR: - répartition homogène des backup dans le ...
  • Administration et optimisation générales Mysql : Une bonne page pour l'optimisation générale de MySQL (dont InnoDB). Ça liste un peu toutes les variables importantes et ce qu'il faut faire.
  • Comparison of JavaScript charting frameworks - Wikipedia, the free encyclopedia : Décidément, je fais bien de vider les Shaarli du patron (Seb) que j'avais mis de côté (certains datent de deux ans !) Ici, le tableau Wikipedia des f...

Comment configurer sa base de données avec un SSD ?

Réponse rapide (pour InnoDB mais généralisable) :

  • Sur disque rotatif (HDD) : REDO logs, BIN logs, tablespace (system ou general), buffer data
  • Sur disque solide (SSD) : UNDO logs, table files (donc les table-space si on utilise separate table-space)

C'est assez dingue en soit : ça veut dire que les bases de données sont largement optimisées pour fonctionner sur disque classique, et que seule une petite partie du traitement est à accès aléatoire (donc déplaçable sur SSD).

Random i/o oriented:

  • Table files (*.ibd)
  • UNDO segments (ibdata)

Sequential write oriented:

  • REDO log files (ib_logfile*)
  • Binary log files (binlog.XXXXXX)
  • Doublewrite buffer (ibdata)
  • Insert buffer (ibdata)
  • Slow query logs, error logs, general query logs, etc

D'ailleurs, fait intéressant dans l'article : il obtient une perf meilleure en HDD + SDD que en dual SSD. Peut-être parce que les SSD sont en bus SATA commun et que ce dernier sature, alors que ses HDD sont en bus SAS (donc séparé).

Pour aller plus loin, et configurer proprement la base :

  • (mysql) Paramétrer les emplacements de fichiers
bases-de-données database informatique infrastructure MySQL performances technique TODO W
https://yoshinorimatsunobu.blogspot.fr/2009/05/tables-on-ssd-redobinlogsystem.html
Cache is the new RAM | MemSQL - The Database for Speed, Scale & Simplicity
25/11/2014 13:44:47 archive.org
QRCode
cluster icon
  • Yoshinori Matsunobu's blog: Tables on SSD, Redo/Binlog/SYSTEM-tablespace on HDD : Comment configurer sa base de données avec un SSD ? Réponse rapide (pour InnoDB mais généralisable) : - Sur **disque rotatif (HDD)** : REDO logs,...
  • Friends don't let friends use BTRFS for OLTP | PostgreSQL Addict : BTRFS est-il adapté pour les bases de données d'analyse ? Non. Intéressant *benchmarking*. *Shorter*: l'utilisation du *copy-on-write* plombe les ...
  • Alignement de partitions pour amélioration des performances de MS-SQL Server : Intéressant. Je n'avais jamais vraiment entendu parler des problèmes dus à l'alignement de partition sur un disque. J'avais tout juste entendu le term...
  • BBC - Future - These unlucky people have names that break computers : Oh, la pauvre femme. Son nom est J. Null. Oui, son p-m-atronyme est Null. D'autant plus Null que cette valeur est bannie de la plupart des softs (je c...
  • L'amour au temps du chiffrement : Beau. L'amour au temps du numérique, de l'espionnage massif, de la pérennité de la moindre donnée. Une histoire d'amour et de hackers. Je n'ai pas lu ...

Très bon historique des technologies de stockage de données. Où l'on voit que tout n'est qu'un problème de performance et de bottleneck.

via : https://twitter.com/Korben/status/536420009732759552

bases-de-données bottleneck database histoire informatique performances work
http://blog.memsql.com/cache-is-the-new-ram/
Diagram of Linux kernel vs. performance tools
23/09/2014 11:44:23 archive.org
QRCode
cluster icon
  • GitHub - p-e-w/maybe: :rabbit2: See what a program does before deciding whether you really want it to happen. : À garder sous le coude : un utilitaire (sous Python) qui décortique des programmes sous Linux, via l'interception des appels systèmes. Ça ne marche pa...
  • ddrescue, dd_rescue, myrescue : récupérer ses données après un crash disque - LinuxFr.org : Super utile ! Méthode et outils pour sauver un disque mourant. À garder définitivement sous le coude. via : http://sebsauvage.net/links/?YqhZOA
  • linux_observability_tools.png (Image PNG, 1500 × 1050 pixels) - Redimensionnée (54%) : Mise à jour de ça : http://foualier.gregory-thibault.com/?mmT7XA Ça prend en compte pas mal de nouveautés. Notamment Nettools qui a laissé place à d'...
  • 1010073_10201531228065776_1488165009_n.jpg (Image JPEG, 612x612 pixels) : Oh ! C'est drôle. Un système pour savoir si un colis a été retourné/incliné/etc. J'aimerais savoir si ça marche vraiment. via : http://qosgof.f...
  • Alex - Catch insensitive, inconsiderate writing : Mais WHAT ? Un programme qui propose des corrections dans vos textes, afin de les rendre neutres par rapport au genre, race, religion, etc. (EN only...
thumbnail

Hmmm… Étrange, j'n'avais pas encore mis ça de côté alors que c'est très utile : le diagramme des outils de mesure de performances collé sur le schéma du noyau Linux

via : https://unix.stackexchange.com/questions/117742/diagram-of-linux-kernel-vs-performance-tools

EDIT : inversé les liens

administration diagramme Linux noyau outil performances pratique UNIX
http://www.brendangregg.com/Perf/linuxperftools.png
Misc 70 - LES EDITIONS DIAMOND
02/12/2013 15:13:31 archive.org
QRCode
cluster icon
  • Les carnets du Docteur Lazarre: Risk : Un bon article pour démonter l' « analyse » et l'interprétation par la presse d'une étude scientifique. Ça rappelle les fondements scientifiques, et ...
  • Alignement de partitions pour amélioration des performances de MS-SQL Server : Intéressant. Je n'avais jamais vraiment entendu parler des problèmes dus à l'alignement de partition sur un disque. J'avais tout juste entendu le term...
  • Big Data: Une vidéo retrace 2600 ans d'histoire en cinq minutes - News Savoirs: Sciences - 24heures.ch : Une dataviz des migrations à travers les âges. Réalisée et publiée dans la revue Nature.
  • Biomimétisme : peut-on trouver l’algorithme qui dessine les rayures du zèbre ? | Rue89 : Une interrogation tout à fait intéressante sur le bio-mimétisme. Le bio-mimétisme est très utilisé en informatique, notamment pour la recherche opé...
  • Bitly: Lessons Learned Building a Distributed System that Handles 6 Billion Clicks a Month - High Scalability - : De la grosse architecture Big Data chez BitLy. Je serais curieux d'y jeter un œil en détail. Du coup, je me garde la vidéo pour quand je rentre de mes...

Dans le dernier MISC, un dossier très intéressant sur parallélisme, HPC, Big Data (via Map Reduce & analytics), optimisation, instructions SSE, OpenMP, Open CL, GPGPU, etc. Bref, tout ce qui concerne le HPC en général. Avis aux amateurs et big-dateurs.

article BigData dossier GPGPU HPC informatique MapReduce MISC OpenCL OpenMP parallélisme performances presse science SSE
http://boutique.ed-diamond.com/misc/506-misc70.html
Service SQL Privé - Hébergement Web - OVH
05/11/2013 11:06:38 archive.org
QRCode
cluster icon
  • Yoshinori Matsunobu's blog: Tables on SSD, Redo/Binlog/SYSTEM-tablespace on HDD : Comment configurer sa base de données avec un SSD ? Réponse rapide (pour InnoDB mais généralisable) : - Sur **disque rotatif (HDD)** : REDO logs,...
  • Cache is the new RAM | MemSQL - The Database for Speed, Scale & Simplicity : Très bon historique des technologies de stockage de données. Où l'on voit que tout n'est qu'un problème de performance et de bottleneck. via : http...
  • Changement d'adresse : Pour ceux qui ne l'auraient pas remarqué, j'ai récemment (suite au test de Shaarli en fait) changé l'adresse d'icelui afin de profiter d'un joli sous-...
  • OVH : les coulisses du géant français du cloud en images - JDN Web & Tech : Sont fat chez OVH. Leurs datacenters valent le coup d'œil.
  • OVH Tasks   : Grosse panne d'OVH ce soir. Sur l'ensemble du DC parisien, affectant principalement le mutualisé. Je plains le mec qui a eu à gérer ça. On sent d'a...

Chez OVH, on ne paye pas en fonction de la taille des bases de données qu'on gère, mais en fonction des performances qu'on souhaite (ici, corrélé à la taille de la mémoire vive)

C'est une approche originale, qui du coup peut devenir vraiment très intéressante pour des cas d'usage particuliers.

bases-de-données hébergement hébergeur MySQL OVH performances pricing prix stockage
https://www.ovh.com/fr/hebergement-web/sql_prive.xml
Challenge Vichy du 1 sept 2013
04/09/2013 15:01:11 archive.org
QRCode
cluster icon
  • J'ai fait 33 ironman en 33 jours: c'était dur, voire violent mais je me suis fait plaisir - le Plus : Un fou réalise 33 Ironman d'affilés. Soient 33 fois 3,8 kilomètres de natation, 180 kilomètres de vélo et 42,195 kilomètres de course à pied. Soient...
  • Alignement de partitions pour amélioration des performances de MS-SQL Server : Intéressant. Je n'avais jamais vraiment entendu parler des problèmes dus à l'alignement de partition sur un disque. J'avais tout juste entendu le term...
  • Cache is the new RAM | MemSQL - The Database for Speed, Scale & Simplicity : Très bon historique des technologies de stockage de données. Où l'on voit que tout n'est qu'un problème de performance et de bottleneck. via : http...
  • CmzAZKTUsAAPiuG.jpg:large (Image JPEG, 540 × 614 pixels) : Ahahah, bien vu ! :laughing: ![crabes sur la ligne de départ](https://pbs.twimg.com/media/CmzAZKTUsAAPiuG.jpg) via : https://twitter.com/Jaddo_fr...
  • Comment l’entraîneur belge a « hacké » les règles du football à la coupe du monde | ploum.net : Intéressant texte de Ploum sur le "hacking" des règles du football. Pour ma part, j'y vois surtout un système double en interaction : les deux partie...

Un super texte pour ressentir un peu les sensations du sportif forcené et visiblement dévoué à sa cause. Ici, sur un Iron Man (qui consiste en à peu près 6 kms de nage, 180 de vélo, 42 de course à pied)

Résultat : 9h32 pour ce garçon. Bravo !

IronMan marathon performances sport Steeve triathlon
http://forum.asveltri.com/index.php?PHPSESSID=810c8e5c38169a248e234b649a92ac5e&topic=2829.msg35696#msg35696
Alignement de partitions pour amélioration des performances de MS-SQL Server
23/08/2013 16:05:09 archive.org
QRCode
cluster icon
  • Cache is the new RAM | MemSQL - The Database for Speed, Scale & Simplicity : Très bon historique des technologies de stockage de données. Où l'on voit que tout n'est qu'un problème de performance et de bottleneck. via : http...
  • Misc 70 - LES EDITIONS DIAMOND : Dans le dernier MISC, un dossier très intéressant sur parallélisme, HPC, Big Data (via Map Reduce & analytics), optimisation, instructions SSE, OpenMP...
  • ddrescue, dd_rescue, myrescue : récupérer ses données après un crash disque - LinuxFr.org : Super utile ! Méthode et outils pour sauver un disque mourant. À garder définitivement sous le coude. via : http://sebsauvage.net/links/?YqhZOA
  • Yoshinori Matsunobu's blog: Tables on SSD, Redo/Binlog/SYSTEM-tablespace on HDD : Comment configurer sa base de données avec un SSD ? Réponse rapide (pour InnoDB mais généralisable) : - Sur **disque rotatif (HDD)** : REDO logs,...
  • #madmoiZelleSurGoogle : on a une réponse de Google ! (màj) : Comment un bug chez Google peut mettre en péril une PME qui marche bien. via : https://twitter.com/Klaire/status/689036830637993984

Intéressant. Je n'avais jamais vraiment entendu parler des problèmes dus à l'alignement de partition sur un disque. J'avais tout juste entendu le terme et vu des outils, mais ça n'avait pas suffisamment piqué ma curiosité.

alignement-partition HDD informatique performances vulgarisation
http://mikedavem.developpez.com/sqlserver/tutoriels/architecture/
2412 links
Shaarli - Le gestionnaire de marque-page personnel, minimaliste, et sans base de données par la communauté Shaarli - Theme by kalvn