IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Big Data Discussion :

POC Big Data : Dimensionner un cluster


Sujet :

Big Data

  1. #1
    Candidat au Club
    Femme Profil pro
    Responsable/Ingénieur
    Inscrit en
    Octobre 2017
    Messages
    5
    Détails du profil
    Informations personnelles :
    Sexe : Femme
    Localisation : France

    Informations professionnelles :
    Activité : Responsable/Ingénieur
    Secteur : Finance

    Informations forums :
    Inscription : Octobre 2017
    Messages : 5
    Points : 4
    Points
    4
    Par défaut POC Big Data : Dimensionner un cluster
    Bonjour,

    Dans le cadre de la réalisation d'un POC Big Data, je dispose d'un fichier portant sur les transactions monétiques d'une certaine taille.

    Ma question est la suivante : si le fichier est d'une taille X, comment dimentionner un cluster pour assurer le bon fonctionnement du POC pour le compte de ce fichier X?

    Comment calculer les besoins de ce dimensionnement en termes de :
    1. Stockage?
    2. CPU?
    3. Mémoire?
    4. Nb de serveurs?
    5. Autre...

    Y a t il des règles standard/formules qui permettent de calculer les besoins en dimensionnement ?

    Merci d'avance

  2. #2
    Modérateur
    Avatar de DotNetMatt
    Homme Profil pro
    CTO
    Inscrit en
    Février 2010
    Messages
    3 611
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 36
    Localisation : Etats-Unis

    Informations professionnelles :
    Activité : CTO
    Secteur : Finance

    Informations forums :
    Inscription : Février 2010
    Messages : 3 611
    Points : 9 743
    Points
    9 743
    Billets dans le blog
    3
    Par défaut
    Pareil que ma reponse sur l'autre discussion, il n'y a pas reellement de recette magique pour le dimensionnement. On trouve des "best practices", comme par exemple ici ou encore ici, mais il est imperatif de passer par un POC avec un jeu de donnees realiste, et un jeu de donnees plus gros afin d'evaluer si on est vraiment dans les clous et si on a de la marge de manoeuvre car selon le projet il n'est pas toujours evident de predire la taille d'un jeu de donnees.
    Less Is More
    Pensez à utiliser les boutons , et les balises code
    Desole pour l'absence d'accents, clavier US oblige
    Celui qui pense qu'un professionnel coute cher n'a aucune idee de ce que peut lui couter un incompetent.

  3. #3
    Candidat au Club
    Femme Profil pro
    Responsable/Ingénieur
    Inscrit en
    Octobre 2017
    Messages
    5
    Détails du profil
    Informations personnelles :
    Sexe : Femme
    Localisation : France

    Informations professionnelles :
    Activité : Responsable/Ingénieur
    Secteur : Finance

    Informations forums :
    Inscription : Octobre 2017
    Messages : 5
    Points : 4
    Points
    4
    Par défaut
    Bonjour DotNetMatt,

    Je vous remercie énormément d'avoir pris la peine de me répondre ainsi que pour toutes les ressources que avez partagées.

    Ces liens nous seraient d'une GRANDE AIDE pour tenter de proposer un dimentionnement optimal permettant d'assurer le bon fonctionnement du POC.

    Encore une fois, merci

Discussions similaires

  1. Réponses: 8
    Dernier message: 20/01/2016, 12h00
  2. Réponses: 0
    Dernier message: 25/09/2015, 21h58
  3. Réponses: 1
    Dernier message: 28/10/2011, 14h38
  4. Réponses: 0
    Dernier message: 17/10/2011, 17h01

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo