Les fichiers CSV sont fondamentaux et sont généralement le plus petit dénominateur commun de l'importation et de l'exportation de données depuis n'importe quel système. Nous travaillons actuellement avec un client qui possède une très grande base de données de contacts (plus de 5 millions d'enregistrements) et nous devons filtrer, interroger et exporter un sous-segment des données.
Qu'est-ce qu'un fichier CSV? [19659003] Un fichier de valeurs séparées par des virgules est un fichier texte délimité qui utilise une virgule pour séparer les valeurs. Chaque ligne du fichier est un enregistrement de données. Chaque enregistrement se compose d'un ou plusieurs champs séparés par des virgules. L'utilisation de la virgule comme séparateur de champ est la source du nom de ce format de fichier.
Les outils de bureau comme Microsoft Excel et Google Sheets ont des restrictions de données.
- Microsoft Excel importera des ensembles de données contenant jusqu'à 1 million de lignes et de colonnes illimitées dans une feuille de calcul. Si vous essayez d'en importer plus, Excel affiche une alerte indiquant que vos données ont été tronquées.
- Apple Numbers importera des ensembles de données contenant jusqu'à 1 million de lignes et 1 000 colonnes dans une feuille de calcul. Si vous essayez d'importer plus que cela, Numbers affiche une alerte indiquant que vos données ont été tronquées.
- Google Sheets importera des ensembles de données contenant jusqu'à 400 000 cellules, avec un maximum de 256 colonnes par feuille, jusqu'à 250 Mo.
Donc, si vous travaillez avec un très gros fichier, vous devez à la place importer les données dans une base de données. Cela nécessite une plate-forme de base de données ainsi qu'un outil de requête pour segmenter les données. Si vous ne voulez pas apprendre un langage d'interrogation et une nouvelle plate-forme… il existe une alternative!
CSV Explorer
CSV Explorer est un outil en ligne simple qui vous permet d'importer, d'interroger, de segmenter et exporter des données. La version gratuite vous permet de travailler temporairement avec les 5 premiers millions de lignes. Les autres versions vous permettent d'enregistrer des ensembles de données jusqu'à 20 millions de lignes avec lesquelles vous pouvez facilement travailler.
J'ai pu importer plus de 5 millions d'enregistrements aujourd'hui en quelques minutes, interroger facilement les données et exporter le fichier disques dont j'avais besoin. L'outil fonctionnait parfaitement!
Source link