使用puppeteer编写csv文件

Question

在使用puppeteer进行抓取之后，我想为我的输出写一个csv文件。我尝试了不同的方法，但没有得到结果。这是我想要导出到csv文件的部分数据代码。

 async function main(){

 const allinks = await getLinks();
 //console.log(allinks);
  const browser = await puppeteer.launch({headless:false});
 const page = await browser.newPage();
 await page.setDefaultNavigationTimeout(0);
 


    for (let link of allinks){
     const data = await getInfoscrape(link,page);
    

   }
  } main();

我的数据结构是: Poste

Contrat Salaire Diplome Experience Travail描述

对于结果，我将其作为json，所以我想写成csv文件‘

​

{
    Poste: 'Lead Développeur',
    Contrat: 'CDI ',
    Salaire: 'Salaire entre 65K € et 75K €',
    Diplome: 'Bac +5 / Master',
    Experience: '> 3 ans',
    Travail: 'Télétravail partiel possible',
    Description: 'En tant que Lead Développeur(se), tu seras chargé(e) de mentorer des développeurs de Galadrim dans l’objectif de les faire progresser. Les tâches typiques du poste sont les suivantes :faire des code reviews sur différents projets\n' +
      'participer au choix des technologies et de l’architecture sur les nouveaux projets\n' +
      'faire des sessions de pair-programming avec les développeurs\n' +
      'aider à la résolution des problèmes les plus complexes\n' +
      'faire de la veille technique\n' +
      'Une application mobile de rencontres\n' +
      'Un moteur de réservation en ligne pour des parcours de golf\n' +
      'Un site web de commande de box par abonnement pour un grand groupe de cosmétiques\n' +
      'Un logiciel de caisse'
  },

​

  '''

Answer 1

我使用Node内置的"fs“模块来编写.csv。

如下所示：

const fs = require("fs")
let data = fs.readFileSync("./data.json") // an array of objects
data = JSON.parse(data);

let csv = "locationPoint\taddress\tschedule\tfarmName\n";

data.forEach( ferme => {
  csv += ferme.locationPoint + `\t`;
  csv += ferme.fullAddress + `\t`;
  csv += ferme.schedule + `\t`;
  csv += ferme.farmName + "\n";
})

console.log('@success', csv);
fs.writeFileSync("fermes.csv", csv)

请注意，在我的示例中，我使用制表符而不是逗号；我的数据很容易包含逗号。

对于您的情况，您可以替换：

let csv = "locationPoint\taddress\tschedule\tfarmName\n";

通过以下方式：

let csv = "Poste\tContrat\tSalaire\tDiplome\tExperience\tTravail\tDescription\n";      

对于forEach循环中的其余值，也是如此。