[PYTHON] Help compréhension script

Help compréhension script [PYTHON] - Python - Programmation

Marsh Posté le 12-02-2017 à 18:40:56    

Hello les amis,
 
J'utilise actuellement un script python qui m'aide à élaborer des base de données Excel à partir de contacts sur Linkedin (je récupère prénom/nom, société et poste dans un tableau excel)
Je vois le fonctionnement globale de ce dernier :  
- il récupère les données du fichier HTML de la page
- le convertit en json
- parse ce dernier selon des délimiteurs données
- test pour voir si champs vides etc
- création d'un fichier excel avec les contenus parsés
 
Cependant, j'aurais aimé avec des commentaires plus précis sur ce code (ne codant pas sur python).
Si une âme charitable pouvait m'aider, je lui serais reconnaissant :)
 
Bonne soirée à vous,
Guillaume
 
http://reho.st/preview/self/8caa50d14402669d04ce89683ea5a58bfc06329e.png
 

Reply

Marsh Posté le 12-02-2017 à 18:40:56   

Reply

Marsh Posté le 13-02-2017 à 04:14:08    

Avec un code source sous forme d'image c'est déjà très mal parti. :o

Message cité 1 fois
Reply

Marsh Posté le 13-02-2017 à 09:46:31    

rat de combat a écrit :

Avec un code source sous forme d'image c'est déjà très mal parti. :o


 
Comment je peux insérer mon .py ?  [:tamahome:1]

Reply

Marsh Posté le 13-02-2017 à 11:05:56    

copier-coller le contenu et utiliser le bouton http://forum-images.hardware.fr/icones/message/c.gif pour bien faire!


Message édité par rat de combat le 13-02-2017 à 11:06:37
Reply

Marsh Posté le 13-02-2017 à 11:18:08    


La première partie est en commentaire, ne pas en tenir compte.
Prendre le corps à partir de la ligne 73
 
C'est mieux ?
 
 

Code :
  1. import json
  2. from xlwt import Workbook
  3. import xlrd
  4. # création
  5. import os
  8. resultats={}
  10. # ajout des valeurs dans la ligne suivante
  11. """
  12. def editXLS(name,htmlname):
  13.  cells=[]
  14. classeur = xlrd.open_workbook(name+".xls" )
  15. nom_des_feuilles = classeur.sheet_names()
  16. feuille = classeur.sheet_by_name(nom_des_feuilles[0])
  17. result="a"
  18. x=0
  20. for row in range(classeur.feuille.nrows):
  21.      cells.append([])
  22.      for col in range(classeur.feuille.ncols):
  23.          cells[row].append(workbook.cell(row, col).value)
  25. path_fichier=htmlname+".html"
  27. with open(path_fichier,"r" ) as fichier:
  28.  contenu = fichier.read()
  30.  contenus=contenu.split("<code id=\"embedded-json\">" )
  31.  contenus2=contenus[1].split("</code>" )[0]
  32.  contenus2=contenus2.split("<!--" )[1]
  33.  contenus2=contenus2.split("-->" )[0]
  35. with open("results.json","w" ) as fichier:
  36.  fichier.write(contenus2)
  38. with open("results.json","r" ) as fichier:
  39.  data =json.load(fichier)
  40.  data= data["searchResults"]
  41. j=0
  42. for i in range(len(data)):
  43.  lignei = feuil1.row(i+1)
  44.  lignei.write(0,data[i]["member"]["formattedName" ])
  45.  lignei.write(1,data[i]["company"]["companyName"])
  46.  lignei.write(2,data[i]["member"]["title"])
  47.  j=i+1
  48. lignei=feuil1.row(j)
  49. lignei.write(0,"" )
  53. book.save(name+".xls" )
  56. # création matérielle du fichier résultant
  57. def createXLS(name):
  58. book = Workbook()
  60. # création de la feuille 1
  61. feuil1 = book.add_sheet('results')
  63. # ajout des en-têtes
  64. feuil1.write(0,0,'Nom')
  65. feuil1.write(0,1,'Entreprise')
  66. feuil1.write(0,2,'Poste')
  67. book.save(name+".xls" )
  68. """
  73. def treat_file(path_fichier):
  74. global resultats
  75. with open(path_fichier,"r" ) as fichier:
  76.  contenu = fichier.read()
  78.  contenus=contenu.split("<code id=\"embedded-json\">" )
  79.  contenus2=contenus[1].split("</code>" )[0]
  80.  contenus2=contenus2.split("<!--" )[1]
  81.  contenus2=contenus2.split("-->" )[0]
  83. with open("json/"+str(len(resultats))+".json","w" ) as fichier:
  84.  fichier.write(contenus2)
  86. with open("json/"+str(len(resultats))+".json","r" ) as fichier:
  87.  data =json.load(fichier)
  88.  data= data["searchResults"]
  89. data2={}
  90. for i in range(len(data)):
  91.  if(("companyName"in data[i]["company"])==False and ("title" in data[i]["member"])==False ):
  92.   data2[i]=[data[i]["member"]["formattedName" ],"",""]
  93.  elif(("companyName"in data[i]["company"]) ==False):
  94.   data2[i]=[data[i]["member"]["formattedName" ],"",data[i]["member"]["title"]]
  95.  elif(("title" in data[i]["member"])==False):
  96.   data2[i]=[data[i]["member"]["formattedName" ],data[i]["company"]["companyName"],""]
  97.  else:
  98.   data2[i]=[data[i]["member"]["formattedName" ],data[i]["company"]["companyName"],data[i]["member"]["title"]]
  99. resultats[len(resultats)]=data2
  103. def main():
  104. folder_path="resultats_HTML"
  105. book = Workbook()
  106. i = 1
  108. for path, dirs, files in os.walk(folder_path):
  109.  for filename in files:
  110.   treat_file(folder_path+"/"+filename)
  112.  # création de la feuille 1
  113. feuil1 = book.add_sheet('results')
  115. # ajout des en-têtes
  116. feuil1.write(0,0,'Nom')
  117. feuil1.write(0,1,'Entreprise')
  118. feuil1.write(0,2,'Poste')
  120. for key, value in resultats.items():
  121.  for key2, value2 in value.items():
  122.   feuil1.write(i,0,value2[0])
  123.   feuil1.write(i,1,value2[1])
  124.   feuil1.write(i,2,value2[2])
  125.   i+=1
  127. book.save("liste.xls" )
  130. main()

Reply

Marsh Posté le 15-02-2017 à 11:50:21    

up ?

Reply

Sujets relatifs:

Leave a Replay

Make sure you enter the(*)required information where indicate.HTML code is not allowed