search

Chamawix / scrapping_vdm

Petit programme de scrapping du site vdm
0 stars 0 forks source link

Content and Date are missing #2

Closed pocman closed 7 years ago

pocman commented 7 years ago

Voici le return de /api/posts : 

{'count': 200, 'post': [{'content': '', 'date': '', 'id': 1, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 2, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 3, 'author': 'Sebastien Folin'}, {'content': '', 'date': '', 'id': 4, 'author': 'Mark E. Smith'}, {'content': '', 'date': '', 'id': 5, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 6, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 7, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 8, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 9, 'author': 'Lassie'}, {'content': '', 'date': '', 'id': 10, 'author': 'The Chronic'}, {'content': '', 'date': '', 'id': 11, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 12, 'author': 'Edouard Leclerc'}, {'content': '', 'date': '', 'id': 13, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 14, 'author': 'Polly'}, {'content': '', 'date': '', 'id': 15, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 16, 'author': 'Crocodile Dundee'}, {'content': '', 'date': '', 'id': 17, 'author': 'Kevin Carter'}, {'content': '', 'date': '', 'id': 18, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 19, 'author': 'Wikiki Girl'}, {'content': '', 'date': '', 'id': 20, 'author': 'Erin Brokovitch'}, {'content': '', 'date': '', 'id': 21, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 22, 'author': u'S\xe9bastien Folin'}, {'content': '', 'date': '', 'id': 23, 'author': 'William Portail'}, {'content': '', 'date': '', 'id': 24, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 25, 'author': 'DJ Calebut'}, {'content': '', 'date': '', 'id': 26, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 27, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 28, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 29, 'author': 'Mimi'}, {'content': '', 'date': '', 'id': 30, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 31, 'author': 'youpla'}, {'content': '', 'date': '', 'id': 32, 'author': 'hommebrioche'}, {'content': '', 'date': '', 'id': 33, 'author': 'Anonyme'}, {'content': '', 'date': '', 'id': 34, 'author': 'momoleconnard'}, {'content': '', 'date': '', 'id': 35, 'author': 'zed'}, {'content': '', 'date': '', 'id': 36, 'author': 'zed'}, {'content': '', 'date': '', 'id': 37, 'author': 'Shemselnihar'}, {'content': '', 'date': '', 'id': 38, 'author': 'Shemselnihar'}, {'content': '', 'date': '', 'id': 39, 'author': 'Sylvie20'}, {'content': '', 'date': '', 'id': 40, 'author': 'quent1'}, {'content': '', 'date': '', 'id': 41, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 42, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 43, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 44, 'author': 'Anonyme'}, {'content': '', 'date': '', 'id': 45, 'author': u'Rat\xe9'}, {'content': '', 'date': '', 'id': 46, 'author': u'Rat\xe9'}, {'content': '', 'date': '', 'id': 47, 'author': "Pline l'Ancien"}, {'content': '', 'date': '', 'id': 48, 'author': 'Simone'}, {'content': '', 'date': '', 'id': 49, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 50, 'author': 'Pennywise'}, {'content': '', 'date': '', 'id': 51, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 52, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 53, 'author': 'MacGyver'}, {'content': '', 'date': '', 'id': 54, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 55, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 56, 'author': 'Yvan Lendl'}, {'content': '', 'date': '', 'id': 57, 'author': 'Hawkeye Pierce'}, {'content': '', 'date': '', 'id': 58, 'author': 'Simone'}, {'content': '', 'date': '', 'id': 59, 'author': 'Franky le Borgne'}, {'content': '', 'date': '', 'id': 60, 'author': 'Anna Wintour'}, {'content': '', 'date': '', 'id': 61, 'author': 'Barbara Windsor'}, {'content': '', 'date': '', 'id': 62, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 63, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 64, 'author': 'Stan Lee'}, {'content': '', 'date': '', 'id': 65, 'author': 'Monsieur Connard'}, {'content': '', 'date': '', 'id': 66, 'author': 'Johnny Hardon'}, {'content': '', 'date': '', 'id': 67, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 68, 'author': 'Professeur Tournesol'}, {'content': '', 'date': '', 'id': 69, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 70, 'author': 'Barack Obama'}, {'content': '', 'date': '', 'id': 71, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 72, 'author': 'Jean-Luc'}, {'content': '', 'date': '', 'id': 73, 'author': u'\xc9milie'}, {'content': '', 'date': '', 'id': 74, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 75, 'author': 'Peter Priapic'}, {'content': '', 'date': '', 'id': 76, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 77, 'author': 'Hawkeye Pierce'}, {'content': '', 'date': '', 'id': 78, 'author': 'Dogbowl'}, {'content': '', 'date': '', 'id': 79, 'author': ''}, {'content': '', 'date': '', 'id': 80, 'author': 'Lucky Luke'}, {'content': '', 'date': '', 'id': 81, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 82, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 83, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 84, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 85, 'author': 'Vidal Sassoon'}, {'content': '', 'date': '', 'id': 86, 'author': u'St\xe9phane Plaza'}, {'content': '', 'date': '', 'id': 87, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 88, 'author': 'Cheeky Nandos'}, {'content': '', 'date': '', 'id': 89, 'author': 'Britney Bi**h'}, {'content': '', 'date': '', 'id': 90, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 91, 'author': 'Donald Trompette'}, {'content': '', 'date': '', 'id': 92, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 93, 'author': 'Snoop Dogg'}, {'content': '', 'date': '', 'id': 94, 'author': 'Roger Canigou'}, {'content': '', 'date': '', 'id': 95, 'author': 'VDM Educ'}, {'content': '', 'date': '', 'id': 96, 'author': 'Hawkeye'}, {'content': '', 'date': '', 'id': 97, 'author': 'Frank Beard'}, {'content': '', 'date': '', 'id': 98, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 99, 'author': u'G\xe9nie'}, {'content': '', 'date': '', 'id': 100, 'author': u'J\xe9j\xe9'}, {'content': '', 'date': '', 'id': 101, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 102, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 103, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 104, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 105, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 106, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 107, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 108, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 109, 'author': u'No\xebl et Liam'}, {'content': '', 'date': '', 'id': 110, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 111, 'author': ''}, {'content': '', 'date': '', 'id': 112, 'author': 'Jean-Michel Pilote'}, {'content': '', 'date': '', 'id': 113, 'author': 'Ghost'}, {'content': '', 'date': '', 'id': 114, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 115, 'author': 'Hawkeye'}, {'content': '', 'date': '', 'id': 116, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 117, 'author': ''}, {'content': '', 'date': '', 'id': 118, 'author': 'Booby McTits'}, {'content': '', 'date': '', 'id': 119, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 120, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 121, 'author': 'Jean-Michel Festival'}, {'content': '', 'date': '', 'id': 122, 'author': 'Shakira'}, {'content': '', 'date': '', 'id': 123, 'author': 'Peppa Pig'}, {'content': '', 'date': '', 'id': 124, 'author': 'Pablo Escobar'}, {'content': '', 'date': '', 'id': 125, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 126, 'author': u'Une personne outr\xe9e'}, {'content': '', 'date': '', 'id': 127, 'author': 'Mitch Buchannan'}, {'content': '', 'date': '', 'id': 128, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 129, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 130, 'author': ''}, {'content': '', 'date': '', 'id': 131, 'author': 'Pepito'}, {'content': '', 'date': '', 'id': 132, 'author': 'Canard WC'}, {'content': '', 'date': '', 'id': 133, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 134, 'author': 'Hawkeye'}, {'content': '', 'date': '', 'id': 135, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 136, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 137, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 138, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 139, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 140, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 141, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 142, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 143, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 144, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 145, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 146, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 147, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 148, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 149, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 150, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 151, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 152, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 153, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 154, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 155, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 156, 'author': 'Ned Flanders'}, {'content': '', 'date': '', 'id': 157, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 158, 'author': 'Jojo'}, {'content': '', 'date': '', 'id': 159, 'author': u'VDMM\xe9dics'}, {'content': '', 'date': '', 'id': 160, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 161, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 162, 'author': 'Lili'}, {'content': '', 'date': '', 'id': 163, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 164, 'author': 'Lulu'}, {'content': '', 'date': '', 'id': 165, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 166, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 167, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 168, 'author': 'La Bikeuse'}, {'content': '', 'date': '', 'id': 169, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 170, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 171, 'author': ''}, {'content': '', 'date': '', 'id': 172, 'author': 'MC Hammer'}, {'content': '', 'date': '', 'id': 173, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 174, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 175, 'author': 'Samantha'}, {'content': '', 'date': '', 'id': 176, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 177, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 178, 'author': 'Jojo'}, {'content': '', 'date': '', 'id': 179, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 180, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 181, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 182, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 183, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 184, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 185, 'author': u'VDM culott\xe9e'}, {'content': '', 'date': '', 'id': 186, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 187, 'author': 'Le Fou du Volant'}, {'content': '', 'date': '', 'id': 188, 'author': 'Vic666'}, {'content': '', 'date': '', 'id': 189, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 190, 'author': 'Le Breton'}, {'content': '', 'date': '', 'id': 191, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 192, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 193, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 194, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 195, 'author': 'Samantha'}, {'content': '', 'date': '', 'id': 196, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 197, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 198, 'author': 'Jean Valjean'}, {'content': '', 'date': '', 'id': 199, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 200, 'author': 'Miss Camping'}]}
Chamawix commented 7 years ago

Pas normal, à nouveau...

Pouvez vous modifier dans app.py le nombre de post fetché, et le mettre à 3, et me dire si le retour est similaire?

2017-10-02 17:05 GMT+02:00 Thomas notifications@github.com:

Voici le return de /api/posts :

{'count': 200, 'post': [{'content': '', 'date': '', 'id': 1, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 2, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 3, 'author': 'Sebastien Folin'}, {'content': '', 'date': '', 'id': 4, 'author': 'Mark E. Smith'}, {'content': '', 'date': '', 'id': 5, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 6, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 7, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 8, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 9, 'author': 'Lassie'}, {'content': '', 'date': '', 'id': 10, 'author': 'The Chronic'}, {'content': '', 'date': '', 'id': 11, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 12, 'author': 'Edouard Leclerc'}, {'content': '', 'date': '', 'id': 13, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 14, 'author': 'Polly'}, {'content': '', 'date': '', 'id': 15, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 16, 'author': 'Crocodile Dundee'}, {'content': '', 'date': '', 'id': 17, 'author': 'Kevin Carter'}, {'content': '', 'date': '', 'id': 18, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 19, 'author': 'Wikiki Girl'}, {'content': '', 'date': '', 'id': 20, 'author': 'Erin Brokovitch'}, {'content': '', 'date': '', 'id': 21, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 22, 'author': u'S\xe9bastien Folin'}, {'content': '', 'date': '', 'id': 23, 'author': 'William Portail'}, {'content': '', 'date': '', 'id': 24, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 25, 'author': 'DJ Calebut'}, {'content': '', 'date': '', 'id': 26, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 27, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 28, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 29, 'author': 'Mimi'}, {'content': '', 'date': '', 'id': 30, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 31, 'author': 'youpla'}, {'content': '', 'date': '', 'id': 32, 'author': 'hommebrioche'}, {'content': '', 'date': '', 'id': 33, 'author': 'Anonyme'}, {'content': '', 'date': '', 'id': 34, 'author': 'momoleconnard'}, {'content': '', 'date': '', 'id': 35, 'author': 'zed'}, {'content': '', 'date': '', 'id': 36, 'author': 'zed'}, {'content': '', 'date': '', 'id': 37, 'author': 'Shemselnihar'}, {'content': '', 'date': '', 'id': 38, 'author': 'Shemselnihar'}, {'content': '', 'date': '', 'id': 39, 'author': 'Sylvie20'}, {'content': '', 'date': '', 'id': 40, 'author': 'quent1'}, {'content': '', 'date': '', 'id': 41, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 42, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 43, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 44, 'author': 'Anonyme'}, {'content': '', 'date': '', 'id': 45, 'author': u'Rat\xe9'}, {'content': '', 'date': '', 'id': 46, 'author': u'Rat\xe9'}, {'content': '', 'date': '', 'id': 47, 'author': "Pline l'Ancien"}, {'content': '', 'date': '', 'id': 48, 'author': 'Simone'}, {'content': '', 'date': '', 'id': 49, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 50, 'author': 'Pennywise'}, {'content': '', 'date': '', 'id': 51, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 52, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 53, 'author': 'MacGyver'}, {'content': '', 'date': '', 'id': 54, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 55, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 56, 'author': 'Yvan Lendl'}, {'content': '', 'date': '', 'id': 57, 'author': 'Hawkeye Pierce'}, {'content': '', 'date': '', 'id': 58, 'author': 'Simone'}, {'content': '', 'date': '', 'id': 59, 'author': 'Franky le Borgne'}, {'content': '', 'date': '', 'id': 60, 'author': 'Anna Wintour'}, {'content': '', 'date': '', 'id': 61, 'author': 'Barbara Windsor'}, {'content': '', 'date': '', 'id': 62, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 63, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 64, 'author': 'Stan Lee'}, {'content': '', 'date': '', 'id': 65, 'author': 'Monsieur Connard'}, {'content': '', 'date': '', 'id': 66, 'author': 'Johnny Hardon'}, {'content': '', 'date': '', 'id': 67, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 68, 'author': 'Professeur Tournesol'}, {'content': '', 'date': '', 'id': 69, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 70, 'author': 'Barack Obama'}, {'content': '', 'date': '', 'id': 71, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 72, 'author': 'Jean-Luc'}, {'content': '', 'date': '', 'id': 73, 'author': u'\xc9milie'}, {'content': '', 'date': '', 'id': 74, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 75, 'author': 'Peter Priapic'}, {'content': '', 'date': '', 'id': 76, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 77, 'author': 'Hawkeye Pierce'}, {'content': '', 'date': '', 'id': 78, 'author': 'Dogbowl'}, {'content': '', 'date': '', 'id': 79, 'author': ''}, {'content': '', 'date': '', 'id': 80, 'author': 'Lucky Luke'}, {'content': '', 'date': '', 'id': 81, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 82, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 83, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 84, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 85, 'author': 'Vidal Sassoon'}, {'content': '', 'date': '', 'id': 86, 'author': u'St\xe9phane Plaza'}, {'content': '', 'date': '', 'id': 87, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 88, 'author': 'Cheeky Nandos'}, {'content': '', 'date': '', 'id': 89, 'author': 'Britney Bi**h'}, {'content': '', 'date': '', 'id': 90, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 91, 'author': 'Donald Trompette'}, {'content': '', 'date': '', 'id': 92, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 93, 'author': 'Snoop Dogg'}, {'content': '', 'date': '', 'id': 94, 'author': 'Roger Canigou'}, {'content': '', 'date': '', 'id': 95, 'author': 'VDM Educ'}, {'content': '', 'date': '', 'id': 96, 'author': 'Hawkeye'}, {'content': '', 'date': '', 'id': 97, 'author': 'Frank Beard'}, {'content': '', 'date': '', 'id': 98, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 99, 'author': u'G\xe9nie'}, {'content': '', 'date': '', 'id': 100, 'author': u'J\xe9j\xe9'}, {'content': '', 'date': '', 'id': 101, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 102, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 103, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 104, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 105, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 106, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 107, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 108, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 109, 'author': u'No\xebl et Liam'}, {'content': '', 'date': '', 'id': 110, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 111, 'author': ''}, {'content': '', 'date': '', 'id': 112, 'author': 'Jean-Michel Pilote'}, {'content': '', 'date': '', 'id': 113, 'author': 'Ghost'}, {'content': '', 'date': '', 'id': 114, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 115, 'author': 'Hawkeye'}, {'content': '', 'date': '', 'id': 116, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 117, 'author': ''}, {'content': '', 'date': '', 'id': 118, 'author': 'Booby McTits'}, {'content': '', 'date': '', 'id': 119, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 120, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 121, 'author': 'Jean-Michel Festival'}, {'content': '', 'date': '', 'id': 122, 'author': 'Shakira'}, {'content': '', 'date': '', 'id': 123, 'author': 'Peppa Pig'}, {'content': '', 'date': '', 'id': 124, 'author': 'Pablo Escobar'}, {'content': '', 'date': '', 'id': 125, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 126, 'author': u'Une personne outr\xe9e'}, {'content': '', 'date': '', 'id': 127, 'author': 'Mitch Buchannan'}, {'content': '', 'date': '', 'id': 128, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 129, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 130, 'author': ''}, {'content': '', 'date': '', 'id': 131, 'author': 'Pepito'}, {'content': '', 'date': '', 'id': 132, 'author': 'Canard WC'}, {'content': '', 'date': '', 'id': 133, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 134, 'author': 'Hawkeye'}, {'content': '', 'date': '', 'id': 135, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 136, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 137, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 138, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 139, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 140, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 141, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 142, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 143, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 144, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 145, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 146, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 147, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 148, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 149, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 150, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 151, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 152, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 153, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 154, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 155, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 156, 'author': 'Ned Flanders'}, {'content': '', 'date': '', 'id': 157, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 158, 'author': 'Jojo'}, {'content': '', 'date': '', 'id': 159, 'author': u'VDMM\xe9dics'}, {'content': '', 'date': '', 'id': 160, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 161, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 162, 'author': 'Lili'}, {'content': '', 'date': '', 'id': 163, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 164, 'author': 'Lulu'}, {'content': '', 'date': '', 'id': 165, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 166, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 167, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 168, 'author': 'La Bikeuse'}, {'content': '', 'date': '', 'id': 169, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 170, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 171, 'author': ''}, {'content': '', 'date': '', 'id': 172, 'author': 'MC Hammer'}, {'content': '', 'date': '', 'id': 173, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 174, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 175, 'author': 'Samantha'}, {'content': '', 'date': '', 'id': 176, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 177, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 178, 'author': 'Jojo'}, {'content': '', 'date': '', 'id': 179, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 180, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 181, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 182, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 183, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 184, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 185, 'author': u'VDM culott\xe9e'}, {'content': '', 'date': '', 'id': 186, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 187, 'author': 'Le Fou du Volant'}, {'content': '', 'date': '', 'id': 188, 'author': 'Vic666'}, {'content': '', 'date': '', 'id': 189, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 190, 'author': 'Le Breton'}, {'content': '', 'date': '', 'id': 191, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 192, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 193, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 194, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 195, 'author': 'Samantha'}, {'content': '', 'date': '', 'id': 196, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 197, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 198, 'author': 'Jean Valjean'}, {'content': '', 'date': '', 'id': 199, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 200, 'author': 'Miss Camping'}]}

— You are receiving this because you are subscribed to this thread. Reply to this email directly, view it on GitHub https://github.com/Chamawix/scrapping_vdm/issues/2, or mute the thread https://github.com/notifications/unsubscribe-auth/AHaEh3SI_8bjbzFk8BWAfaBUMJhb2tqNks5soPu7gaJpZM4Pqx7m .

Chamawix commented 7 years ago

La sortie attendue est celle-ci pour 1 post : { "count": 200, "post": [ { "content": " Le mannequin Pietro Boselli, ancien enseignant chercheur a l\u2019University College de Londres, n\u2019a jamais eu a rougir de sa belle plastique. Litteralement porte aux nues par les reseaux sociaux, son ascension s\u2019est faite rapidement, a un tel point que les marques de luxe se l\u2019arrachent aujourd hui. Mais force est de constater que les choses sont moins evidentes pour les femmes gatees par la nature aux yeux de la societe. Viktoria Demeshkina, employee dans une ecole maternelle situee a Iekaterinburg, dans l\u2019Oural, en Russie, en a fait malheureusement les frais. Et\u00a0c est absolument incomprehensible. Une publication partagee par \u0412\u0438\u043a\u0442\u043e\u0440\u0438\u044f \u0414\u0435\u043c\u0435\u0448\u043a\u0438\u043d\u0430 (@viktoriya_demeshkina) le 24 Sept. 2017 a 3h30 PDT \u00a0 Tout est parti d\u2019une plainte venue de la part de plusieurs parents, consternes par des photos qui auraient ete postees sur son compte Instagram privepar la jeune femme. Selon eux, Viktoria aurait volontairement pris des \u00ab\u00a0poses et des expressions a connotation sexuelle\u00a0\u00bb. Sachant qu\u2019il s\u2019agit du compte PRIVE de la jeune professeure, les parents auraient donc volontairement effectue quelques recherches sur la jeune femme pendant leur temps libre. Attendez, vous voulez dire que detenir une vie privee n est\u00a0pas possible quand on travaille dans une ecole maternelle ? Ah, d accord. En debardeurs, robes moulantes et minishorts, la jeune femme de 26 ans adore varier ses tenues, ce qui n est visiblement pas du gout de ces messieurs et de ces dames, profondement choques qu une femme prenne l initiative de porter ce qu elle veut. Svetlana, une maman, a explique au media britannique The Sun\u00a0qu\u2019elle serait \u00ab\u00a0accidentellement tombee sur ces photos en se baladant sur Instagram\u00a0\u00bb. Ben voyons. Et de poursuivre : \u00ab\u00a0Les photos sont clairement a caractere sexuel [\u2026] tout cela n\u2019est pas digne d\u2019une personne qui travaille avec des enfants, ca peut les influencer d\u2019une mauvaise facon \u00bb\u00a0continue notre tres chere Svetlana. Une publication partagee par \u0412\u0438\u043a\u0442\u043e\u0440\u0438\u044f \u0414\u0435\u043c\u0435\u0448\u043a\u0438\u043d\u0430 (@viktoriya_demeshkina) le 24 Sept. 2017 a 3h25 PDT Sans attendre, la mere outree vend la meche aux autres parents, qui decident de former une alliance pour aller se plaindre aupres du chef d\u2019etablissement. Et apres investigation, le responsable aurait lui aussi trouve ces photos ouvertement sexuelles, au point de demander a la principale concernee de supprimer les cliches illico presto. Carrement. Mais Viktoria ne l a pas entendu de cette oreille\u00a0: \u00ab ces photographies exposent des moments de ma vie. Il n\u2019y a aucune connotation derriere et encore moins quelque chose de reprehensible\u00a0\u00bb. Peu etonnant donc que celle-ci refuse de supprimer son compte ou ses photos, qui font partie de sa vie privee. Mais ce choix lui a coute cher\u00a0:\u00a0l ecole a tout bonnement decide d\u2019arreter de lui payer son supplement de fin de mois que l\u2019on attribue habituellement aux professeurs en Russie afin de compenser leurs petits salaires. Mais pour Viktoria, impossible de ceder aux pressions du personnel enseignant et encore moins aux parents d\u2019eleves\u00a0: elle a depuis donne sa demission et cherche un nouvel emploi. Et c est peut-etre mieux comme ca.", "date": "2017-10-2T05:00:00Z", "id": 1, "author": "VDM" },

2017-10-02 17:14 GMT+02:00 Maximilien Matsakis < maximilien.matsakis@gmail.com>:

Pas normal, à nouveau...

Pouvez vous modifier dans app.py le nombre de post fetché, et le mettre à 3, et me dire si le retour est similaire?

2017-10-02 17:05 GMT+02:00 Thomas notifications@github.com:

Voici le return de /api/posts :

{'count': 200, 'post': [{'content': '', 'date': '', 'id': 1, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 2, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 3, 'author': 'Sebastien Folin'}, {'content': '', 'date': '', 'id': 4, 'author': 'Mark E. Smith'}, {'content': '', 'date': '', 'id': 5, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 6, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 7, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 8, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 9, 'author': 'Lassie'}, {'content': '', 'date': '', 'id': 10, 'author': 'The Chronic'}, {'content': '', 'date': '', 'id': 11, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 12, 'author': 'Edouard Leclerc'}, {'content': '', 'date': '', 'id': 13, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 14, 'author': 'Polly'}, {'content': '', 'date': '', 'id': 15, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 16, 'author': 'Crocodile Dundee'}, {'content': '', 'date': '', 'id': 17, 'author': 'Kevin Carter'}, {'content': '', 'date': '', 'id': 18, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 19, 'author': 'Wikiki Girl'}, {'content': '', 'date': '', 'id': 20, 'author': 'Erin Brokovitch'}, {'content': '', 'date': '', 'id': 21, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 22, 'author': u'S\xe9bastien Folin'}, {'content': '', 'date': '', 'id': 23, 'author': 'William Portail'}, {'content': '', 'date': '', 'id': 24, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 25, 'author': 'DJ Calebut'}, {'content': '', 'date': '', 'id': 26, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 27, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 28, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 29, 'author': 'Mimi'}, {'content': '', 'date': '', 'id': 30, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 31, 'author': 'youpla'}, {'content': '', 'date': '', 'id': 32, 'author': 'hommebrioche'}, {'content': '', 'date': '', 'id': 33, 'author': 'Anonyme'}, {'content': '', 'date': '', 'id': 34, 'author': 'momoleconnard'}, {'content': '', 'date': '', 'id': 35, 'author': 'zed'}, {'content': '', 'date': '', 'id': 36, 'author': 'zed'}, {'content': '', 'date': '', 'id': 37, 'author': 'Shemselnihar'}, {'content': '', 'date': '', 'id': 38, 'author': 'Shemselnihar'}, {'content': '', 'date': '', 'id': 39, 'author': 'Sylvie20'}, {'content': '', 'date': '', 'id': 40, 'author': 'quent1'}, {'content': '', 'date': '', 'id': 41, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 42, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 43, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 44, 'author': 'Anonyme'}, {'content': '', 'date': '', 'id': 45, 'author': u'Rat\xe9'}, {'content': '', 'date': '', 'id': 46, 'author': u'Rat\xe9'}, {'content': '', 'date': '', 'id': 47, 'author': "Pline l'Ancien"}, {'content': '', 'date': '', 'id': 48, 'author': 'Simone'}, {'content': '', 'date': '', 'id': 49, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 50, 'author': 'Pennywise'}, {'content': '', 'date': '', 'id': 51, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 52, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 53, 'author': 'MacGyver'}, {'content': '', 'date': '', 'id': 54, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 55, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 56, 'author': 'Yvan Lendl'}, {'content': '', 'date': '', 'id': 57, 'author': 'Hawkeye Pierce'}, {'content': '', 'date': '', 'id': 58, 'author': 'Simone'}, {'content': '', 'date': '', 'id': 59, 'author': 'Franky le Borgne'}, {'content': '', 'date': '', 'id': 60, 'author': 'Anna Wintour'}, {'content': '', 'date': '', 'id': 61, 'author': 'Barbara Windsor'}, {'content': '', 'date': '', 'id': 62, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 63, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 64, 'author': 'Stan Lee'}, {'content': '', 'date': '', 'id': 65, 'author': 'Monsieur Connard'}, {'content': '', 'date': '', 'id': 66, 'author': 'Johnny Hardon'}, {'content': '', 'date': '', 'id': 67, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 68, 'author': 'Professeur Tournesol'}, {'content': '', 'date': '', 'id': 69, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 70, 'author': 'Barack Obama'}, {'content': '', 'date': '', 'id': 71, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 72, 'author': 'Jean-Luc'}, {'content': '', 'date': '', 'id': 73, 'author': u'\xc9milie'}, {'content': '', 'date': '', 'id': 74, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 75, 'author': 'Peter Priapic'}, {'content': '', 'date': '', 'id': 76, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 77, 'author': 'Hawkeye Pierce'}, {'content': '', 'date': '', 'id': 78, 'author': 'Dogbowl'}, {'content': '', 'date': '', 'id': 79, 'author': ''}, {'content': '', 'date': '', 'id': 80, 'author': 'Lucky Luke'}, {'content': '', 'date': '', 'id': 81, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 82, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 83, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 84, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 85, 'author': 'Vidal Sassoon'}, {'content': '', 'date': '', 'id': 86, 'author': u'St\xe9phane Plaza'}, {'content': '', 'date': '', 'id': 87, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 88, 'author': 'Cheeky Nandos'}, {'content': '', 'date': '', 'id': 89, 'author': 'Britney Bi**h'}, {'content': '', 'date': '', 'id': 90, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 91, 'author': 'Donald Trompette'}, {'content': '', 'date': '', 'id': 92, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 93, 'author': 'Snoop Dogg'}, {'content': '', 'date': '', 'id': 94, 'author': 'Roger Canigou'}, {'content': '', 'date': '', 'id': 95, 'author': 'VDM Educ'}, {'content': '', 'date': '', 'id': 96, 'author': 'Hawkeye'}, {'content': '', 'date': '', 'id': 97, 'author': 'Frank Beard'}, {'content': '', 'date': '', 'id': 98, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 99, 'author': u'G\xe9nie'}, {'content': '', 'date': '', 'id': 100, 'author': u'J\xe9j\xe9'}, {'content': '', 'date': '', 'id': 101, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 102, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 103, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 104, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 105, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 106, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 107, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 108, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 109, 'author': u'No\xebl et Liam'}, {'content': '', 'date': '', 'id': 110, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 111, 'author': ''}, {'content': '', 'date': '', 'id': 112, 'author': 'Jean-Michel Pilote'}, {'content': '', 'date': '', 'id': 113, 'author': 'Ghost'}, {'content': '', 'date': '', 'id': 114, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 115, 'author': 'Hawkeye'}, {'content': '', 'date': '', 'id': 116, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 117, 'author': ''}, {'content': '', 'date': '', 'id': 118, 'author': 'Booby McTits'}, {'content': '', 'date': '', 'id': 119, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 120, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 121, 'author': 'Jean-Michel Festival'}, {'content': '', 'date': '', 'id': 122, 'author': 'Shakira'}, {'content': '', 'date': '', 'id': 123, 'author': 'Peppa Pig'}, {'content': '', 'date': '', 'id': 124, 'author': 'Pablo Escobar'}, {'content': '', 'date': '', 'id': 125, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 126, 'author': u'Une personne outr\xe9e'}, {'content': '', 'date': '', 'id': 127, 'author': 'Mitch Buchannan'}, {'content': '', 'date': '', 'id': 128, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 129, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 130, 'author': ''}, {'content': '', 'date': '', 'id': 131, 'author': 'Pepito'}, {'content': '', 'date': '', 'id': 132, 'author': 'Canard WC'}, {'content': '', 'date': '', 'id': 133, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 134, 'author': 'Hawkeye'}, {'content': '', 'date': '', 'id': 135, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 136, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 137, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 138, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 139, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 140, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 141, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 142, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 143, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 144, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 145, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 146, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 147, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 148, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 149, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 150, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 151, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 152, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 153, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 154, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 155, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 156, 'author': 'Ned Flanders'}, {'content': '', 'date': '', 'id': 157, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 158, 'author': 'Jojo'}, {'content': '', 'date': '', 'id': 159, 'author': u'VDMM\xe9dics'}, {'content': '', 'date': '', 'id': 160, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 161, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 162, 'author': 'Lili'}, {'content': '', 'date': '', 'id': 163, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 164, 'author': 'Lulu'}, {'content': '', 'date': '', 'id': 165, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 166, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 167, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 168, 'author': 'La Bikeuse'}, {'content': '', 'date': '', 'id': 169, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 170, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 171, 'author': ''}, {'content': '', 'date': '', 'id': 172, 'author': 'MC Hammer'}, {'content': '', 'date': '', 'id': 173, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 174, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 175, 'author': 'Samantha'}, {'content': '', 'date': '', 'id': 176, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 177, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 178, 'author': 'Jojo'}, {'content': '', 'date': '', 'id': 179, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 180, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 181, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 182, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 183, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 184, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 185, 'author': u'VDM culott\xe9e'}, {'content': '', 'date': '', 'id': 186, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 187, 'author': 'Le Fou du Volant'}, {'content': '', 'date': '', 'id': 188, 'author': 'Vic666'}, {'content': '', 'date': '', 'id': 189, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 190, 'author': 'Le Breton'}, {'content': '', 'date': '', 'id': 191, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 192, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 193, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 194, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 195, 'author': 'Samantha'}, {'content': '', 'date': '', 'id': 196, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 197, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 198, 'author': 'Jean Valjean'}, {'content': '', 'date': '', 'id': 199, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 200, 'author': 'Miss Camping'}]}

— You are receiving this because you are subscribed to this thread. Reply to this email directly, view it on GitHub https://github.com/Chamawix/scrapping_vdm/issues/2, or mute the thread https://github.com/notifications/unsubscribe-auth/AHaEh3SI_8bjbzFk8BWAfaBUMJhb2tqNks5soPu7gaJpZM4Pqx7m .

pocman commented 7 years ago

Est ce que tu peux executer les commandes suivantes afin de confirmer le comportement dans docker ? ;)

docker build -t vdm_scrapper .

docker run -it --entrypoint=/bin/bash vdm_scrapper -i

Thomas Pocreau Machine Learning Engineer

t +33 (0)6 45 12 61 58 <+33285522187> e thomas.pocreau@iadvize.com gladys@iadvize.com

Le 2 octobre 2017 à 17:21, Chamawix notifications@github.com a écrit :

La sortie attendue est celle-ci pour 1 post : { "count": 200, "post": [ { "content": " Le mannequin Pietro Boselli, ancien enseignant chercheur a l\u2019University College de Londres, n\u2019a jamais eu a rougir de sa belle plastique. Litteralement porte aux nues par les reseaux sociaux, son ascension s\u2019est faite rapidement, a un tel point que les marques de luxe se l\u2019arrachent aujourd hui. Mais force est de constater que les choses sont moins evidentes pour les femmes gatees par la nature aux yeux de la societe. Viktoria Demeshkina, employee dans une ecole maternelle situee a Iekaterinburg, dans l\u2019Oural, en Russie, en a fait malheureusement les frais. Et\u00a0c est absolument incomprehensible. Une publication partagee par \u0412\u0438\u043a\u0442\u043e\u0440\u0438\u044f \u0414\u0435\u043c\u0435\u0448\u043a\u0438\u043d\u0430 (@viktoriya_demeshkina) le 24 Sept. 2017 a 3h30 PDT \u00a0 Tout est parti d\u2019une plainte venue de la part de plusieurs parents, consternes par des photos qui auraient ete postees sur son compte Instagram privepar la jeune femme. Selon eux, Viktoria aurait volontairement pris des \u00ab\u00a0poses et des expressions a connotation sexuelle\u00a0\u00bb. Sachant qu\u2019il s\u2019agit du compte PRIVE de la jeune professeure, les parents auraient donc volontairement effectue quelques recherches sur la jeune femme pendant leur temps libre. Attendez, vous voulez dire que detenir une vie privee n est\u00a0pas possible quand on travaille dans une ecole maternelle ? Ah, d accord. En debardeurs, robes moulantes et minishorts, la jeune femme de 26 ans adore varier ses tenues, ce qui n est visiblement pas du gout de ces messieurs et de ces dames, profondement choques qu une femme prenne l initiative de porter ce qu elle veut. Svetlana, une maman, a explique au media britannique The Sun\u00a0qu\u2019elle serait \u00ab\u00a0accidentellement tombee sur ces photos en se baladant sur Instagram\u00a0\u00bb. Ben voyons. Et de poursuivre : \u00ab\u00a0Les photos sont clairement a caractere sexuel [\u2026] tout cela n\u2019est pas digne d\u2019une personne qui travaille avec des enfants, ca peut les influencer d\u2019une mauvaise facon \u00bb\u00a0continue notre tres chere Svetlana. Une publication partagee par \u0412\u0438\u043a\u0442\u043e\u0440\u0438\u044f \u0414\u0435\u043c\u0435\u0448\u043a\u0438\u043d\u0430 (@viktoriya_demeshkina) le 24 Sept. 2017 a 3h25 PDT Sans attendre, la mere outree vend la meche aux autres parents, qui decident de former une alliance pour aller se plaindre aupres du chef d\u2019etablissement. Et apres investigation, le responsable aurait lui aussi trouve ces photos ouvertement sexuelles, au point de demander a la principale concernee de supprimer les cliches illico presto. Carrement. Mais Viktoria ne l a pas entendu de cette oreille\u00a0: \u00ab ces photographies exposent des moments de ma vie. Il n\u2019y a aucune connotation derriere et encore moins quelque chose de reprehensible\u00a0\u00bb. Peu etonnant donc que celle-ci refuse de supprimer son compte ou ses photos, qui font partie de sa vie privee. Mais ce choix lui a coute cher\u00a0:\u00a0l ecole a tout bonnement decide d\u2019arreter de lui payer son supplement de fin de mois que l\u2019on attribue habituellement aux professeurs en Russie afin de compenser leurs petits salaires. Mais pour Viktoria, impossible de ceder aux pressions du personnel enseignant et encore moins aux parents d\u2019eleves\u00a0: elle a depuis donne sa demission et cherche un nouvel emploi. Et c est peut-etre mieux comme ca.", "date": "2017-10-2T05:00:00Z", "id": 1, "author": "VDM" },

2017-10-02 17:14 GMT+02:00 Maximilien Matsakis < maximilien.matsakis@gmail.com>:

Pas normal, à nouveau...

Pouvez vous modifier dans app.py le nombre de post fetché, et le mettre à 3, et me dire si le retour est similaire?

2017-10-02 17:05 GMT+02:00 Thomas notifications@github.com:

Voici le return de /api/posts :

{'count': 200, 'post': [{'content': '', 'date': '', 'id': 1, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 2, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 3, 'author': 'Sebastien Folin'}, {'content': '', 'date': '', 'id': 4, 'author': 'Mark E. Smith'}, {'content': '', 'date': '', 'id': 5, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 6, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 7, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 8, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 9, 'author': 'Lassie'}, {'content': '', 'date': '', 'id': 10, 'author': 'The Chronic'}, {'content': '', 'date': '', 'id': 11, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 12, 'author': 'Edouard Leclerc'}, {'content': '', 'date': '', 'id': 13, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 14, 'author': 'Polly'}, {'content': '', 'date': '', 'id': 15, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 16, 'author': 'Crocodile Dundee'}, {'content': '', 'date': '', 'id': 17, 'author': 'Kevin Carter'}, {'content': '', 'date': '', 'id': 18, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 19, 'author': 'Wikiki Girl'}, {'content': '', 'date': '', 'id': 20, 'author': 'Erin Brokovitch'}, {'content': '', 'date': '', 'id': 21, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 22, 'author': u'S\xe9bastien Folin'}, {'content': '', 'date': '', 'id': 23, 'author': 'William Portail'}, {'content': '', 'date': '', 'id': 24, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 25, 'author': 'DJ Calebut'}, {'content': '', 'date': '', 'id': 26, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 27, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 28, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 29, 'author': 'Mimi'}, {'content': '', 'date': '', 'id': 30, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 31, 'author': 'youpla'}, {'content': '', 'date': '', 'id': 32, 'author': 'hommebrioche'}, {'content': '', 'date': '', 'id': 33, 'author': 'Anonyme'}, {'content': '', 'date': '', 'id': 34, 'author': 'momoleconnard'}, {'content': '', 'date': '', 'id': 35, 'author': 'zed'}, {'content': '', 'date': '', 'id': 36, 'author': 'zed'}, {'content': '', 'date': '', 'id': 37, 'author': 'Shemselnihar'}, {'content': '', 'date': '', 'id': 38, 'author': 'Shemselnihar'}, {'content': '', 'date': '', 'id': 39, 'author': 'Sylvie20'}, {'content': '', 'date': '', 'id': 40, 'author': 'quent1'}, {'content': '', 'date': '', 'id': 41, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 42, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 43, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 44, 'author': 'Anonyme'}, {'content': '', 'date': '', 'id': 45, 'author': u'Rat\xe9'}, {'content': '', 'date': '', 'id': 46, 'author': u'Rat\xe9'}, {'content': '', 'date': '', 'id': 47, 'author': "Pline l'Ancien"}, {'content': '', 'date': '', 'id': 48, 'author': 'Simone'}, {'content': '', 'date': '', 'id': 49, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 50, 'author': 'Pennywise'}, {'content': '', 'date': '', 'id': 51, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 52, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 53, 'author': 'MacGyver'}, {'content': '', 'date': '', 'id': 54, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 55, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 56, 'author': 'Yvan Lendl'}, {'content': '', 'date': '', 'id': 57, 'author': 'Hawkeye Pierce'}, {'content': '', 'date': '', 'id': 58, 'author': 'Simone'}, {'content': '', 'date': '', 'id': 59, 'author': 'Franky le Borgne'}, {'content': '', 'date': '', 'id': 60, 'author': 'Anna Wintour'}, {'content': '', 'date': '', 'id': 61, 'author': 'Barbara Windsor'}, {'content': '', 'date': '', 'id': 62, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 63, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 64, 'author': 'Stan Lee'}, {'content': '', 'date': '', 'id': 65, 'author': 'Monsieur Connard'}, {'content': '', 'date': '', 'id': 66, 'author': 'Johnny Hardon'}, {'content': '', 'date': '', 'id': 67, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 68, 'author': 'Professeur Tournesol'}, {'content': '', 'date': '', 'id': 69, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 70, 'author': 'Barack Obama'}, {'content': '', 'date': '', 'id': 71, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 72, 'author': 'Jean-Luc'}, {'content': '', 'date': '', 'id': 73, 'author': u'\xc9milie'}, {'content': '', 'date': '', 'id': 74, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 75, 'author': 'Peter Priapic'}, {'content': '', 'date': '', 'id': 76, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 77, 'author': 'Hawkeye Pierce'}, {'content': '', 'date': '', 'id': 78, 'author': 'Dogbowl'}, {'content': '', 'date': '', 'id': 79, 'author': ''}, {'content': '', 'date': '', 'id': 80, 'author': 'Lucky Luke'}, {'content': '', 'date': '', 'id': 81, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 82, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 83, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 84, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 85, 'author': 'Vidal Sassoon'}, {'content': '', 'date': '', 'id': 86, 'author': u'St\xe9phane Plaza'}, {'content': '', 'date': '', 'id': 87, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 88, 'author': 'Cheeky Nandos'}, {'content': '', 'date': '', 'id': 89, 'author': 'Britney Bi**h'}, {'content': '', 'date': '', 'id': 90, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 91, 'author': 'Donald Trompette'}, {'content': '', 'date': '', 'id': 92, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 93, 'author': 'Snoop Dogg'}, {'content': '', 'date': '', 'id': 94, 'author': 'Roger Canigou'}, {'content': '', 'date': '', 'id': 95, 'author': 'VDM Educ'}, {'content': '', 'date': '', 'id': 96, 'author': 'Hawkeye'}, {'content': '', 'date': '', 'id': 97, 'author': 'Frank Beard'}, {'content': '', 'date': '', 'id': 98, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 99, 'author': u'G\xe9nie'}, {'content': '', 'date': '', 'id': 100, 'author': u'J\xe9j\xe9'}, {'content': '', 'date': '', 'id': 101, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 102, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 103, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 104, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 105, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 106, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 107, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 108, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 109, 'author': u'No\xebl et Liam'}, {'content': '', 'date': '', 'id': 110, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 111, 'author': ''}, {'content': '', 'date': '', 'id': 112, 'author': 'Jean-Michel Pilote'}, {'content': '', 'date': '', 'id': 113, 'author': 'Ghost'}, {'content': '', 'date': '', 'id': 114, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 115, 'author': 'Hawkeye'}, {'content': '', 'date': '', 'id': 116, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 117, 'author': ''}, {'content': '', 'date': '', 'id': 118, 'author': 'Booby McTits'}, {'content': '', 'date': '', 'id': 119, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 120, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 121, 'author': 'Jean-Michel Festival'}, {'content': '', 'date': '', 'id': 122, 'author': 'Shakira'}, {'content': '', 'date': '', 'id': 123, 'author': 'Peppa Pig'}, {'content': '', 'date': '', 'id': 124, 'author': 'Pablo Escobar'}, {'content': '', 'date': '', 'id': 125, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 126, 'author': u'Une personne outr\xe9e'}, {'content': '', 'date': '', 'id': 127, 'author': 'Mitch Buchannan'}, {'content': '', 'date': '', 'id': 128, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 129, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 130, 'author': ''}, {'content': '', 'date': '', 'id': 131, 'author': 'Pepito'}, {'content': '', 'date': '', 'id': 132, 'author': 'Canard WC'}, {'content': '', 'date': '', 'id': 133, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 134, 'author': 'Hawkeye'}, {'content': '', 'date': '', 'id': 135, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 136, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 137, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 138, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 139, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 140, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 141, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 142, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 143, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 144, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 145, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 146, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 147, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 148, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 149, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 150, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 151, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 152, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 153, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 154, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 155, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 156, 'author': 'Ned Flanders'}, {'content': '', 'date': '', 'id': 157, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 158, 'author': 'Jojo'}, {'content': '', 'date': '', 'id': 159, 'author': u'VDMM\xe9dics'}, {'content': '', 'date': '', 'id': 160, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 161, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 162, 'author': 'Lili'}, {'content': '', 'date': '', 'id': 163, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 164, 'author': 'Lulu'}, {'content': '', 'date': '', 'id': 165, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 166, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 167, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 168, 'author': 'La Bikeuse'}, {'content': '', 'date': '', 'id': 169, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 170, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 171, 'author': ''}, {'content': '', 'date': '', 'id': 172, 'author': 'MC Hammer'}, {'content': '', 'date': '', 'id': 173, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 174, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 175, 'author': 'Samantha'}, {'content': '', 'date': '', 'id': 176, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 177, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 178, 'author': 'Jojo'}, {'content': '', 'date': '', 'id': 179, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 180, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 181, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 182, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 183, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 184, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 185, 'author': u'VDM culott\xe9e'}, {'content': '', 'date': '', 'id': 186, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 187, 'author': 'Le Fou du Volant'}, {'content': '', 'date': '', 'id': 188, 'author': 'Vic666'}, {'content': '', 'date': '', 'id': 189, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 190, 'author': 'Le Breton'}, {'content': '', 'date': '', 'id': 191, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 192, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 193, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 194, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 195, 'author': 'Samantha'}, {'content': '', 'date': '', 'id': 196, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 197, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 198, 'author': 'Jean Valjean'}, {'content': '', 'date': '', 'id': 199, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 200, 'author': 'Miss Camping'}]}

— You are receiving this because you are subscribed to this thread. Reply to this email directly, view it on GitHub https://github.com/Chamawix/scrapping_vdm/issues/2, or mute the thread https://github.com/notifications/unsubscribe-auth/AHaEh3SI_ 8bjbzFk8BWAfaBUMJhb2tqNks5soPu7gaJpZM4Pqx7m .

— You are receiving this because you authored the thread. Reply to this email directly, view it on GitHub https://github.com/Chamawix/scrapping_vdm/issues/2#issuecomment-333567663, or mute the thread https://github.com/notifications/unsubscribe-auth/ABngQFVtsetYW0AzCiAgVyV1iL6oUO8wks5soP9_gaJpZM4Pqx7m .

pocman commented 7 years ago

Plus exactement :

docker build -t vdm_scrapper .

docker run -it --entrypoint=/bin/bash vdm_scrapper -i

=> fetch

in other term

docker exec -it $container_id /bin/bash

=> curl localhost:5000/api/posts

Thomas Pocreau Machine Learning Engineer

t +33 (0)6 45 12 61 58 <+33285522187> e thomas.pocreau@iadvize.com gladys@iadvize.com

Le 2 octobre 2017 à 17:25, thomas pocreau thomas.poc@gmail.com a écrit :

Est ce que tu peux executer les commandes suivantes afin de confirmer le comportement dans docker ? ;)

docker build -t vdm_scrapper .

docker run -it --entrypoint=/bin/bash vdm_scrapper -i

Thomas Pocreau Machine Learning Engineer

t +33 (0)6 45 12 61 58 <+33285522187> e thomas.pocreau@iadvize.com gladys@iadvize.com

Le 2 octobre 2017 à 17:21, Chamawix notifications@github.com a écrit :

La sortie attendue est celle-ci pour 1 post : { "count": 200, "post": [ { "content": " Le mannequin Pietro Boselli, ancien enseignant chercheur a l\u2019University College de Londres, n\u2019a jamais eu a rougir de sa belle plastique. Litteralement porte aux nues par les reseaux sociaux, son ascension s\u2019est faite rapidement, a un tel point que les marques de luxe se l\u2019arrachent aujourd hui. Mais force est de constater que les choses sont moins evidentes pour les femmes gatees par la nature aux yeux de la societe. Viktoria Demeshkina, employee dans une ecole maternelle situee a Iekaterinburg, dans l\u2019Oural, en Russie, en a fait malheureusement les frais. Et\u00a0c est absolument incomprehensible. Une publication partagee par \u0412\u0438\u043a\u0442\u043e\u0440\u0438\u044f \u0414\u0435\u043c\u0435\u0448\u043a\u0438\u043d\u0430 (@viktoriya_demeshkina) le 24 Sept. 2017 a 3h30 PDT \u00a0 Tout est parti d\u2019une plainte venue de la part de plusieurs parents, consternes par des photos qui auraient ete postees sur son compte Instagram privepar la jeune femme. Selon eux, Viktoria aurait volontairement pris des \u00ab\u00a0poses et des expressions a connotation sexuelle\u00a0\u00bb. Sachant qu\u2019il s\u2019agit du compte PRIVE de la jeune professeure, les parents auraient donc volontairement effectue quelques recherches sur la jeune femme pendant leur temps libre. Attendez, vous voulez dire que detenir une vie privee n est\u00a0pas possible quand on travaille dans une ecole maternelle ? Ah, d accord. En debardeurs, robes moulantes et minishorts, la jeune femme de 26 ans adore varier ses tenues, ce qui n est visiblement pas du gout de ces messieurs et de ces dames, profondement choques qu une femme prenne l initiative de porter ce qu elle veut. Svetlana, une maman, a explique au media britannique The Sun\u00a0qu\u2019elle serait \u00ab\u00a0accidentellement tombee sur ces photos en se baladant sur Instagram\u00a0\u00bb. Ben voyons. Et de poursuivre : \u00ab\u00a0Les photos sont clairement a caractere sexuel [\u2026] tout cela n\u2019est pas digne d\u2019une personne qui travaille avec des enfants, ca peut les influencer d\u2019une mauvaise facon \u00bb\u00a0continue notre tres chere Svetlana. Une publication partagee par \u0412\u0438\u043a\u0442\u043e\u0440\u0438\u044f \u0414\u0435\u043c\u0435\u0448\u043a\u0438\u043d\u0430 (@viktoriya_demeshkina) le 24 Sept. 2017 a 3h25 PDT Sans attendre, la mere outree vend la meche aux autres parents, qui decident de former une alliance pour aller se plaindre aupres du chef d\u2019etablissement. Et apres investigation, le responsable aurait lui aussi trouve ces photos ouvertement sexuelles, au point de demander a la principale concernee de supprimer les cliches illico presto. Carrement. Mais Viktoria ne l a pas entendu de cette oreille\u00a0: \u00ab ces photographies exposent des moments de ma vie. Il n\u2019y a aucune connotation derriere et encore moins quelque chose de reprehensible\u00a0\u00bb. Peu etonnant donc que celle-ci refuse de supprimer son compte ou ses photos, qui font partie de sa vie privee. Mais ce choix lui a coute cher\u00a0:\u00a0l ecole a tout bonnement decide d\u2019arreter de lui payer son supplement de fin de mois que l\u2019on attribue habituellement aux professeurs en Russie afin de compenser leurs petits salaires. Mais pour Viktoria, impossible de ceder aux pressions du personnel enseignant et encore moins aux parents d\u2019eleves\u00a0: elle a depuis donne sa demission et cherche un nouvel emploi. Et c est peut-etre mieux comme ca.", "date": "2017-10-2T05:00:00Z", "id": 1, "author": "VDM" },

2017-10-02 17:14 GMT+02:00 Maximilien Matsakis < maximilien.matsakis@gmail.com>:

Pas normal, à nouveau...

Pouvez vous modifier dans app.py le nombre de post fetché, et le mettre à 3, et me dire si le retour est similaire?

2017-10-02 17:05 GMT+02:00 Thomas notifications@github.com:

Voici le return de /api/posts :

{'count': 200, 'post': [{'content': '', 'date': '', 'id': 1, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 2, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 3, 'author': 'Sebastien Folin'}, {'content': '', 'date': '', 'id': 4, 'author': 'Mark E. Smith'}, {'content': '', 'date': '', 'id': 5, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 6, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 7, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 8, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 9, 'author': 'Lassie'}, {'content': '', 'date': '', 'id': 10, 'author': 'The Chronic'}, {'content': '', 'date': '', 'id': 11, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 12, 'author': 'Edouard Leclerc'}, {'content': '', 'date': '', 'id': 13, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 14, 'author': 'Polly'}, {'content': '', 'date': '', 'id': 15, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 16, 'author': 'Crocodile Dundee'}, {'content': '', 'date': '', 'id': 17, 'author': 'Kevin Carter'}, {'content': '', 'date': '', 'id': 18, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 19, 'author': 'Wikiki Girl'}, {'content': '', 'date': '', 'id': 20, 'author': 'Erin Brokovitch'}, {'content': '', 'date': '', 'id': 21, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 22, 'author': u'S\xe9bastien Folin'}, {'content': '', 'date': '', 'id': 23, 'author': 'William Portail'}, {'content': '', 'date': '', 'id': 24, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 25, 'author': 'DJ Calebut'}, {'content': '', 'date': '', 'id': 26, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 27, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 28, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 29, 'author': 'Mimi'}, {'content': '', 'date': '', 'id': 30, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 31, 'author': 'youpla'}, {'content': '', 'date': '', 'id': 32, 'author': 'hommebrioche'}, {'content': '', 'date': '', 'id': 33, 'author': 'Anonyme'}, {'content': '', 'date': '', 'id': 34, 'author': 'momoleconnard'}, {'content': '', 'date': '', 'id': 35, 'author': 'zed'}, {'content': '', 'date': '', 'id': 36, 'author': 'zed'}, {'content': '', 'date': '', 'id': 37, 'author': 'Shemselnihar'}, {'content': '', 'date': '', 'id': 38, 'author': 'Shemselnihar'}, {'content': '', 'date': '', 'id': 39, 'author': 'Sylvie20'}, {'content': '', 'date': '', 'id': 40, 'author': 'quent1'}, {'content': '', 'date': '', 'id': 41, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 42, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 43, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 44, 'author': 'Anonyme'}, {'content': '', 'date': '', 'id': 45, 'author': u'Rat\xe9'}, {'content': '', 'date': '', 'id': 46, 'author': u'Rat\xe9'}, {'content': '', 'date': '', 'id': 47, 'author': "Pline l'Ancien"}, {'content': '', 'date': '', 'id': 48, 'author': 'Simone'}, {'content': '', 'date': '', 'id': 49, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 50, 'author': 'Pennywise'}, {'content': '', 'date': '', 'id': 51, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 52, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 53, 'author': 'MacGyver'}, {'content': '', 'date': '', 'id': 54, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 55, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 56, 'author': 'Yvan Lendl'}, {'content': '', 'date': '', 'id': 57, 'author': 'Hawkeye Pierce'}, {'content': '', 'date': '', 'id': 58, 'author': 'Simone'}, {'content': '', 'date': '', 'id': 59, 'author': 'Franky le Borgne'}, {'content': '', 'date': '', 'id': 60, 'author': 'Anna Wintour'}, {'content': '', 'date': '', 'id': 61, 'author': 'Barbara Windsor'}, {'content': '', 'date': '', 'id': 62, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 63, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 64, 'author': 'Stan Lee'}, {'content': '', 'date': '', 'id': 65, 'author': 'Monsieur Connard'}, {'content': '', 'date': '', 'id': 66, 'author': 'Johnny Hardon'}, {'content': '', 'date': '', 'id': 67, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 68, 'author': 'Professeur Tournesol'}, {'content': '', 'date': '', 'id': 69, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 70, 'author': 'Barack Obama'}, {'content': '', 'date': '', 'id': 71, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 72, 'author': 'Jean-Luc'}, {'content': '', 'date': '', 'id': 73, 'author': u'\xc9milie'}, {'content': '', 'date': '', 'id': 74, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 75, 'author': 'Peter Priapic'}, {'content': '', 'date': '', 'id': 76, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 77, 'author': 'Hawkeye Pierce'}, {'content': '', 'date': '', 'id': 78, 'author': 'Dogbowl'}, {'content': '', 'date': '', 'id': 79, 'author': ''}, {'content': '', 'date': '', 'id': 80, 'author': 'Lucky Luke'}, {'content': '', 'date': '', 'id': 81, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 82, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 83, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 84, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 85, 'author': 'Vidal Sassoon'}, {'content': '', 'date': '', 'id': 86, 'author': u'St\xe9phane Plaza'}, {'content': '', 'date': '', 'id': 87, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 88, 'author': 'Cheeky Nandos'}, {'content': '', 'date': '', 'id': 89, 'author': 'Britney Bi**h'}, {'content': '', 'date': '', 'id': 90, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 91, 'author': 'Donald Trompette'}, {'content': '', 'date': '', 'id': 92, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 93, 'author': 'Snoop Dogg'}, {'content': '', 'date': '', 'id': 94, 'author': 'Roger Canigou'}, {'content': '', 'date': '', 'id': 95, 'author': 'VDM Educ'}, {'content': '', 'date': '', 'id': 96, 'author': 'Hawkeye'}, {'content': '', 'date': '', 'id': 97, 'author': 'Frank Beard'}, {'content': '', 'date': '', 'id': 98, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 99, 'author': u'G\xe9nie'}, {'content': '', 'date': '', 'id': 100, 'author': u'J\xe9j\xe9'}, {'content': '', 'date': '', 'id': 101, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 102, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 103, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 104, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 105, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 106, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 107, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 108, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 109, 'author': u'No\xebl et Liam'}, {'content': '', 'date': '', 'id': 110, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 111, 'author': ''}, {'content': '', 'date': '', 'id': 112, 'author': 'Jean-Michel Pilote'}, {'content': '', 'date': '', 'id': 113, 'author': 'Ghost'}, {'content': '', 'date': '', 'id': 114, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 115, 'author': 'Hawkeye'}, {'content': '', 'date': '', 'id': 116, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 117, 'author': ''}, {'content': '', 'date': '', 'id': 118, 'author': 'Booby McTits'}, {'content': '', 'date': '', 'id': 119, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 120, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 121, 'author': 'Jean-Michel Festival'}, {'content': '', 'date': '', 'id': 122, 'author': 'Shakira'}, {'content': '', 'date': '', 'id': 123, 'author': 'Peppa Pig'}, {'content': '', 'date': '', 'id': 124, 'author': 'Pablo Escobar'}, {'content': '', 'date': '', 'id': 125, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 126, 'author': u'Une personne outr\xe9e'}, {'content': '', 'date': '', 'id': 127, 'author': 'Mitch Buchannan'}, {'content': '', 'date': '', 'id': 128, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 129, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 130, 'author': ''}, {'content': '', 'date': '', 'id': 131, 'author': 'Pepito'}, {'content': '', 'date': '', 'id': 132, 'author': 'Canard WC'}, {'content': '', 'date': '', 'id': 133, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 134, 'author': 'Hawkeye'}, {'content': '', 'date': '', 'id': 135, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 136, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 137, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 138, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 139, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 140, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 141, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 142, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 143, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 144, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 145, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 146, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 147, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 148, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 149, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 150, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 151, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 152, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 153, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 154, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 155, 'author': 'VDM'}, {'content': '', 'date': '', 'id': 156, 'author': 'Ned Flanders'}, {'content': '', 'date': '', 'id': 157, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 158, 'author': 'Jojo'}, {'content': '', 'date': '', 'id': 159, 'author': u'VDMM\xe9dics'}, {'content': '', 'date': '', 'id': 160, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 161, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 162, 'author': 'Lili'}, {'content': '', 'date': '', 'id': 163, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 164, 'author': 'Lulu'}, {'content': '', 'date': '', 'id': 165, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 166, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 167, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 168, 'author': 'La Bikeuse'}, {'content': '', 'date': '', 'id': 169, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 170, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 171, 'author': ''}, {'content': '', 'date': '', 'id': 172, 'author': 'MC Hammer'}, {'content': '', 'date': '', 'id': 173, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 174, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 175, 'author': 'Samantha'}, {'content': '', 'date': '', 'id': 176, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 177, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 178, 'author': 'Jojo'}, {'content': '', 'date': '', 'id': 179, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 180, 'author': 'Le Twitto'}, {'content': '', 'date': '', 'id': 181, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 182, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 183, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 184, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 185, 'author': u'VDM culott\xe9e'}, {'content': '', 'date': '', 'id': 186, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 187, 'author': 'Le Fou du Volant'}, {'content': '', 'date': '', 'id': 188, 'author': 'Vic666'}, {'content': '', 'date': '', 'id': 189, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 190, 'author': 'Le Breton'}, {'content': '', 'date': '', 'id': 191, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 192, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 193, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 194, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 195, 'author': 'Samantha'}, {'content': '', 'date': '', 'id': 196, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 197, 'author': 'Julie'}, {'content': '', 'date': '', 'id': 198, 'author': 'Jean Valjean'}, {'content': '', 'date': '', 'id': 199, 'author': 'Alan'}, {'content': '', 'date': '', 'id': 200, 'author': 'Miss Camping'}]}

— You are receiving this because you are subscribed to this thread. Reply to this email directly, view it on GitHub https://github.com/Chamawix/scrapping_vdm/issues/2, or mute the thread https://github.com/notifications/unsubscribe-auth/AHaEh3SI_ 8bjbzFk8BWAfaBUMJhb2tqNks5soPu7gaJpZM4Pqx7m .

— You are receiving this because you authored the thread. Reply to this email directly, view it on GitHub https://github.com/Chamawix/scrapping_vdm/issues/2#issuecomment-333567663, or mute the thread https://github.com/notifications/unsubscribe-auth/ABngQFVtsetYW0AzCiAgVyV1iL6oUO8wks5soP9_gaJpZM4Pqx7m .

Chamawix commented 7 years ago

J'ai testé sur Docker, et il y a un comportement anormal : il ne récupère pas les informations sur le site web, contrairement à ce que j'ai sur mon ordinateur.

Voila un exemple de sortie sur la console de mon ordinateur quand l'app tourne, via le code suivant : <print "Patientez s'il vous plait. Progression : "+ str(result["id"])+"/"+str(len(self.all_links))>

Par Mark E. Smith / dimanche 1 octobre 2017 05:00

Patientez s'il vous plait. Progression : 4/200

Par VDM / samedi 30 septembre 2017 09:30

Patientez s'il vous plait. Progression : 5/200

Par VDM / samedi 30 septembre 2017 05:00

Patientez s'il vous plait. Progression : 6/200

Ceci n'apparait pas via les commandes dockers que vous m'avez donné. L'application extrait bien l'information de la page, mais elle n'est pas prise dans la boucle : <for date in article.findall('div', class="text-center block"):>

Or, l'auteur est pris en compte, donc on peut supposer que le problème vient du scrapping via Docker, qui diffèrerait de celui sans docker. Je suis en train de faire les tests pour voir la solution à ce probleme.

Chamawix commented 7 years ago

J'ai trouvé le problème & corrigé, sous windows, l'espace en trop n'empêchait pas de faire fonctionner l'app, alors que sous docker, il ne trouvait plus les balises cibles.. J'attends votre retour pour voir si ça marche chez vous aussi.