PlanèteMembres  |  Mission   xlsAsset xlsAsset
Cherchez dans nos forums :

Communauté des investisseurs heureux (depuis 2010)

Echanges courtois, réfléchis, sans jugement moral, sur l’investissement patrimonial pour devenir rentier, s'enrichir et l’optimisation de patrimoine

Invitation Vous n'êtes pas identifié : inscrivez-vous pour échanger et participer aux discussions de notre communauté !

Information Nouveau venu dans cette longue discussion ?
Flèche Consultez une sélection des messages les plus réputés en cliquant ici.

Flèche Découvrez les actions favorites des meilleurs gérants en cliquant ici.

#76 15/05/2017 15h20

Membre (2016)
Réputation :   82  

Je laisse ici une trace de l’état actuel de mes recherches pour les lecteurs qui se poseraient les mêmes questions.

Il existe :
* une API de Yahoo qui donne une information très complète sur l’état courant du marché
* un sous-ensemble des données est accessible avec historique
* sur Quandl, il semble y avoir une API publique donnant un peu plus de variables que le point précédent, là aussi avec un historique, mais limité à des actions américaines (je n’ai pas encore testé)

Dernière modification par Samuel222 (15/05/2017 15h21)

Hors ligne Hors ligne

 

#77 15/05/2017 16h50

Membre (2016)
Réputation :   14  

Bonjour,

Tout d’abord merci pour le partage d’informations !
J’en étais au même point que vous, légèrement moins avancé.
Jusqu’à maintenant je me contentais d’une application développé en C++/Qt pour récupérer les datas sur l’API Yahoo.
N’y a-t-il aucune data qui vous manque sur l’API de Yahoo.
J’ai l’impression que toutes les données ne sont pas toutes renseignés selon les titres.
Quels sont les données que vous récupérez?

Hors ligne Hors ligne

 

#78 15/05/2017 19h26

Membre (2016)
Réputation :   82  

Arkamoon, voici par exemple ce qu’on récupère en utilisant toutes les variables de mon lien précédent avec les symboles du S&P 500.

Il y a beaucoup de champs N/A mais je ne suis pas assez calé pour savoir s’ils sont légitimes.

Hors ligne Hors ligne

 

[+1]    #79 17/05/2017 16h34

Membre (2016)
Réputation :   82  

Il semblerait que les données de Quandl croisées avec cette liste des entreprises du S&P500 permettent d’atteindre mon objectif de départ : reproduire une vue automatique de l’indice S&P 500 Dividend Aristocrats.

À ce stade, j’ai une version encore très imparfaite. Mais les premiers résultats ne sont pas délirants :

sortie de moulinette a écrit :

|CVX|Chevron Corp.|Energy|3.80
|XOM|Exxon Mobil Corp.|Energy|3.64
|VFC|V.F. Corp.|Consumer Discretionary|3.19
|PG|Procter & Gamble|Consumer Staples|2.96
|LEG|Leggett & Platt|Consumer Discretionary|2.75
|APD|Air Products & Chemicals Inc|Materials|2.72
|AFL|AFLAC Inc|Financials|2.38
|CLX|The Clorox Company|Consumer Staples|2.34
|CL|Colgate-Palmolive|Consumer Staples|2.12
|GWW|Grainger (W.W.) Inc.|Industrials|1.95
|MKC|McCormick & Co.|Consumer Staples|1.89
|BCR|Bard (C.R.) Inc.|Health Care|0.42

Dernière modification par Samuel222 (17/05/2017 16h35)

Hors ligne Hors ligne

 

#80 17/05/2017 16h45

Membre (2016)
Réputation :   14  

Oui, c’est un peu la question que je me pose, avec l’ensemble des N/A, les datas présentes sont elles fiable pour les small cap?
Avez vous pri le temps de doubler les informations pour voir si vous trouvez la même chose ailleurs?

Si ce n’est pas indiscret, qu’avez vous utilisé comme moulinette?

Hors ligne Hors ligne

 

#81 17/05/2017 17h21

Membre (2016)
Réputation :   82  

Je n’ai pour l’instant pas cherché à croiser les informations. Peut-être le pourrait-on avec Quandl.

J’ai importé les deux bases citées sous MySQL et j’ai juste écrit une série de requêtes. Je veux bien mettre ça à disposition quand j’aurai pu le compléter, le mettre au propre et surtout si j’arrive à aboutir à une liste cohérente à ce qu’on peut lire en ligne (au moins pouvoir expliquer les différences).

Hors ligne Hors ligne

 

#82 17/05/2017 17h28

Membre (2016)
Réputation :   14  

Au final ce que nous avons fait et relativement proche, la question que je me pose est l’utilité d’une base de donnée.
En effet, quel utilités de sauvegarder les données? Du fait qu’on peut les trouver sur internet? Et qu’elles sont la fréquence des sauvegardes que l’ont va effectuer?
Du coup pour le moment j’étais surtout parti sur une visualisation a un instant T pour de l’aide a la décision.

Hors ligne Hors ligne

 

#83 17/05/2017 17h44

Membre (2012)
Réputation :   64  

Bonjour,

Je ne sais pas si vous connaissez, mais toutes les données fondamentales des valeurs US , ou disons plus exactement, tous les bilans et annonces sont disponibles sur le site de la SEC, dans la partie EDGAR.

Les bilans sont sous format XML (XBRL). Je pense aussi qu’il s’agit de la source ultime de tous les sites. 

Exemple avec le dernier rapport de TESLA :  le fichier XML
https://www.sec.gov/Archives/edgar/data … 170331.xml

Dedans, vous trouverez par exemple le revenus du 1er Trimestre 2017 :

Extrait du XML a écrit :

<us-gaap:Revenues id="F_000118" contextRef="C_0001318605_20170101_20170331" decimals="-3" unitRef="U_iso4217USD">2696270000</us-gaap:Revenues>

La version lisible est ici :
https://www.sec.gov/Archives/edgar/data … 170331.htm

Il y a toute une documentation technique sur le site d’EDGAR pour savoir comment consulter le site ,afin de trouver les bilans (formulaire 10K).

Par contre, ça demande beaucoup de travail pour récupérer tout ça, et le traiter.

Hors ligne Hors ligne

 

#84 18/05/2017 16h38

Membre (2016)
Réputation :   82  

Merci Galerien, j’essaierai de regarder.

La base de données Quandl est un peu étonnante, elle contient globalement de bonnes données, mais il y a des éléments que je n’explique pas.

Voici ce que me sort ma moulinette (toujours inachevée), que je compare à la liste donnée sur cette page.

moulinette a écrit :

|ADI|&quot;Analog Devices
|ADM|Archer-Daniels-Midland Co
|AFL|AFLAC Inc
|AJG|Arthur J. Gallagher &amp; Co.
|AMAT|Applied Materials Inc
|AMGN|Amgen Inc
|APD|Air Products &amp; Chemicals Inc
|BA|Boeing Company
|BCR|Bard (C.R.) Inc.
|BDX|Becton Dickinson
|CA|&quot;CA
|CELG|Celgene Corp.
|CERN|Cerner
|CL|Colgate-Palmolive
|CLX|The Clorox Company
|COG|Cabot Oil &amp; Gas
|CSCO|Cisco Systems
|CVX|Chevron Corp.
|D|Dominion Resources
|DTE|DTE Energy Co.
|EA|Electronic Arts
|EOG|EOG Resources
|ES|Eversource Energy
|EXPD|Expeditors Int’l
|FDX|FedEx Corporation
|FISV|Fiserv Inc
|FMC|FMC Corporation
|GWW|Grainger (W.W.) Inc.
|HD|Home Depot
|HOLX|Hologic
|HP|Helmerich &amp; Payne
|HSY|The Hershey Company
|INTC|Intel Corp.
|JEC|Jacobs Engineering Group
|LEG|Leggett &amp; Platt
|LOW|Lowe’s Cos.
|LRCX|Lam Research
|MKC|McCormick &amp; Co.
|OMC|Omnicom Group
|PG|Procter &amp; Gamble
|PH|Parker-Hannifin
|PNR|Pentair Ltd.
|PNW|Pinnacle West Capital
|PPG|PPG Industries
|PVH|PVH Corp.
|R|Ryder System
|ROST|Ross Stores
|SEE|Sealed Air
|SLB|Schlumberger Ltd.
|SWKS|Skyworks Solutions
|SYMC|Symantec Corp.
|TGT|Target Corp.
|UTX|United Technologies
|VFC|V.F. Corp.
|WDC|Western Digital
|WHR|Whirlpool Corp.
|WMT|Wal-Mart Stores
|XLNX|Xilinx Inc
|XOM|Exxon Mobil Corp.

J’ai commencé par regarder pourquoi GPC, WBA, MCD, HRL et KMB n’apparaissent pas dans ma liste.

Pour GPC et HRL, des dividendes sont déclarés deux fois à deux dates consécutives. On pourrait effacer l’un d’eux de manière automatique sur la base de ce critère.

Pour WBA, les données de dividendes entre 2004 et 2005 semblent bien aller vers une baisse. À moins que cette page aussi ne se trompe.

Pour MCD, Quandl me signale un dividende le 13/09/2000 (plus de deux fois le dividende annuel normal, en plus du dividende réel le 13/11). De même pour KMB le 03/11/2015 (un peu plus d’une fois le dividende annuel, en plus des dividendes réels trimestriels).

Je suppose que cela correspond à des dividendes spéciaux ou exceptionnels (!?). Y a-t-il une source qui permettrait de les identifier pour les écarter du calcul ? J’ai regardé en vitesse celle de Galerien mais sans être sûr de mon raisonnement…

Merci

Hors ligne Hors ligne

 

#85 19/05/2017 17h16

Membre (2016)
Réputation :   82  

Pour suivi de mon message précédent, l’explication a été donnée par quelqu’un de compétent ici. C’est dommage, cette source était prometteuse.

Hors ligne Hors ligne

 

#86 20/05/2017 08h08

Membre (2011)
Top 20 Actions/Bourse
Top 20 Obligs/Fonds EUR
Top 20 Entreprendre
Top 5 Finance/Économie
Top 20 Banque/Fiscalité
Réputation :   650  

Il était "facile" d’extraire les données fondamentales par Yahoo ainsi que l’historique des cours. D’ailleurs, beaucoup d’utilisateurs de R s’appuient sur des packages qui font ça.

Mais il semble que Yahoo ait décidé d’y mettre fin depuis cette semaine ! Too bad ! Ca m’arrange vraiment pas.

J’espère que la communauté des finance geek va trouver une solution (et updater les packages R).

Hors ligne Hors ligne

 

#87 20/05/2017 10h26

Admin (2009)
Top 5 Année 2023
Top 5 Année 2022
Top 10 Portefeuille
Top 5 Dvpt perso.
Top 20 Expatriation
Top 5 Vivre rentier
Top 5 Actions/Bourse
Top 5 Monétaire
Top 5 Invest. Exotiques
Top 10 Crypto-actifs
Top 5 Entreprendre
Top 5 Finance/Économie
Top 5 Banque/Fiscalité
Top 5 SIIC/REIT
Top 20 SCPI/OPCI
Top 20 Immobilier locatif
Réputation :   3852  

INTJ

Fructif a écrit :

Mais il semble que Yahoo ait décidé d’y mettre fin depuis cette semaine ! Too bad ! Ca m’arrange vraiment pas.

J’ai le problème aussi avec XlsValorisation.

Yahoo Finance propose toujours le téléchargement des cours, mais manifestement, l’API a changé, les URLs ne sont plus les mêmes.

Exemples :

https://query1.finance.yahoo.com/v7/fin … .hv.0LkDL8

https://query1.finance.yahoo.com/v7/fin … .hv.0LkDL8

Hors ligne Hors ligne

 

#88 20/05/2017 15h15

Membre (2014)
Réputation :   5  

J’utilise les API Yahoo pour télécharger les cours et suivre mon portefeuille réparti sur plusieurs courtiers.

Depuis début début mai il faut utiliser
http://download.finance.yahoo.com/d/quotes.csv?s=

au lieu de http://finance.yahoo.com/d/quotes.csv?s=


Twitter - WiseTech @InvestQuests

Hors ligne Hors ligne

 

#89 20/05/2017 16h02

Admin (2009)
Top 5 Année 2023
Top 5 Année 2022
Top 10 Portefeuille
Top 5 Dvpt perso.
Top 20 Expatriation
Top 5 Vivre rentier
Top 5 Actions/Bourse
Top 5 Monétaire
Top 5 Invest. Exotiques
Top 10 Crypto-actifs
Top 5 Entreprendre
Top 5 Finance/Économie
Top 5 Banque/Fiscalité
Top 5 SIIC/REIT
Top 20 SCPI/OPCI
Top 20 Immobilier locatif
Réputation :   3852  

INTJ

Hors ligne Hors ligne

 

#90 20/05/2017 16h10

Membre (2014)
Réputation :   5  

En rajoutant download. j’ai pu refaire marcher mon application Excel VBA qui télécharge les cours depuis Yahoo. Ca marche, je l’utilise.

Par exemple vous pouvez essayer "http://download.finance.yahoo.com/d/quotes.csv?s=USDEUR=X&f=l1" directement dans votre navigateur. Cela permet de télécharger le taux de change dollar US vers Euro

Dernière modification par California (21/05/2017 11h13)


Twitter - WiseTech @InvestQuests

Hors ligne Hors ligne

 

#91 20/05/2017 22h58

Membre (2011)
Top 20 Finance/Économie
Réputation :   91  

Bonsoir,

Il ne faut pas s’attendre à ce que la situation s’améliore pour l’API: Is Yahoo! Finance API broken? - Page 3 - Yahoo Help Community

Il y a, semble-t-il, tout de même moyen de contourner la protection, en bidouillant un cookie à la main: Yahoo finance URL not working - Stack Overflow

Amicalement,

R.

Hors ligne Hors ligne

 

#92 21/05/2017 20h44

Membre (2016)
Réputation :   82  

Une source alternative à étudier pointée dans le fil de roro : Tiingo. Elle se base pour partie sur Quandl et a donc les défauts que je déplorais.

Dernière modification par Samuel222 (21/05/2017 20h47)

Hors ligne Hors ligne

 

[+2]    #93 22/05/2017 18h28

Membre (2016)
Réputation :   82  

arkamoon a écrit :

Si ce n’est pas indiscret, qu’avez vous utilisé comme moulinette?

Arkamoon, comme promis les données techniques sur ma tentative.

Hors ligne Hors ligne

 

#94 24/05/2017 01h37

Membre (2016)
Réputation :   14  

Excellent travail, très intéressant et fort complet… Cela prouve qu’au final sans investir de l’argent on ne peut qu’avoir des données partielles… C’est plutôt triste en 2017!

Hors ligne Hors ligne

 

#95 14/06/2017 12h26

Membre (2014)
Top 20 Vivre rentier
Top 20 Monétaire
Top 20 SIIC/REIT
Réputation :   196  

Merci pour ce partage d’info. La "propreté" des sources semble être une réélle difficulté et le "stock" de données est important.

Même concernant le "flux" (les nouvelles données) il ne me semble pas évident de savoir où aller chercher les dividendes.

ce lien Historical Data Sources présente une liste de fournisseurs de données, certains gratuits.

C’est quand même râlant, à l’heure de l’opendata et sur des marchés hyper-réglementés, on ne puisse pas simplement récupérer les données end-of-day + dividendes sans faire du scraping. Le coût des solutions professionnelles semble rédhibitoire.

j’ai l’impression (mais peut-etre est-ce que je me trompe) que même l’accès aux données des exchange en direct est payant. Je n’ai pour l’instant en tout cas pas trouvé de moyen d’avoir un flux temps réél directement à la source.

Hors ligne Hors ligne

 

#96 12/10/2017 10h26

Membre (2012)
Top 10 Portefeuille
Top 20 Dvpt perso.
Top 10 Actions/Bourse
Réputation :   957  

Ce cher FT.com qui avait des listes d’états financiers rigoureuses (plus que certains sites payants à mon avis même si pas exempt d’erreurs bien entendu ou d’agrégats un peu "gros" : je veux dire par là que certaines lignes auraient mérité d’être scindées) devient payant sad sad

Tous mes screeners et google sheets étaient fondés sur FT.com donc a minima je vais devoir refaire cela entièrement. Mais je dois déjà trouver une autres source d’informations gratuites et fiables. Pour l’instant ce que j’ai vu de yahoo finance n’a pas été concluant. Beaucoup des sites cités dans cette file sont devenus… entièrement payants (c’est fou ça comme la monétisation va vite rien qu’en 5 ans !).

Est-ce que la communauté a des conseils pour des états financiers de qualité gratuits s’il vous plaît ? J’apporte aussi ma pierre : pour l’instant le moins mauvais me semble être le site du Wall Street Journal même si pour les actions européennes, ils ont tendance à "gérer" les lignes du tableau de flux différemment.


Parrain pédago pour Bourso, Binck et Bourse Directe. Meduse Paris :)

Hors ligne Hors ligne

 

[+1]    #97 12/10/2017 10h35

Admin (2009)
Top 5 Année 2023
Top 5 Année 2022
Top 10 Portefeuille
Top 5 Dvpt perso.
Top 20 Expatriation
Top 5 Vivre rentier
Top 5 Actions/Bourse
Top 5 Monétaire
Top 5 Invest. Exotiques
Top 10 Crypto-actifs
Top 5 Entreprendre
Top 5 Finance/Économie
Top 5 Banque/Fiscalité
Top 5 SIIC/REIT
Top 20 SCPI/OPCI
Top 20 Immobilier locatif
Réputation :   3852  

INTJ

PoliticalAnimal a écrit :

Est-ce que la communauté a des conseils pour des états financiers de qualité gratuits s’il vous plaît ? J’apporte aussi ma pierre : pour l’instant le moins mauvais me semble être le site du Wall Street Journal même si pour les actions européennes, ils ont tendance à "gérer" les lignes du tableau de flux différemment.

Il n’y a plus que le WSJ, c’est celle que j’utilise pour XlsValorisation.

Les sources financières de qualité et gratuites diminuent année après année.

Hors ligne Hors ligne

 

#98 12/10/2017 11h13

Membre (2012)
Top 10 Portefeuille
Top 20 Dvpt perso.
Top 10 Actions/Bourse
Réputation :   957  

Big thanks! Donc pas de miracle, incroyable en 5 ans, nous sommes passés d’une dizaine de bons sites gratuits à une poignée uniquement. J’aurais pensé au mouvement inverse : après tout, toute la donnée de base est gratuite puisque publiée de façon obligatoire, une fois que le 1er effort d’algo a été fait il n’y a plus qu’à "continuer" donc quelque chose m’échappe (je ne suis pas naïf la mettre en forme coûte mais ce sont des coûts normalement de plus en plus faibles : on nous bassine avec l’IA, les serveurs de moins en moins chers, etc.).

J’ai vécu les débuts d’internet où tout était gratuit maintenant tout se remonétise même des données de base pourtant gratuites, non vraiment sans fausse naïveté, un truc m’échappe.

Après, il faudra aussi peut-être que j’accepte de payer, mon patrimoine en bourse peut commencer à le justifier (encore que 550 € / an environ -selon le cours de la livre- pour le FT je ne trouve pas que ce soit négligeable mon côté radin sans doute wink )


Parrain pédago pour Bourso, Binck et Bourse Directe. Meduse Paris :)

Hors ligne Hors ligne

 

#99 12/10/2017 11h15

Membre (2014)
Top 20 Portefeuille
Top 20 Expatriation
Top 20 Entreprendre
Top 20 Finance/Économie
Top 20 Banque/Fiscalité
Top 20 SIIC/REIT
Réputation :   566  

INTJ

Question, utopique peut-être mais qui ne tente rien….

Quid d’un abonnement type "Corporate" ou "Groupe" pour une communauté comme la notre?

Il y a bien des formules entreprises, plus chères qu’un abonnement individuel, mais le tarif serait mutualisé entre nous, donc peut être une économie ?

Question annexe IH: si le WSJ devient payant, on perd xlsValorisation alors?

Dernière modification par MisterVix (12/10/2017 11h17)


L’argent est un bon serviteur et un mauvais maître (A. Dumas )

Hors ligne Hors ligne

 

#100 12/10/2017 11h26

Membre (2010)
Top 20 Actions/Bourse
Réputation :   237  

Vous avez également MorningStar qui tout comme WSJ  offre 5 ans et 5 trimestres en gratuit et 10 ans payant.
Les Keys ratios sur 10 ans sont également gratuits.
Il y a un bouton permettant d’exporter les données en CSV.
Income Statement for Solvay SA (SOLB) from Morningstar.com

Hors ligne Hors ligne

 

Flèche Découvrez les actions favorites des meilleurs gérants en cliquant ici.

Information Nouveau venu dans cette longue discussion ?
Flèche Consultez une sélection des messages les plus réputés en cliquant ici.


Pied de page des forums