Fundamentus com framework scrapy
Crawler do site Fundamentus.com com o uso do framework scrapy, tanto da aba detalhada como a de resumo.
Baixa informacões que os outros scrapys do fundamentus não realizam.
Para iniciar, dentro da pasta fundamentus digite: scrapy crawl detalhes -O nomedoarquivocriado.csv ou scrapy crawl resultado -O nomedoarquivocriado.csv
Não é um codigo elegante, mas funcional, realiza o scrapy de forma rapida.
As informacões baixadas são:
columns = ['Papel', 'Cotação', 'Tipo', 'Data ult cot', 'Empresa', 'Min 52 sem',
'Setor', 'Max 52 sem', 'Subsetor', 'Vol $ méd (2m)', 'Valor de mercado',
'Últ balanço processado', 'Valor da firma', 'Nro. Ações',
'Dia', 'P/L',
'LPA', 'Mês', 'P/VP', 'VPA', '30 dias', 'P/EBIT', 'Marg. Bruta',
'12 meses', 'PSR', 'Marg. EBIT', '2021', 'P/Ativos', 'Marg. Líquida',
'2020', 'P/Cap. Giro', 'EBIT / Ativo', '2019', 'P/Ativ Circ Liq',
'ROIC', '2018', 'Div. Yield', 'ROE', '2017', 'EV / EBITDA',
'Liquidez Corr', '2016', 'EV / EBIT', 'Div Br/ Patrim', '2015',
'Cres. Rec (5a)', 'Giro Ativos',
'Ativo',
'Dív. Bruta',
'Disponibilidades',
'Dív. Líquida',
'Ativo Circulante',
'Depósitos',
'Cart. de Crédito',
'Patrim. Líq',
'Receita Líquida_12meses',
'Receita Líquida_3meses', 'EBIT_12meses', 'EBIT_3meses',
'Lucro Líquido_12meses', 'Lucro Líquido_3meses']
e mais algumas informações...
Realizei este projeto com o fim de aprendizado e por não encontrar no github nenhum scrapy que pegue todas as informaçoes que eu precisava como setores e subsetores para realizar modelos KNN e KMC de machine learning.
90 Feb 09, 2021
199 Dec 12, 2022
1 Feb 10, 2022
1 Dec 07, 2021
6 Jan 08, 2023
15.7k Jan 04, 2023
1 Nov 13, 2021
3 Oct 14, 2022
2 Jan 04, 2022
47 Nov 23, 2022
1.5k Jan 03, 2023
56 Nov 27, 2022
6 Dec 06, 2022
35 Nov 18, 2022
15 Jul 16, 2022
50 Jan 05, 2023
12 Oct 27, 2022
19 Nov 17, 2022
12 Oct 22, 2022
347 Jan 07, 2023