Open buzios opened 3 years ago
Olá buzios, Obrigado pelo lembrete !!
Olá a todos! Nota que realmente os arquivos dados_cnpjempresas* (todos) todos estão sem o campo CNPJ corretamente validado, ou seja, não há o vínculo com o nome fantasia, e dados das empresas, com as entidades. Esse Bug vai ser complicado. rs. Caso necessitem de auxílio, á disposição!
Olá Danillo, puxa que trapalhada foi essa... Puxa se você puder me ajudar.
Estou fazendo da seguinte forma, usando os 8 (oito) primeiros dígitos e fazendo uma chave que estou chamando de "cnpj_basico" e estou considerando a razão social das filiais igual a das matrizes, quando existem. Tá certo isso? tem outra forma de fazer?
Agora o arquivo DADOS_DO_SIMPLES não sei como resolver?
Djalma Julião
(+5511)9 9318.3727 csidjalma http://www.linkedin.com/in/djalmajuliao /in/djalmajuliao
@. @.> www.c http://goog_1298937871sisistemas.com.br http://sisistemas.com.br*
[image: Mailtrack] https://mailtrack.io?utm_source=gmail&utm_medium=signature&utm_campaign=signaturevirality5& Sender notified by Mailtrack https://mailtrack.io?utm_source=gmail&utm_medium=signature&utm_campaign=signaturevirality5& 05/04/21 12:19:43
Em seg., 5 de abr. de 2021 às 12:07, danillorocha10 < @.***> escreveu:
Olá a todos! Nota que realmente os arquivos dados_cnpjempresas* (todos) todos estão sem o campo CNPJ corretamente validado, ou seja, não há o vínculo com o nome fantasia, e dados das empresas, com as entidades. Esse Bug vai ser complicado. rs. Caso necessitem de auxílio, á disposição!
— You are receiving this because you commented. Reply to this email directly, view it on GitHub https://github.com/georgevbsantiago/qsacnpj/issues/26#issuecomment-813443255, or unsubscribe https://github.com/notifications/unsubscribe-auth/AMOY437YAJYXLSHKFKMGE7DTHHG3BANCNFSM4ZQRYL5Q .
realmente @csidjalma , o @buzios tem razão. Está totalmente incompleto, a tabela do simples não veio, está impossível de gerar com confiabilidade. O que eu sugeriria é: Para quem também tem acesso ao e-CAC com Certificado Digital, abrir o máximo de chamados na RFB, para solicitar a correção. Desta forma está impossível tratar os dados.
A RF liberou hoje a tarde um novo release de dados de CNPJ. Os nomes dos arquivos mudaram e agora tem um arquivo de SIMPLES. Alguns links estao errados com href="http://http//"
Vários links quebrados... Algum dos amigos aqui conseguiu baixar para ver se corrigiram a questão do vinculo da empresa com estabelecimento?
Olá @buzios tudo bom!! por favor, vc conseguiu o arquivo do SIMPLES de onde?? Eu não estou conseguindo baixar daqui: http://200.152.38.155/CNPJ/F.K03200\$W.SIMPLES.CSV.D10313.zip
bom dia @buzios e @csidjalma ! Buzios, não consegui baixar o arquivo do SIMPLES. Você o conseguiu onde? Obrigado. CSIDjalma, conseguiu ver se há o vínculo agora da entidade e empresas? não estou conseguindo também baixar os arquivos, mas é realmente por problemas de conexão aqui do nosso servidor.. Obrigado e bom dia a todos!
Baixei todos os arquivos e gerei o banco de dados. Para o simples o link é http://200.152.38.155/CNPJ/F.K03200$W.SIMPLES.CSV.D10313.zip
Desta vez todos os ZIPs estao integros e tem o CSV de simples/mei.
Nao entendi o problema de vinculo de entedidade e empresa, é o cnpj_basico. Entdiades sao as filiais cnpj_basico/0001-DV, cnpj_basico/0002-DV ..
O problema é que os dados continuam errados. Ha 2.776.341 nome de socio em branco Ha socios de uma mesma empresa com CNPJ/CPF diferentes porem com o mesmo nome.
Acho que teremos que aguardar o proximo release.
Olá @buzios ! O problema do vínculo estava na publicação inicial do dia 16/03 da RFb, estava sem o campo do vínculo na entidade (foi corrigido). Você conseguiu gerar o sql? poderia disponibilzar?
ATENÇÃO.
Além desses problemas, nos arquivos extraídos em 16/03/2021 os nomes dos sócios estão totalmente errados. Conferi vários usando a Emissão de Comprovante de Inscrição e de Situação Cadastral da própria receita.
Para tentar agilizar a solução abri chamado na https://falabr.cgu.gov.br/Principal.aspx já tive outros casos onde eles responderam bem rápido.
Se vocês puderem abrir chamado lá também talvez ajude a notar o problema.
O banco que eu gerei com os zips de 31/3/2021 O zip tem 6.3 GB
https://mobisell-assets.s3.amazonaws.com/CNPJ_publico/cnpj_210331.db.zip https://mobisell-assets.s3.amazonaws.com/CNPJ_publico/cnpj_210331.db.md5
boa tarde, baixei esta versão da base e não encontrei as tabelas complementares como a de cnea, como estão fazendo com estas tabelas, já existe alguma base em sql lite delas tb?
@souzagilson15 abri a solicitação. fiz o teste com minha empresa, aparecem 2 pessoas totalmente erroneas. Se todos fizermos, eles irão corrigir @paulo3011 , não há tabelas de cnae secundário. Estão em um campo (cnae_sec) na tab estabelecimentos, separados por vírgula.
@souzagilson15 abri a solicitação. fiz o teste com minha empresa, aparecem 2 pessoas totalmente erroneas. Se todos fizermos, eles irão corrigir @paulo3011 , não há tabelas de cnae secundário. Estão em um campo (cnae_sec) na tab estabelecimentos, separados por vírgula.
Talvez não tenha explicado direito, minha dúvida é se já estão extraindo os dados cadastrais de cnea do site do ibge e outras tabelas complementares e gerando arquivos em formato do sql lite. Quero por exemplo fazer um join entre os dados da empresa para saber os nomes, descrições dos cneas e demais dados cadastrais
@souzagilson15 abri a solicitação. fiz o teste com minha empresa, aparecem 2 pessoas totalmente erroneas. Se todos fizermos, eles irão corrigir @paulo3011 , não há tabelas de cnae secundário. Estão em um campo (cnae_sec) na tab estabelecimentos, separados por vírgula.
Muito bom! @paulo3011
Meu chamado está aberto desde 31/03, nesse dia o arquivo disponível já era o layout novo e já tinha esses erros.
ATENÇÃO.
Além desses problemas, nos arquivos extraídos em 16/03/2021 os nomes dos sócios estão totalmente errados. Conferi vários usando a Emissão de Comprovante de Inscrição e de Situação Cadastral da própria receita.
Para tentar agilizar a solução abri chamado na https://falabr.cgu.gov.br/Principal.aspx já tive outros casos onde eles responderam bem rápido.
Se vocês puderem abrir chamado lá também talvez ajude a notar o problema.
Como abriu o chamado, tentei abrir e não encontrei para quem enviar a e qual o meio correto, teria que registrar uma manifestação? Se sim para qual orgão? Tentei neste link https://falabr.cgu.gov.br/publico/Manifestacao/RegistrarManifestacao.aspx?idFormulario=3&tipo=8&origem=idp&modo=
tb encontrei alguns registros de sócios sem nome.
olá pessoal... os links da Receita estão quebrados... empresa2 - http://http//200.152.38.155/CNPJ/K3241.K03200Y1.D10313.EMPRECSV.zip empresa3 - http://http//200.152.38.155/CNPJ/K3241.K03200Y2.D10313.EMPRECSV.zip restante não testei mais... alguém esta tendo esse problema?
@buzios , os links que vc disponibilizou acima são dessa atualização de 05/04/2021?
É so voce remover esses http// que o link funciona
É so voce remover esses http// que o link funciona
Puxa!! verdade @algoz098 obrigado por me mostrar o que está tão obvio. eu copiei o link da pagina da receita e não tinha percebido o erro.
Sem problemas estou tentando fazer um parser para mongo, em nodejs, e essas inconsistencias de um arquivo tão importante. Me pergunto se é questão de falar com um advogado para fazer um processo contra a RFB
Parece que agora estão fazendo algum tipo de atualização no sistema, vamos aguardar pra que sejam as correções!
Márcio Almeida muito obrigado pelo banco de dados disponibilizado!!! Esse banco quando atualizado será disponibilizado em algum portal? Abraços...
Em ter, 6 de abr de 2021 16:40, Marcio Almeida @.***> escreveu:
O banco que eu gerei com os zips de 31/3/2021 O zip tem 6.3 GB
https://mobisell-assets.s3.amazonaws.com/CNPJ_publico/cnpj_210331.db.zip https://mobisell-assets.s3.amazonaws.com/CNPJ_publico/cnpj_210331.db.md5
— You are receiving this because you are subscribed to this thread. Reply to this email directly, view it on GitHub https://github.com/georgevbsantiago/qsacnpj/issues/26#issuecomment-814390286, or unsubscribe https://github.com/notifications/unsubscribe-auth/AS54ZSZEOXN7DT2O2QQTIKDTHNPURANCNFSM4ZQRYL5Q .
olá Márcio, obrigado pelo arquivo... deixa eu te perguntar vc conseguiu baixar esse arquivo: http://200.152.38.155/CNPJ/K3241.K03200Y8.D10313.ESTABELE.zip pra mim esta dando que ele esta corrompido e não baixa...
Porém eu descobri que o link correto é: http://200.152.38.155/CNPJ/K3241.K03200Y8.D10410.ESTABELE.zip
Djalma Julião 19/04/21 13:12:31
Em seg., 19 de abr. de 2021 às 12:25, Marcio Almeida < @.***> escreveu:
Sqlite DB que eu gerei com base nos arquivos liberados em 19/4/21 (extraidos em 10/4/21)
https://mobisell-assets.s3.amazonaws.com/CNPJ_publico/cnpj_20210410.db.zip https://mobisell-assets.s3.amazonaws.com/CNPJ_publico/cnpj_20210410.db.md5
A tabela de socios melhorou, agora so tem 2.104 socios sem nome Infelimente continua o problema de nome de socio errado
— You are receiving this because you were mentioned. Reply to this email directly, view it on GitHub https://github.com/georgevbsantiago/qsacnpj/issues/26#issuecomment-822557574, or unsubscribe https://github.com/notifications/unsubscribe-auth/AMOY436JHFLNARFXAEKZPBTTJRDPNANCNFSM4ZQRYL5Q .
olá Márcio, obrigado pelo arquivo... deixa eu te perguntar vc conseguiu baixar esse arquivo: http://200.152.38.155/CNPJ/K3241.K03200Y8.D10313.ESTABELE.zip pra mim esta dando que ele esta corrompido e não baixa...
Eu baixei e "unzipei" todos os arquivos sem nenhum problema.
Tive alguns problemas de integrigade (uns 15 erros de constraint) porem o grande problema continua sendo a tabela de socios.
Alem de 2.104 socios com nome em branco tem um monte de nome errado.
Exemplos:
CNPJ 38338022000139 com 5 socioes empresa com CNPJs distinto e o mesmo nome.
CNPJ 39258509000174 com 25 repeticoes
Olá Marcio, obrigado por responder... olha só esse link http://200.152.38.155/CNPJ/K3241.K03200Y8.D10313.ESTABELE.zip está realmente errado.
Porém eu descobri, comparando com os outros arquivos, que o link correto de ESTABELECIMENTO 09 é: http://200.152.38.155/CNPJ/K3241.K03200Y8.D10410.ESTABELE.zip
Djalma Julião
Em seg., 19 de abr. de 2021 às 20:06, Marcio Almeida < @.***> escreveu:
olá Márcio, obrigado pelo arquivo... deixa eu te perguntar vc conseguiu baixar esse arquivo: http://200.152.38.155/CNPJ/K3241.K03200Y8.D10313.ESTABELE.zip pra mim esta dando que ele esta corrompido e não baixa...
Eu baixei e "unzipei" todos os arquivos sem nenhum problema.
Tive alguns problemas de integrigade (uns 15 erros de constraint) porem o grande problema continua sendo a tabela de socios.
Alem de 2.104 socios com nome em branco tem um monte de nome errado. Exemplo CNPJ 38338022000139 com 5 socioes empresa com CNPJs distinto e o mesmo nome.
— You are receiving this because you were mentioned. Reply to this email directly, view it on GitHub https://github.com/georgevbsantiago/qsacnpj/issues/26#issuecomment-822846106, or unsubscribe https://github.com/notifications/unsubscribe-auth/AMOY432BXFV4HDRUUBPGPH3TJSZRBANCNFSM4ZQRYL5Q .
Oi Dijalma, eu peguei os links para download direto na maquina 200.152.38.155 http://200.152.38.155/CNPJ/
E como comentei não tive problemas.
Problemas na tabela de socios de 10/4/21
Ha 20.333.422 registros na tabela sendo 405.000 socios PJ
393.756 socios PJ estao com o nome (razao social no caso) ERRADO.
òtimo Marcio, agora eu entendi... e já gravei o caminho direto. obrigado !
Djalma Julião
Em seg., 19 de abr. de 2021 às 22:20, Marcio Almeida < @.***> escreveu:
Oi Dijalma, eu peguei os links para download direto na maquina 200.152.38.155 http://200.152.38.155/CNPJ/
E como comentei não tive problemas.
— You are receiving this because you were mentioned. Reply to this email directly, view it on GitHub https://github.com/georgevbsantiago/qsacnpj/issues/26#issuecomment-822899696, or unsubscribe https://github.com/notifications/unsubscribe-auth/AMOY433ZJFJJUZWLMHLV5KLTJTJENANCNFSM4ZQRYL5Q .
Olá a todos. A receita está atualizando ainda os dados. Houve outra atualização hoje as 10h37, pela qual no download, não notei correção ainda dos sócios. Acho que eles estão precisando de ajuda! Muito instável.
Olá a todos. A receita está atualizando ainda os dados. Houve outra atualização hoje as 10h37, pela qual no download, não notei correção ainda dos sócios. Acho que eles estão precisando de ajuda! Muito instável.
Numa comparacao rapida, todos os arquivos em http://200.152.38.155/CNPJ/ continuam com o mesmo nome e a mesma data. Tudo indica que nada mudou ate agora.
Notei um outro problema. Trata-se do PORTE da empresa.
O novo layout: (2021) 1 – NÃO INFORMADO 2 - MICRO EMPRESA 3 - EMPRESA DE PEQUENO PORTE 5 - DEMAIS
No layout antigo (2020) 0 – NÃO INFORMADO 1 - MICRO EMPRESA 3 - EMPRESA DE PEQUENO PORTE 5 - DEMAIS
Não ha nenhum registro com codigo 2 Ha varios registros com codigo 0 Aparentemente continua a ser usado esquema de 2020
Bom dia, noitei um arquivo em csv no site da receita, sabem me dizer se eles já estão disponibilizando em formato csv os dados? Ex: http://200.152.38.155/CNPJ/K3241.K03200Y0.D10410.EMPRECSV.zip
ou ainda é necessário processar o arquivo antigo em txt?
Ola Paulo,
esses arquivos são em formato texto separados por ( ; ) se por acaso vc renomear eles com .CSV vai dar tudo certo.
Djalma Julião
Em qui., 22 de abr. de 2021 às 12:03, Paulo Cesar da Silva Moreira < @.***> escreveu:
Bom dia, noitei um arquivo em csv no site da receita, sabem me dizer se eles já estão disponibilizando em formato csv os dados? Ex: http://200.152.38.155/CNPJ/K3241.K03200Y0.D10410.EMPRECSV.zip
ou ainda é necessário processar o arquivo antigo em txt?
— You are receiving this because you were mentioned. Reply to this email directly, view it on GitHub https://github.com/georgevbsantiago/qsacnpj/issues/26#issuecomment-824921257, or unsubscribe https://github.com/notifications/unsubscribe-auth/AMOY434T5SUI2LXIOJNACC3TKA3D7ANCNFSM4ZQRYL5Q .
boa tarde pessoal, dei uma olhada no layout e não consegui identificar porque eles separaram os dados de empresa em Estabelecimento e Empresas, a única diferença que notei foi que o arquivo de empresas tem menos registros e menos campos. Sabem me dizer qual o objetivo da tabela empresa e porque separam em duas?
@paulo3011 matriz e filial. Estabelecimentos são todo tipo de CNPJ matriz e filial. EMPRESAS são apenas dados inerentes á matriz. eu particularmente, para usar os dados, fizer um inner de tudo (juntei). copiando dados da EMPRESAS para ESTABELECIMENTOS em novas colunas levando em conta o cnpj_base.
@paulo3011 matriz e filial. Estabelecimentos são todo tipo de CNPJ matriz e filial. EMPRESAS são apenas dados inerentes á matriz. eu particularmente, para usar os dados, fizer um inner de tudo (juntei). copiando dados da EMPRESAS para ESTABELECIMENTOS em novas colunas levando em conta o cnpj_base.
Bom dia, entendi, dei uma olhada com mais calma aqui e percebi que alguns campos só existem no arquivo de empresa. Vou juntar os dados em uma tabela só, também acredito que fica mais simples de usar, entender. Obrigado!
Bom dia, Alguem teria a lista dos "Motivos da situação cadastral" ? não estou conseguindo localizar no http://200.152.38.155/CNPJ/
olá @Lucasvor segue a tabela "Motivos da situação cadastral" que estou usando.
Djalma Julião
Em qua., 28 de abr. de 2021 às 13:11, Lucasvor @.***> escreveu:
Bom dia, Alguem teria a lista dos "Motivos da situação cadastral" ? não estou conseguindo localizar no http://200.152.38.155/CNPJ/
— You are receiving this because you were mentioned. Reply to this email directly, view it on GitHub https://github.com/georgevbsantiago/qsacnpj/issues/26#issuecomment-828583010, or unsubscribe https://github.com/notifications/unsubscribe-auth/AMOY433HTEIVV3RNEB65VZLTLAXTJANCNFSM4ZQRYL5Q .
olá @Lucasvor segue a tabela "Motivos da situação cadastral" que estou usando. Djalma Julião Em qua., 28 de abr. de 2021 às 13:11, Lucasvor @.***> escreveu: … Bom dia, Alguem teria a lista dos "Motivos da situação cadastral" ? não estou conseguindo localizar no http://200.152.38.155/CNPJ/ — You are receiving this because you were mentioned. Reply to this email directly, view it on GitHub <#26 (comment)>, or unsubscribe https://github.com/notifications/unsubscribe-auth/AMOY433HTEIVV3RNEB65VZLTLAXTJANCNFSM4ZQRYL5Q .
Obrigado, mas não estou conseguindo visualizar a tabela
Bom dia, Alguem teria a lista dos "Motivos da situação cadastral" ? não estou conseguindo localizar no http://200.152.38.155/CNPJ/
Boa tarde, consegue baixar neste endereço também: https://receita.economia.gov.br/orientacao/tributaria/cadastros/cadastro-nacional-de-pessoas-juridicas-cnpj/DominiosMotivoSituaoCadastral.csv
Bom dia, Alguem teria a lista dos "Motivos da situação cadastral" ? não estou conseguindo localizar no http://200.152.38.155/CNPJ/
Boa tarde, consegue baixar neste endereço também: https://receita.economia.gov.br/orientacao/tributaria/cadastros/cadastro-nacional-de-pessoas-juridicas-cnpj/DominiosMotivoSituaoCadastral.csv
Obrigado pelo link, já consegui baixar
Olá, disponibilizei uma ferramenta em Python para importar o novo formato em CSV dos arquivos da receita: https://github.com/lucasfacchini/open-data-cnpj-import
@lucasfacchini Que legal, estava começando construir uma ferramenta parecida aqui em node pra exportar pra postgres, até parei aqui, vou usar esse seu aqui, ficou mto bom. Vamos tentar manter um pessoal nesse projeto pra manter atualizado, conte comigo para futuras atualizações que precisar.
Notei um outro problema. Trata-se do PORTE da empresa.
O novo layout: (2021) 1 – NÃO INFORMADO 2 - MICRO EMPRESA 3 - EMPRESA DE PEQUENO PORTE 5 - DEMAIS
No layout antigo (2020) 0 – NÃO INFORMADO 1 - MICRO EMPRESA 3 - EMPRESA DE PEQUENO PORTE 5 - DEMAIS
Não ha nenhum registro com codigo 2 Ha varios registros com codigo 0 Aparentemente continua a ser usado esquema de 2020
Ola Márcio, estou a 2 semanas conferindo esses dados e não consegui chegar em um consenso. Por favor, me da uma dica, como você esta usando o código do PORTE: 2020 ou com esse de 2021?
Olá, disponibilizei uma ferramenta em Python para importar o novo formato em CSV dos arquivos da receita: https://github.com/lucasfacchini/open-data-cnpj-import
Muito bom Lucas !!
Notei um outro problema. Trata-se do PORTE da empresa. O novo layout: (2021) 1 – NÃO INFORMADO 2 - MICRO EMPRESA 3 - EMPRESA DE PEQUENO PORTE 5 - DEMAIS No layout antigo (2020) 0 – NÃO INFORMADO 1 - MICRO EMPRESA 3 - EMPRESA DE PEQUENO PORTE 5 - DEMAIS Não ha nenhum registro com codigo 2 Ha varios registros com codigo 0 Aparentemente continua a ser usado esquema de 2020
Ola Márcio, estou a 2 semanas conferindo esses dados e não consegui chegar em um consenso. Por favor, me da uma dica, como você esta usando o código do PORTE: 2020 ou com esse de 2021?
Pelo o que eu percebi utilizando a base dele, o padrão continua o de 2020 nesses dados recentes.
Notei um outro problema. Trata-se do PORTE da empresa. O novo layout: (2021) 1 – NÃO INFORMADO 2 - MICRO EMPRESA 3 - EMPRESA DE PEQUENO PORTE 5 - DEMAIS No layout antigo (2020) 0 – NÃO INFORMADO 1 - MICRO EMPRESA 3 - EMPRESA DE PEQUENO PORTE 5 - DEMAIS Não ha nenhum registro com codigo 2 Ha varios registros com codigo 0 Aparentemente continua a ser usado esquema de 2020
Ola Márcio, estou a 2 semanas conferindo esses dados e não consegui chegar em um consenso. Por favor, me da uma dica, como você esta usando o código do PORTE: 2020 ou com esse de 2021?
Pelo o que eu percebi utilizando a base dele, o padrão continua o de 2020 nesses dados recentes.
Obrigado por responder Lucas! outra coisa que estou curioso é com os dados dos sócios. Teve alguma novidade desde a última atualização em 20/04/2021?
Eu acredito que não, vamos esperar os outros responder
Ola @Lucasvor , sem novidades. Eu, particularmente, utilizo a base de estabelecimentos, empresas e simples UNIFICADAS em apenas uma tabela (estabelecimentos), e vinculo os sócios da atualização de 11/2020. As novas empresas, estão sem sócios (no meu caso), por segurança.
A receita federal mudou completamente o layout dos arquivos e tambem a pagina de download. O novo link: https://www.gov.br/receitafederal/pt-br/assuntos/orientacao-tributaria/cadastros/consultas/dados-publicos-cnpj Embora o novo layout indique que existe informacao de simples/mei, os arquivos disponibilizados nao tem simples/mei. Um dos arquivos ( DADOS_CNPJ_EMPRESAS_1.zip ) esta incompleto. O good news é que os arquivos agora estao em formato csv.