Uma rotina de preparação de dados transparentes completos, desde dados brutos para entradas de modelo de pommes
Esta é a rotina de preparação de dados do modelo fundamental do mercado de energia POMMES ( mais importante da energia e é nosso).
Navegue até a seção de interesse para saber mais.
O Pommes em si é um cosmos que consiste em um modelo de despacho , uma rotina de preparação de dados (armazenada neste repositório e descrita aqui) e um modelo de investimento para o mercado de energia atacadista alemão. O modelo foi originalmente desenvolvido por um grupo de pesquisadores e estudantes na Presidente da Gerenciamento de Energia e Recursos da TU Berlim e agora é mantido por um grupo de ex -alunos e aberto para outras contribuições.
Se você estiver interessado no modelo de despacho ou investimento real, encontre mais informações aqui:
A preparação dos dados é realizada principalmente neste notebook Jupyter . As fontes de dados utilizadas, bem como as etapas de cálculo e transformação aplicadas são descritas de maneira transparente. Além disso, há uma documentação do Pommesdata no ReadThEdocs. Por sua vez, isso contém uma documentação das funções e classes usadas para a preparação de dados.
Existem dois casos de uso para o uso pommesdata :
pommesdispatch ou pommesinvest entradasSe você estiver interessado apenas nos conjuntos de dados prontamente preparados (opção 1), poderá obtê -los do Zenodo e fazer o download aqui: https://zenodo.org/
Se você estiver interessado em entender o próprio processo de preparação de dados ou se deseja incluir adições, alterações ou suposições próprias, poderá bifurcar e depois clonar o repositório, a fim de copiar os arquivos localmente digitando digitando
git clone https://github.com/pommes-public/pommesdata.git
Depois de clonar o repositório, você deve instalar as dependências necessárias. Verifique se você está instalado como um gerenciador de pacotes. Caso contrário, você pode baixá -lo aqui. Abra um shell de comando e navegue até a pasta para onde você copiou o ambiente. Use o seguinte comando para instalar dependências
conda env create -f pommesdata_explicit.yml
Ative seu ambiente digitando
conda activate pommesdata_explicit
Nota: As dependências não foram atualizadas regularmente. Assim, use as dependências explícitas listadas do pommesdata_explicit.yml por enquanto e não no arquivo environment.yml .
Todo tipo de contribuição ou feedback é calorosamente bem -vindo.
Utilizamos o gerenciamento de problemas do GitHub, bem como solicitações de colaboração.
Tentamos manter os padrões de codificação PEP8.
O notebook Jupyter para a preparação de dados não (necessariamente precisa) atender aos padrões PEP8, embora a legibilidade seja garantida.
pommesdata são Johannes Kochems e Yannick Werner. É mantido por Johannes Kochems.As seguintes pessoas contribuíram para Pommes . A maioria dessas contribuições pertence a versões em estágio inicial e não faz parte do código-fonte real. No entanto, todas as contribuições devem ser reconhecidas e a lista completa é fornecida por razões de transparência.
Os principais colaboradores são declarados no topo, o restante está listado em ordem alfabética.
| Nome | Contribuição |
|---|---|
| Johannes Kochems | grande desenvolvimento e conceitualização conceituação, desenvolvimento de todas as peças relacionadas ao investimento; Desenvolvimento de principais rotinas de preparação de dados (esp. Projeção futura para todos os componentes, dados de concurso e estimativas de LCOE, documentação), arquitetura, processo de publicação, manutenção |
| Yannick Werner | grande desenvolvimento e conceitualização Conceitualização, desenvolvimento de principais rotinas de preparação de dados (dados de status quo para todos os componentes, res detalhados, interconector e dados hidrelétricos), arquitetura |
| Benjamin Grosse | Coleta de dados para usinas de energia convencionais em estágio inicial de desenvolvimento, apoio ideal e aconselhamento da concepção |
| Spiller de Carla | coleta de dados para usinas de energia convencionais no desenvolvimento do estágio inicial como uma entrada para o Pommesdata ; Co-desenvolvimento da modelagem de despacho de horizonte rolante em predecessor de pommesdispatch |
| Christian Fraatz | Coleta de dados para usinas convencionais no desenvolvimento do estágio inicial como uma entrada para Pommesdata |
| Conrad Nicklisch | Coleta de dados para res em Desenvolvimento em estágio inicial como entrada para pommesdata |
| Daniel Peschel | Coleta de dados em usinas de CHP como entrada para pommesdata |
| Dr. Johannes Giehl | Suporte e pesquisa de concepção de licenciamento de dados; Apoio à concepção para modelagem de investimentos no PommesInvest |
| Dr. Paul Verwiebe | Desenvolvimento de pequenos modelos de teste como um antecessor de Pommes |
| Fabian Büllesbach | Desenvolvimento de um antecessor da abordagem de modelagem do Rolling Horizon em Pommesdispatch |
| Flora von Mikulicz-Radecki | Extrementos de teste de código e funcionalidade em um estágio inicial de desenvolvimento para os predecessores de Pommesdispatch e PommesInvest |
| Florian Maurer | Suporte com / correção para dependências Python |
| Hannes Kachel | Desenvolvimento e análise de abordagens para redução de complexidade em um antecessor de pommesInvest |
| Julian Endres | Coleta de dados para custos e usinas convencionais no desenvolvimento do estágio inicial |
| Julien Faist | Coleta de dados para desligamento original da usina de carvão e instalação planejada de novas usinas de energia para pommesdata ; co-desenvolvimento de um antecessor de pommesinvest |
| Leticia Encinas Rosa | Coleção ATA para usinas de energia convencional no desenvolvimento do estágio inicial como uma entrada para Pommesdata |
| Prof. Dr.-ing. Joachim Müller-Kirchenbauer | financiamento, habilitação e suporte conceitual |
| Robin Claus | Coleta de dados para res em Desenvolvimento em estágio inicial como entrada para pommesdata |
| Sophie Westphal | Coleta de dados para custos e usinas convencionais no desenvolvimento do estágio inicial como entrada para Pommesdata |
| Timona Ghosh | Coleta de dados para dados de interconexão como entrada para pommesdata |
Os conjuntos de dados criados com pommesdata são compartilhados no Zenodo. Se você os usar, consulte as informações de citação fornecidas na Zenodo.
Se você estiver usando pommesdata para suas próprias análises, recomendamos citar como:
Kochems, J. & Wener, Y. (2024): Pommesdata. Uma rotina de preparação de dados transparentes completos, desde dados brutos para entradas de modelo Pommes. https://github.com/Pommes-Public/PomseSdata, acessado a yyyy-mm-dd.
Além disso, recomendamos nomear a tag de versão ou o hash de comprometimento usado em prol da transparência e reprodutibilidade.
Consulte também Citation.cff para obter informações sobre citação. As informações de licenciamento indicadas na citação.CFF são aplicáveis apenas ao próprio código, consulte a licença.
O licenciamento para o código - no seguinte referido como software - e os dados de entrada usados diferem. Para o licenciamento dos dados, consulte a lista detalhada dos conjuntos de dados abaixo.
Copyright 2024 Pommes Developer Group
A permissão é concedida, gratuita, a qualquer pessoa que obtenha uma cópia deste software e arquivos de documentação associados (o "software"), para lidar com o software sem restrição, inclusive sem limitação os direitos de usar, copiar, modificar, mesclar, publicar, distribuir, mobilizar o software e/ou vender cópias do software e permitir que as pessoas a quem
O aviso de direitos autorais acima e este aviso de permissão devem ser incluídos em todas as cópias ou em partes substanciais do software.
O software é fornecido "como está", sem garantia de qualquer tipo, expresso ou implícito, incluindo, entre outros, as garantias de comercialização, aptidão para uma finalidade específica e não innoculação. Em nenhum caso os autores ou detentores de direitos autorais serão responsáveis por qualquer reclamação, danos ou outro passivo, seja em uma ação de contrato, delito ou não, decorrente de, fora ou em conexão com o software ou o uso ou outras negociações no software.
A tabela a seguir contém as principais fontes de dados usadas para criar conjuntos de dados usados para modelos Pommes . O licenciamento das diferentes fontes difere e a tabela deve fornecer uma visão geral sobre as licenças utilizadas. Portanto, não podemos publicar todos os dados sob uma licença aberta, como uma licença de atribuição do Creative Commons. Esteja ciente de que alguns dados podem estar sujeitos a direitos autorais.
| instituição | Conjunto de dados | licença | Baixar link |
|---|---|---|---|
| OPSD | pacote de dados usinas de energia convencionais | MIT Licença para software; Para licença específica do conjunto de dados, consulte o Hyperlink | https://doi.org/10.25832/conventional_power_plants/2018-12-20 |
| Ünb / bnetza | Lista de usinas | Livre para usar, livre de licença de acordo com o §5 ABS. 1 URHG | https://www.netzentwicklungsplan.de/sites/default/files/paragraphs-files/kraftwerksliste_%C3%9cnb_entwurf_szenariorhmen_2030_v2019_0_0_0.pdf |
| Fzj / kit / fias | Fresna (Pypa-Eur) PP Matching | GPLV3 para software, para licença específica de conjunto de dados, consulte o Hyperlink | https://doi.org/10.5281/zenodo.3358985 |
| tmrowco | Geometrias da zona de licitação | MIT Licença | ElectricityMaps/ElectricityMaps-Contrib#1383 |
| Uba | usinas de energia recém-construídas | Uso de dados de acordo com o § 12A EGOVG permitido | https://www.umweltbundesamt.de/sites/default/files/medien/384/bilder/dateien/4_tab_genehmigte-in_genehmigung-kraftwerksprojekte_2019-04-04.pdf |
| Bdew | usinas de energia recém-construídas | Todos os direitos reservados | https://www.bdew.de/media/documents/pi_20190401_bdew-kraftwerksliste.pdf |
| Bnetza | usinas de energia recém-construídas e desativadas | Livre para usar, livre de licença de acordo com o §5 ABS. 1 URHG | https://www.bundesnetzagentur.de/DE/Sachgebiete/ElektrizitaetundGas/Unternehmen_Institutionen/Versorgungssicherheit/Erzeugungskapazitaeten/Kraftwerksliste/kraftwerksliste-node.html |
| Energie Saarlorlux | usina de energia recém-construída | Todos os direitos reservados | https://www.energie-daarlorlux.com/unternehmen/mehr-gutes-klima/unsere-co2-projekte/ |
| ENTSOE | usinas de energia recém-construídas | CC por 4.0 | https://tyndp.Entsoe.eu/maps-data |
| Bnetza | limiar para usinas de energia recém-construídas | Livre para usar, livre de licença de acordo com o §5 ABS. 1 URHG | https://www.bundesnetzagentur.de/shareddocs/downloads/de/sachgebiete/energie/unterhmen_institutionen/ve rsorgungssicherheit/berichte_fallanalysen/bnetza_netzstabilitaetsanlagen13k.pdf? __ BLOB = Publicaçãofile & v = 3 |
| Diw | estimativas de eficiência para usinas de energia | Todos os direitos reservados | https://www.diw.de/documents/publikationen/73/diw_01.c.440963.de/diw_datadoc_2014-072.pdf |
| Bnetza | Desligamento das usinas de energia | Livre para usar, livre de licença de acordo com o §5 ABS. 1 URHG | https://www.bundesnetzagentur.de/de/sachgebiete/elektrixitaetundgas/unternehmen_institutionen/versorgungssicherheit/erzeugnskapazitaeten/kwsal/kwsal |
| Juris | desligamento das usinas nucleares | Livre para usar, livre de licença de acordo com o §5 ABS. 1 URHG | https://www.gesetze-im-nenternet.de/atg/ |
| Juris | desligamento das usinas a carvão | Livre para usar, livre de licença de acordo com o §5 ABS. 1 URHG | https://www.gesetze-im-internet.de/kvbg/index.html |
| KWSB | desligamento das usinas a carvão | CC BY-ND 3.0 DE | https://www.bmwi.de/redaktion/de/downloads/a/abschlussbericht-kommission-wachstum-strukturwandel-und-beschaeftigung.pdf?__blob=publicationFilefile |
| ENTSOE | Geração real por unidade de geração | Use de acordo com o Artigo 5 dos Termos e Condições do ENTO-E; dados pertencentes aos TSOs específicos | https://transparency.Entsoe.eu/generation/r2/actualGeneationPergenerationUnit/Show |
| ENTSOE | Reservatórios de água e plantas de armazenamento hidrelétricas | Use de acordo com o Artigo 5 dos Termos e Condições do ENTO-E; dados pertencentes aos TSOs específicos | https://transparency.Entsoe.eu/generation/r2/waterreservoirsandhydrostorageplants/show |
| ENTSOE | Geração real por tipo de produção | Use de acordo com o Artigo 5 dos Termos e Condições do ENTO-E; dados pertencentes aos TSOs específicos | https://transparency.Entsoe.eu/generation/r2/actualGeneationPergenerationUnit/Show |
| Uba | Fatores de emissão específicos | Use de acordo com o § 12A egovg para pré-calculações | https://www.umweltbundesamt.de/publikationen/entwicklung-der spezifischen-kohlendioxid-6 |
| OPSD | Dados da série temporal | MIT Licença para software; Para licença específica do conjunto de dados, consulte o Hyperlink | https://data.open-power-system-data.org/time_series/2020-10-06 |
| Ünb | Anlagenstammdaten | dados pertencentes ao TSO alemão | https://www.netztransparenz.de/EEG/anlagenstammdaten |
| Ünb | EEG-BEWEGUNGSDATEN ZUR JAHRESABRECHNUNG 2017 | dados pertencentes ao TSO alemão | https://www.netztransparenz.de/EEG/jahresabrechnungen |
| Irena | Capacidades de RES instaladas | Todos os direitos reservados, dados usados para pré-calculações | https://www.irena.org/statistics/download-data |
| ENTO-E | Capacidade instalada por tipo de produção | Use de acordo com o Artigo 5 dos Termos e Condições do ENTO-E; dados pertencentes aos TSOs específicos | https://transparency.Entsoe.eu/generation/r2/installedgenerationcapacityagregation/show |
| Prognos et al. | Estude as capacidades de res para DE | Todos os direitos reservados, dados usados para cálculos pré | https://www.agora-energiewende.de/veroeffentlichungen/klimaneutrales-deutschland/ |
| Bnetza | Resultados da concurso Solarpv | Livre para usar, livre de licença de acordo com o §5 ABS. 1 URHG | https://www.bundesnetzagentur.de/DE/Sachgebiete/ElektrizitaetundGas/Unternehmen_Institutionen/Versorgungssicherheit/Erzeugungskapazitaeten/Kraftwerksliste/kraftwerksliste-node.html |
| Bnetza | Resultados da concurso do vento Onshore | Livre para usar, livre de licença de acordo com o §5 ABS. 1 URHG | https://www.bundesnetzagentur.de/de/sachgebiete/Elektrixitaetundgas/unternehmen_institutionen/ausschreibungen/wind_onshore/berendeseausschreibungen/beendeseatenchreibnchreibnoden_nodenodenodenodenodenodenusschreibungen/beretereaten/wind_noden_nodenodenodenodenusschreibungen/beendereaten/wind_nodes |
| Bnetza | Resultados de concurso de propostas comuns | Livre para usar, livre de licença de acordo com o §5 ABS. 1 URHG | https://www.bundesnetzagentur.de/de/sachgebiete/Elektrixitaetundgas/unternehmen_institutionen/ausschreibungen/wind_onshore/berendeseausschreibungen/beendeseatenchreibnchreibnoden_nodenodenodenodenodenodenusschreibungen/beretereaten/wind_noden_nodenodenodenodenusschreibungen/beendereaten/wind_nodes |
| Bnetza | Resultados de concurso no mar | Livre para usar, livre de licença de acordo com o §5 ABS. 1 URHG | https://www.bundesnetzagentur.de/de/service-funktionen/beschlusskammern/1_gz/bk6-gz/2017/bk6-17-001/ergebnisse_ers_ausschreibung.pdf?__blob=publication |
| Bnetza | Resultados de concurso no mar | Livre para usar, livre de licença de acordo com o §5 ABS. 1 URHG | https://www.bundesnetzagentur.de/de/service-funktionen/beschlusskammern/1_gz/bk6-gz/2018/bk6-18-001/ergebnisse_zwite_ausschreibung.pdfdrbland=publicatic=publicaticulting=publicaticulting=publicatic |
| Bnetza | Instalações solarpv (e remuneração) | Livre para usar, livre de licença de acordo com o §5 ABS. 1 URHG | https://www.bundesnetzagentur.de/DE/Sachgebiete/ElektrizitaetundGas/Unternehmen_Institutionen/ErneuerbareEnergien/ZahlenDatenInformationen/EEG_Registerdaten/ArchivDatenMeldgn/ArchivDatenMeldgn_node.html |
| Ünb | Balance de capacidade | Todos os direitos reservados, dados usados para pré-calculações | https://www.netztransparenz.de/portals/1/bericht_zur_leistungsbilanz_2019.pdf |
| Diw | Custos de combustível Uranium 2017 | Todos os direitos reservados | https://www.diw.de/documents/publikationen/73/diw_01.c.440963.de/diw_datadoc_2014-072.pdf |
| Diw | custos de operação | Todos os direitos reservados | https://www.diw.de/documents/publikationen/73/diw_01.c.440963.de/diw_datadoc_2014-072.pdf |
| Öko Institut | Custos de combustível Lignite 2017 | Todos os direitos reservados | https://www.oeko.de/oekodoc/1995/2014-015-de.pdf |
| Destatis | Custos de combustível Hardcoal 2017 | CC por 2.0 DE | https://www-genesis.destatis.de/Genais/online?&sequenz=tabelleergebnis&selectionName=43511-0001#abreadCrumb |
| BAFA | Custos de combustível Gás natural 2017 | CC BY-ND 3.0 DE | https://www.bafa.de/shareddocs/downloads/de/engie/egas_aufkommen_export_1991.html |
| BMWI | Óleo de aquecimento de custos de combustível 2017 | CC BY-ND 3.0 DE | https://www.bmwi.de/redaktion/de/artikel/engie/energiedaten-gesamtausgabe.html |
| r2b | custos de transporte | CC BY-ND 3.0 DE | https://www.bmwi.de/redaktion/de/publikationen/studien/definition-und-monitoring-der-versorgungssicherheit-an-europaeischen-strommerkten.pdf?__blob=publicationFile.vocal18 |
| Fraunhofer ISI | custos de operação | Todos os direitos reservados | https://www.ise.fraunhofer.de/content/dam/ise/de/documents/publications/studies/de2018_ise_studie_stromgestehungskosten_erneuerbare_energien.pdf |
Os dados são fornecidos sem licença. Consulte as informações de licenciamento acima.