import os
import pandas as pd

tab = pd.read_csv('data/empresas.xz')
tab = tab[tab['state'] == 'SP']
tab = tab[tab['city'] == 'SANTOS']

tab.dtypes
tab.head(2)

tab = pd.read_json(os.path.join('data', 'tab.json'))

tab

#tab = pd.DataFrame(JSON_object)
#tab

tab = pd.read_csv('data/empresas.xz')
tab = tab[tab['state'] == 'SP']
tab = tab[tab['city'] == 'SANTOS']

# Seleciona com mais de um argumento
#tab = tab[tab['CNPJ_FUNDO'].isin(['00.017.024/0001-53', '00.068.305/0001-35'])]

tab

tab = pd.read_csv('data/empresas.xz')

# Exclui coluna pela posição
#tab.drop(tab.columns[[0, 2]], axis=1, inplace=True)

# Exclui coluna pelo Nome
tab = tab.drop(['state', 'longitude'], axis=1)

# Mantem apenas a que vc quer
#tab = tab[['cnpj','latitude']]

tab

tab.columns = [x.lower() for x in tab.columns]                # Para tudo para Minúsculas
tab.columns = [x.upper() for x in tab.columns]                # Para tudo para Maiúscula
tab = tab.rename(columns=lambda x: x.replace('nome', 'zzz'))  # Renomear de uma coisa por outra

# Remove espaços em branco de uma determinada coluna
tab['neighborhood'] = tab['neighborhood'].str.strip()

tab['cosunt'] = 'a'
tab

tab = pd.read_csv('data/empresas.xz')
tab = tab[tab['state'] == 'SP']
tab = tab[tab['city'] == 'SANTOS']

# Quantos registros tem por coluna
tab.count()

# Tipos das colunas
tab.dtypes

# Início da Tabela
tab.head(3)

# Descrição de parâmetros básicos apenas dos campos numéricos
tab.describe()

import geopandas as gpd
#https://rsandstroem.github.io/GeoMapsFoliumDemo.html
#https://michelleful.github.io/code-blog/2015/04/29/geopandas-manipulation/

import os

# Pasta Atual
print(os.getcwd())

# Altera a pasta para um nível acima
os.chdir('/home/michel/Documents/SourceCode/michelmetran.github.io')
os.chdir('/home/michel/Documents/SourceCode/package_pandas')

# dd
print(os.path.expanduser('~'))

# Confere a pasta
print(os.getcwd())

#from importlib import reload
#reload(os)

os.path.dirname('/home/michel/Documents/SourceCode/package_pandas/pandas.ipynb')

# %load '~/Documents/SourceCode/codes/files/export_jupyter.py'
def export_jupyter(path, extensions=['html', 'markdown', 'latex', 'pdf', 'python'], today=True):
    """
    Export .ipynb file to others formats
    :return: File in other formats
    """
    # Import Packages
    import os
    import datetime

    # Data
    timestamp = datetime.datetime.now()
    srt_today = (str(timestamp.year) + '-' +
                 str(f"{timestamp.month:02d}") + '-' +
                 str(f"{timestamp.day:02d}"))

    # Extensions
    for extension in extensions:
        if today==True:
            os.system('jupyter nbconvert --to {} {} --output {}'.
                      format(extension, get_jupyternotebook_name(),
                             os.path.join(path, srt_today+'-'+get_jupyternotebook_name().split('.')[0])))
            print('Arquivo {} exportado corretamente para o formato {} usando prefixo da data.'.
                  format(get_jupyternotebook_name(), extension))

        else:
            os.system('jupyter nbconvert --to {} {} --output {}'.
                      format(extension, get_jupyternotebook_name(),
                             os.path.join(path, get_jupyternotebook_name().split('.')[0])))
            print('Arquivo {} exportado corretamente para o formato {} sem usar prefixo da data.'.
                  format(get_jupyternotebook_name(), extension))

# %load '~/Documents/SourceCode/codes/files/get_jupyternotebook_name.py'
def get_jupyternotebook_name():
    """
    Returns the name of the current notebook as a string
    From https://mail.scipy.org/pipermail/ipython-dev/2014-June/014096.html
    :return: Returns the name of the current notebook as a string
    """
    # Import Packages
    from IPython.core.display import Javascript
    from IPython.display import display

    display(Javascript('IPython.notebook.kernel.execute("theNotebook = " + \
    "\'"+IPython.notebook.notebook_name+"\'");'))

    # Result
    return theNotebook

export_jupyter('docs',['pdf'], False)
export_jupyter('/home/michel/Documents/SourceCode/michelmetran.github.io/_posts', ['markdown'], True)

%run '~/Documents/SourceCode/codes/git/update_github.py'

git_full('/home/michel/Documents/SourceCode/package_pandas', '.', 'Atualizando')
git_full('/home/michel/Documents/SourceCode/michelmetran.github.io', '.', 'Atualizando')

#pip freeze > requirements.txt