从 Access 创建 sqlite 数据库答案

【问题标题】：Create sqlite database from Access从 Access 创建 sqlite 数据库
【发布时间】：2019-03-22 23:56:25
【问题描述】：

我想创建一个来自 access 数据库后端的 sqlite 数据库。

在 64bit/32bit 的情况下 --> pyocdb 不起作用。所以我导出了一些excel文件。

一个快速的解决方案是：

import os
import pandas as pd
from sqlalchemy import create_engine

#load all files in folder
folder = "...some start folder"
files = {file.split('.')[0]:os.path.join(folder, file) 
            for file in os.listdir(folder) if file.endswith('.xlsx')}

list_dfs = {name:pd.read_excel(file) for name,file in files.items()}

#initialize a sqlite database
engine = create_engine('sqlite:///sql.db', echo=False)

#drop tables to sql
for key, frame in list_dfs.items():
    frame.to_sql(key, con=engine, if_exists='append',index=False,index_label='ID')

我可以在字典中的frame.to_sql 中添加一些 dType。我努力建立表之间的关系。 sqlalchemy 似乎是一个不错的解决方案，但是是否可以格式化现有的数据库？

问候加入

【问题讨论】：

格式化现有数据库是什么意思？也许您的意思是导出现有架构？表示导出创建表语句等。
是的，我在模式上挣扎..我想，当我用 pandas 创建数据库时，已经有某种模式......现在我想在 sqlalchemy 中更改它，但我有不知道如何开始。
我想我在这里找到了答案：docs.sqlalchemy.org/en/latest/core/metadata.html

标签： python database pandas sqlite sqlalchemy

【解决方案1】：

@PowerStat，感谢您的更正。

到目前为止，我目前的解决方案似乎有效：

import os
import pandas as pd
from sqlalchemy import (create_engine, MetaData, Table, Column, Integer, 
                        String, ForeignKey, DateTime, Float)

#%%load all excel filenames into two directories main/id
folder = "some_path"
ID_files = {file.split('.')[0]:os.path.join(folder, file) 
            for file in os.listdir(folder) if "ID_" in str(file) and file.endswith('.xlsx')}
main_files={file.split('.')[0]:os.path.join(folder, file) 
            for file in os.listdir(folder) if not "ID_" in str(file) and file.endswith('.xlsx')}

#create a list of dataframes
ID_dfs = {name:pd.read_excel(file) for name,file in ID_files.items()}

main_dfs = {name:pd.read_excel(file) for name,file in main_files.items()}

#%%initialize meta data for all tables
engine = create_engine('sqlite:///sql.db', echo=False)
meta = MetaData()


for key, frame in ID_dfs.items():
    table = Table(key, meta,
                  Column('ID',Integer,primary_key = True),
                  Column('Title',String, unique=True))

table = Table('table_of_things', meta,
                Column('ID',Integer, primary_key = True),
                Column('Book_ID',Integer,ForeignKey('ID_Book.ID')),
                Column('Article_ID',Integer,ForeignKey('ID_Article.ID')))

meta.create_all(engine)

#add the Dataframes to sql-database
for key, frame in ID_dfs.items():
    frame.to_sql(key, engine, if_exists='append',index=False, index_label='ID')

main_dfs['table_of_things'].to_sql('table_of_things', engine,
    if_exists='append',index=False,index_label='ID')

使用第二个脚本，我加载数据库并进行查询：

from sqlalchemy.ext.automap import automap_base, generate_relationship
from sqlalchemy.orm import Session
from sqlalchemy import create_engine

def _gen_relationship(base, direction, return_fn,
                  attrname, local_cls, refferred_cls, **kw):
    return generate_relationship(base, direction, return_fn, attrname, local_cls, refferred_cls, **kw)


Base = automap_base()

# engine, suppose it has two tables 'user' and 'address' set up
engine = create_engine("sqlite:///sql.db")

# reflect the tables
Base.prepare(engine, reflect=True, generate_relationship=_gen_relationship)

#table to classvariable
tob = Base.classes['table_of_things'] 

session = Session(engine)

for inst in session.query(tob).order_by(tob.ID):
    print(inst.Book_ID, inst.Article_ID)

输出给我的是ID值而不是title值，如何正确使用one2many关系？

答案：

关系定义得当！实例对象（inst）已经包含 id_book 和 id_article：

for inst in session.query(tob).order_by(tob.ID):
    print(inst.id_book.Title, inst.id_article.Title)

【讨论】：