在我们学习数据科学的时候,通常数据都存在csv
等格式的文件中,但是事实上在企业里公,数据往往被存储到数据库中。
今天我将介绍如何使用Jupyter Notebooks或JupyterLab作为SQL IDE。
设置
首先,我们需要安装一个库以确保可以直接在Notebook中运行SQL,我们直接在Jupyter单元中运行如下代码:
! pip install ipython-sql
接着,我们将使用sqlalchemy
库来创建连接数据库所需的引擎。每个数据库url
仅需要一次。
以下是各种数据库的一些通用的url
.
- PostgreSQL:
postgresql://scott:tiger@localhost/mydatabase
- Mysql:
mysql://scott:tiger@localhost/foo
- Oracle:
oracle://scott:tiger@127.0.0.1:1521/sidname
- SQL server:
mssql+pyodbc://scott:tiger@mydsn
- SQLite:
sqlite:///foo.db
这是Oracle DB的示例:
file现在我们可以加载以前安装的SQL模块:
file并使用先前指定的url
连接到数据库。
开始
好的,现在可以开始了。首先,我将展示如何将多行SQL查询传递给Juypter单元。需要在代码前面加上前缀%%sql或%sql在下面进行演示即可。
将整个单元格标记为SQL块
让我们从这一点开始,因为它允许输入多行SQL语句。唯一的要求是%%sql
在开头加上前缀。例如从某个表中选择前五行:
如果要执行此单元格,则将得到以下输出:
file看起来像是Pandas DataFrame,但不是,它只是展示了表格的外观。
单行语句-将结果存储到变量
不仅限于多行语句,我们还可以将SQL查询的结果存储到变量中。在这里,将只有一个百分号,而不是两个:%sql
例如我将从phone_number列中选择一个值:
file可以发现输出不是我们想要的,我们可以通过以下方法来解决。
file其他操作
转换为Pandas DataFrame
从数据库中选择一些数据集,然后调用.DataFrame()
它的方法,这样就无须手动给转换了。
绘图
假设你想要快速从数据库中获取一些数据并制作条形图。我们还可以使用matplotlib
。
最后
如果本文对你有帮助欢迎关注我的个人公众号「会编程的Z同学」
在这里插入图片描述本文由博客群发一文多发等运营工具平台 OpenWrite 发布
网友评论