美文网首页手写笔记学习永远无止境
孤荷凌寒自学python第六十六天学习mongoDB的基本操作并

孤荷凌寒自学python第六十六天学习mongoDB的基本操作并

作者: f9e86c58f23c | 来源:发表于2019-01-12 22:39 被阅读28次

    孤荷凌寒自学python第六十六天学习mongoDB的基本操作并进行简单封装5并学习权限设置

    (完整学习过程屏幕记录视频地址在文末)

    今天是学习mongoDB数据库的第十二天。

    今天继续学习mongoDB的简单操作,并继续对一些可能反复经常使用的操作进行简单的封装。同时通过搜索了解了如何对本地Mongo数据库进行权限设置(没有实践本地数据库的用户权限设置。)

    按个人规划,今天是初步了解学习MongoDb数据库的最后一个学习日,后续将在真正使用此数据库时,再对其进行深入研究。

    一、今天完成了两个可能会经常使用的函数。

    
    #将传入的cursor对象中的全部记录的_id值提取出来存入一个列表中返回
    
    def  getAll_idInCurSorGhlh(cursor,isShowMsg=False):
    
      '''
    
      将传入的cursor对象中的全部记录的_id值提取出来存入一个列表中返回
    
     '''
    
     lstR=[]
    
      try:
    
      for i in cursor:
    
     strid=i.get('_id')
    
      if strid!=None:
    
     lstR.append(strid)
    
      return lstR
    
      #---------------------------------------------------------------------------
    
      except  Exception  as e:
    
     mmongoErrString='获取mongoDb数据记录集(cursor)的所有记录中的_id值列表时出错:' + str(e) + '\n此函数由【孤荷凌寒】创建,QQ578652607'
    
      if isShowMsg==True:
    
     msgbox(mmongoErrString)
    
     lstR=[]
    
      return lstR
    
      else:
    
      pass
    
      finally:
    
      pass
    
    #将只有一个字段筛选条件的查询结果的所有记录中的_id值提出出来存入一个列表中返回
    
    def  findDataAndReturn_idListGhlh(objjh,strkeynm,value,strbijiao='',isShowMsg=False):
    
      '''
    
      将只有一个字段筛选条件的查询结果的所有记录中的_id值提出出来存入一个列表中返回
    
     '''
    
      try:
    
     data=findDataGhlh(objjh,strkeynm,value,strbijiao,False,isShowMsg)
    
      return getAll_idInCurSorGhlh(data,isShowMsg)
    
      #-------------------------------------------
    
      except  Exception  as e:
    
     mmongoErrString='获取mongoDb数据库中符合单一筛选条件的所有记录中的_id值列表时出错:' + str(e) + '\n此函数由【孤荷凌寒】创建,QQ578652607'
    
      if isShowMsg==True:
    
     msgbox(mmongoErrString)
    
     lstR=[]
    
      return lstR
    
      else:
    
      pass
    
      finally:
    
      pass
    
    

    这所以要创建这两个函数,我的设想是,因为在修改和查询时使用标识操作字符加到字典对象中,由于mongoDB的标识操作关键字特别多,不好记忆,容易写错,因此,如果我能分散这些步骤,当然这会降低程序的执行效率,但更便于理解 ,相比非常复杂且书写得很长的各种嵌套的字典对象来说,更不容易出错。

    这两个函数的核心理念是,因为任何一条记录(就是document对象)其中唯一标识的字段是【_id】,所以,为了简化操作,把所有查询得到的记录集或其它方法得到的记录集,都归集到只使用这个唯一标识的字段【_id】来进行识别和定位,那么将大大减轻理解难度和书写复杂度,当然会降低执行效率。

    这是我的想法。

    二、今天的测试文档

    【ceshi.py】

    
    from pymongo import MongoClient
    
    import datetime
    
    import _mty
    
    import _mf
    
    import _mre
    
    import _cl
    
    import _mmongo
    
    def  msgbox(info,titletext='孤荷凌寒的对话框QQ578652607',style=0,isShowErrMsg=False):
    
      return _mty.msgboxGhlh(info,titletext,style,isShowErrMsg)
    
    def  thirdConnect():
    
      #--获取授权用户和密码:
    
      #stru=_mf.readAllTextFromTxtFileGhlh('u.txt')
    
      #strp=_mf.readAllTextFromTxtFileGhlh('p.txt')
    
      #得到连接对象
    
     client=_mmongo.conMongoDbGhlh("localhost")
    
      #-- 获取数据库的命名标识
    
     db=client.ghlhsecond
    
      #--获取其中的一个集合对象
    
     jh=db.onejh
    
      #----添加记录
    
     dicA={
    
      u'姓名':u'张三3',
    
      u'性别':u'男',
    
     u'年龄':36,
    
      u'婚否':True
    
     }
    
     dicB={
    
      u'姓名':u'李四3',
    
      u'性别':u'女',
    
      u'年龄':32,
    
      u'婚否':False
    
     }
    
     lstA=[dicA,dicB]
    
      #------
    
      #isok=_mmongo.addNewDataGhlh(jh,lstA)
    
      #msgbox(str(isok))
    
      #删除记录的操作
    
      #isok=_mmongo.delDataGhlh(jh,'体重',98,">=")
    
      #msgbox(str(isok))
    
      #--查询这个集合其中的记录
    
      #data=jh.find()
    
      #for i in data:
    
      # msgbox(str(i))
    
      #data=_mmongo.findDataGhlh(jh,'姓名','张三.?','正则',True,True)
    
      #print(data)
    
      #for i in data:
    
      # msgbox(str(i))
    
      #lstA=_mmongo.getAll_idInCurSorGhlh(data)
    
     lstA=_mmongo.findDataAndReturn_idListGhlh(jh,'姓名','张三.?','正则')
    
      for i in lstA:
    
     msgbox(i)
    
      #data=_mmongo.modifyValueGhlh(jh,'姓名','李四.?',{'体重':98,'婚否':True},'正则',False,True)
    
      #print(data)
    
      #for i in data:
    
      # msgbox(str(i))
    
    thirdConnect()
    
    

    三、今天修改了自定义的模块中存放自己简单封装的一些函数等:

    【_mmongo.py】

    
    #!/usr/bin/env python3
    
    # -*- coding: utf-8 -*-
    
    #此模块用于封闭mongodb数据库操作的一些方法
    
    import string
    
    import pymongo
    
    import _mty
    
    import _cl #常用常量模块
    
    import _mre
    
    mmongoErrString=''  #供其它模块使用的全局变量了,实时保存了各函数执行时的错误信息
    
    def  msgbox(info,titletext='孤荷凌寒的mongodb模块对话框QQ578652607',style=0,isShowErrMsg=False):
    
      return _mty.msgboxGhlh(info,titletext,style,isShowErrMsg)
    
    #获取一个针对mongodb数据库服务的client对象的方法函数
    
    def  conMongoDbGhlh(serveraddress,strusername='',strpassword='',strauthMechanism='SCRAM-SHA-1',isconnect=False,isShowMsg=False):
    
      '''
    
      根据传递进函数的mongoDB数据服务器地址来连接,并返回一个client对象
    
     '''
    
      try:
    
     client=None
    
      if strusername==''  or strpassword=='':
    
      #无验证连接方式:
    
     client=pymongo.MongoClient(serveraddress)
    
      else:
    
      #有验证的连接:
    
     client=pymongo.MongoClient(serveraddress,username=strusername,password=strpassword,authMechanism=strauthMechanism,connect=isconnect)
    
      #-----------------------------------
    
      return client
    
      except  Exception  as e:
    
     mmongoErrString='连接MongoDB数据库【' + serveraddress + '】时出错:' + str(e) + '\n此函数由【孤荷凌寒】创建,QQ578652607'
    
      if isShowMsg==True:
    
     msgbox(mmongoErrString)
    
      return  None
    
      else:
    
      pass
    
      finally:
    
      pass
    
    #向指定的集合中添加记录
    
    def  addNewDataGhlh(objjh,objdata,isShowMsg=False):
    
      '''
    
      通过指定要添加记录的集合对象和要添加的数据对象(字典或字典组成的列表)来向指定集合添加记录
    
     #objjh 要操作的集合对象
    
     #objdata 要添加的数据,如果传入一个字典对象则是添加一条记录;如果传入一个由多个字典组合成的列表对象,就是同时添加多条记录。
    
     '''
    
      try:
    
     r=objjh.insert(objdata)
    
      if r==None:
    
      return  False
    
      else:
    
      return  True
    
      except  Exception  as e:
    
     mmongoErrString='向集合中添加记录时出错:' + str(e) + '\n此函数由【孤荷凌寒】创建,QQ578652607'
    
      if isShowMsg==True:
    
     msgbox(mmongoErrString)
    
      return  False
    
      else:
    
      pass
    
      finally:
    
      pass
    
    #----简化查询记录的书写----
    
    def  findDataGhlh(objjh,strkeynm,value,strbijiao='',isReturnList=True,isShowMsg=False):
    
      '''
    
      用于指定一个key键名符合条件value的简单查询,只能针对一个键名的值作为筛选条件
    
     *如果是字符串使用大于小于等比较运算则会被  忽略
    
     *value支持使用正则表达式
    
     '''
    
      try:
    
      if strkeynm==''  or value=='':
    
     mmongoErrString='查询集合中符合指定一个条件的记录时出错:必须指明要筛选的键名和键值\n此函数由【孤荷凌寒】创建,QQ578652607'
    
      if isShowMsg==True:
    
     msgbox(mmongoErrString)
    
      return  None
    
      #----------------------------------------------------------
    
     dic=None
    
      if strbijiao=='>':
    
      #--大于比较---------------
    
     dic={strkeynm:{'$gt':value}}
    
      elif strbijiao=='>=':
    
      #--大于等于------
    
     dic={strkeynm:{'$gte':value}}
    
      elif strbijiao=='<':
    
      #---小于--------------
    
     dic={strkeynm:{'$lt':value}}
    
      elif strbijiao=='<=':
    
      #---小于等于--------------
    
     dic={strkeynm:{'$lte':value}}
    
      elif strbijiao=='<>'  or strbijiao=='!=':
    
      #---不等于--------------
    
     dic={strkeynm:{'$ne':value}}
    
      elif strbijiao=='in'  or strbijiao=='within'  or strbijiao=='包含'  or strbijiao=='包括':
    
      #---in--------------只包含如字符串的一部分的情况,还不能处理
    
     dic={strkeynm:{'$in':value}}
    
      elif strbijiao=='nin'  or strbijiao=='without'  or strbijiao=='不包含'  or strbijiao=='不包括':
    
      #---不等于--------------
    
     dic={strkeynm:{'$nin':value}}
    
      elif strbijiao=='正则'  or strbijiao=='正则表达式'  or strbijiao=='reg'  or strbijiao=='regex':
    
      #---value是一个正则表达式----
    
     dic={strkeynm:{'$regex':value}}
    
      else:
    
      #===等于
    
     dic={strkeynm:value}
    
      #--------------------------------------------
    
     r=objjh.find(dic)
    
      if r==None:
    
      return  None
    
      else:
    
      #---现在得到的是一个生成器
    
      #---进行处理,返回为一个列表(可以在参数中加一个开关,看是否返回为一个列表,或直接返回为生成器)
    
      if isReturnList==False:
    
      return r
    
      else:
    
      #----改成列表后再返回 ====
    
      return  list(r)
    
      #---------------------------------------------------------------------------
    
      except  Exception  as e:
    
     mmongoErrString='查询集合中符合指定一个条件的记录时出错:' + str(e) + '\n此函数由【孤荷凌寒】创建,QQ578652607'
    
      if isShowMsg==True:
    
     msgbox(mmongoErrString)
    
      return  None
    
      else:
    
      pass
    
      finally:
    
      pass
    
    #根据指定的唯一  的一个筛选Key对应的value查找到记录,并进行值的更改
    
    def  modifyValueGhlh(objjh,strkeynm,value,dictnewvalue,strbijiao='',isfugai=False,isaddnew=True,isReturnList=True,isShowMsg=False):
    
      '''
    
      根据指定的唯一  的一个筛选Key对应的value查找到记录,并进行值的更改
    
      此函数默认进行全部符合条件的记录的修改。
    
     #objjh 集合对象
    
     #strkeynm 要作为筛选条件的那个key字段名,
    
     #value 要筛选的值或表达式
    
     #dictnewvalue 要向此记录(文档)中修改或添加的新内容
    
     #strbijiao 查询时要进行的比较运算符号
    
     #isfugai 如果设置为True,则会先删除文档旧的全部记录,只加入dictnewvalue列出记录
    
     #isaddnew 如果设置为True,则原文档没有的字段,而dictnewvalue中有的字段会被新增到文档记录中。
    
     '''
    
      try:
    
     data=findDataGhlh(objjh,strkeynm,value,strbijiao,False,isShowMsg)
    
      if data!=None:
    
      #先取出_id
    
     lstid=[]
    
      for i in data:
    
     strid=i.get('_id')
    
      if strid!=None:
    
     lstid.append(strid)
    
      if isfugai==True:
    
     objjh.update({'_id':strid},dictnewvalue,isfugai)
    
      else:
    
     objjh.update({'_id':strid},{"$set":dictnewvalue},isaddnew)
    
      #------重新取出修改过的那些记录并返回----
    
      return findDataGhlh(objjh,'_id',lstid,'in',isReturnList,isShowMsg)
    
      else:
    
     mmongoErrString='修改集合中符合指定一个条件的记录时出错:没有找到符合条件的记录\n此函数由【孤荷凌寒】创建,QQ578652607'
    
      if isShowMsg==True:
    
     msgbox(mmongoErrString)
    
      return  None
    
      #---------------------------------------------------------------------------
    
      except  Exception  as e:
    
     mmongoErrString='修改集合中符合指定一个条件的记录时出错:' + str(e) + '\n此函数由【孤荷凌寒】创建,QQ578652607'
    
      if isShowMsg==True:
    
     msgbox(mmongoErrString)
    
      return  None
    
      else:
    
      pass
    
      finally:
    
      pass
    
    #----简化查询记录并删除----
    
    def  delDataGhlh(objjh,strkeynm,value,strbijiao='',isShowMsg=False):
    
      '''
    
      查询符合条件的记录并删除掉。
    
      用于指定一个key键名符合条件value的简单查询,只能针对一个键名的值作为筛选条件
    
     *如果是字符串使用大于小于等比较运算则会被  忽略
    
     *value支持使用正则表达式
    
     '''
    
      try:
    
      if strkeynm==''  or value=='':
    
     mmongoErrString='查询集合中符合指定一个条件的记录并删除记录时出错:必须指明要筛选的键名和键值\n此函数由【孤荷凌寒】创建,QQ578652607'
    
      if isShowMsg==True:
    
     msgbox(mmongoErrString)
    
      return  False
    
      #----------------------------------------------------------
    
      if strbijiao=='>':
    
      #--大于比较---------------
    
     dic={strkeynm:{'$gt':value}}
    
      elif strbijiao=='>=':
    
      #--大于等于------
    
     dic={strkeynm:{'$gte':value}}
    
      elif strbijiao=='<':
    
      #---小于--------------
    
     dic={strkeynm:{'$lt':value}}
    
      elif strbijiao=='<=':
    
      #---小于等于--------------
    
     dic={strkeynm:{'$lte':value}}
    
      elif strbijiao=='<>'  or strbijiao=='!=':
    
      #---不等于--------------
    
     dic={strkeynm:{'$ne':value}}
    
      elif strbijiao=='in'  or strbijiao=='within'  or strbijiao=='包含'  or strbijiao=='包括':
    
     #---in--------------只包含如字符串的一部分的情况,还不能处理
    
     dic={strkeynm:{'$in':value}}
    
      elif strbijiao=='nin'  or strbijiao=='without'  or strbijiao=='不包含'  or strbijiao=='不包括':
    
      #---不等于--------------
    
     dic={strkeynm:{'$nin':value}}
    
      elif strbijiao=='正则'  or strbijiao=='正则表达式'  or strbijiao=='reg'  or strbijiao=='regex':
    
      #---value是一个正则表达式----
    
     dic={strkeynm:{'$regex':value}}
    
      else:
    
      #===等于
    
     dic={strkeynm:value}
    
      #--------------------------------------------
    
     objjh.remove(dic)
    
      return  True
    
      #---------------------------------------------------------------------------
    
      except  Exception  as e:
    
     mmongoErrString='查询集合中符合指定一个条件的记录并删除时出错:' + str(e) + '\n此函数由【孤荷凌寒】创建,QQ578652607'
    
      if isShowMsg==True:
    
     msgbox(mmongoErrString)
    
      return  False
    
      else:
    
      pass
    
      finally:
    
      pass
    
    #将传入的cursor对象中的全部记录的_id值提取出来存入一个列表中返回
    
    def  getAll_idInCurSorGhlh(cursor,isShowMsg=False):
    
      '''
    
      将传入的cursor对象中的全部记录的_id值提取出来存入一个列表中返回
    
     '''
    
     lstR=[]
    
      try:
    
      for i in cursor:
    
     strid=i.get('_id')
    
      if strid!=None:
    
     lstR.append(strid)
    
      return lstR
    
      #---------------------------------------------------------------------------
    
      except  Exception  as e:
    
     mmongoErrString='获取mongoDb数据记录集(cursor)的所有记录中的_id值列表时出错:' + str(e) + '\n此函数由【孤荷凌寒】创建,QQ578652607'
    
      if isShowMsg==True:
    
     msgbox(mmongoErrString)
    
     lstR=[]
    
      return lstR
    
      else:
    
      pass
    
      finally:
    
      pass
    
    #将只有一个字段筛选条件的查询结果的所有记录中的_id值提出出来存入一个列表中返回
    
    def  findDataAndReturn_idListGhlh(objjh,strkeynm,value,strbijiao='',isShowMsg=False):
    
      '''
    
      将只有一个字段筛选条件的查询结果的所有记录中的_id值提出出来存入一个列表中返回
    
     '''
    
      try:
    
     data=findDataGhlh(objjh,strkeynm,value,strbijiao,False,isShowMsg)
    
      return getAll_idInCurSorGhlh(data,isShowMsg)
    
      #-------------------------------------------
    
      except  Exception  as e:
    
     mmongoErrString='获取mongoDb数据库中符合单一筛选条件的所有记录中的_id值列表时出错:' + str(e) + '\n此函数由【孤荷凌寒】创建,QQ578652607'
    
      if isShowMsg==True:
    
     msgbox(mmongoErrString)
    
     lstR=[]
    
      return lstR
    
      else:
    
      pass
    
      finally:
    
      pass
    
    

    ——————————

    今天整理的学习笔记完成,最后例行说明下我的自学思路:

    根据过去多年我自学各种编程语言的经历,认为只有真正体验式,解决实际问题式的学习才会有真正的效果,即让学习实际发生。在2004年的时候我开始在一个乡村小学自学电脑 并学习vb6编程语言,没有学习同伴,也没有高师在上,甚至电脑都是孤岛(乡村那时还没有网络),有的只是一本旧书,在痛苦的自学摸索中,我找到适应自己零基础的学习方法:首先是每读书的一小节就作相应的手写笔记,第二步就是上机测试每一个笔记内容是否实现,其中会发现书中讲的其实有出入或错误,第三步就是在上机测试之后,将笔记改为电子版,形成最终的修订好的正确无误的学习笔记 。

    通过反复尝试错误,在那个没有分享与交流的黑暗时期我摸黑学会了VB6,尔后接触了其它语言,也曾听过付费视频课程,结果发现也许自己学历果然太低,就算是零基础的入门课程,其实也难以跟上进度,讲师的教学多数出现对初学者的实际情况并不了解的情况,况且学习者的个体也存在差异呢?当然更可怕的是收费课程的价格往往是自己难以承受的。

    于是我的所有编程学习都改为了自学,继续自己的三步学习笔记法的学习之路。

    当然自学的最大问题是会走那么多的弯路,没有导师直接输入式的教学来得直接,好在网络给我们带来无限搜索的机会,大家在网络上的学习日志带给我们共享交流的机会,而QQ群等交流平台、网络社区的成立,我们可以一起自学,互相批评交流,也可以获得更有效,更自主的自学成果。

    于是我以人生已过半的年龄,决定继续我的编程自学之路,开始学习python,只希望与大家共同交流,一个人的独行是可怕的,只有一群人的共同前进才是有希望的。

    诚挚期待您的交流分享批评指点!欢迎联系我加入从零开始的自学联盟。

    这个时代互联网成为了一种基础设施的存在,于是本来在孤独学习之路上的我们变得不再孤独,因为网络就是一个新的客厅,我们时刻都可以进行沙龙活动。

    非常乐意能与大家一起交流自己自学心得和发现,更希望大家能够对我学习过程中的错误给予指点——是的,这样我就能有许多免费的高师了——这也是分享时代,社区时代带来的好福利,我相信大家会的,是吧!

    根据完全共享的精神,开源互助的理念,我的个人自学录制过程是全部按4K高清视频录制的,从手写笔记到验证手写笔记的上机操作过程全程录制,但因为4K高清文件太大均超过5G以上,所以无法上传至网络,如有需要可联系我QQ578652607对传,乐意分享。上传分享到百度网盘的只是压缩后的720P的视频。

    我的学习过程录像百度盘地址分享如下:(清晰度:1280x720)

    链接:https://pan.baidu.com/s/1AYprOjG3owTEKJA1hwXKUw

    提取码:foht

    Bilibili:

    https://www.bilibili.com/video/av40255775/

    喜马拉雅语音笔记:

    https://www.ximalaya.com/keji/19103006/152105278

    相关文章

      网友评论

        本文标题:孤荷凌寒自学python第六十六天学习mongoDB的基本操作并

        本文链接:https://www.haomeiwen.com/subject/uqdhdqtx.html