项目总体情况软件:pycharm
环境: python 3.7.9(考虑到客户可能会有不同操作系统,为了兼容性考虑)
技术库: requests、pandas、pyqt5等(详见依赖文件)
需求分析通过对客户需求文档分析和与沟通,大致有以下几个需求:
根据“单号归属”批量向3个接口提交数据
需要一个gui操作界面
支持不同的业务员登录
总的来说就是一个post数据提交和gui开发。
项目实施1.post提交这一块主要用到的就是爬虫技术,万年不变的步骤,都是先分析网页。
1.1登录
通过抓包发现,密码是明文,难度就降低了一半,然后用正确的密码再分析登录成功后的返回。
def login(self, username: str, password: str): """ 登录 """ url = "http://cloud.tiamaes.com:11349/erp/portal.bootstrap/ssologinaction/login.do" data = { "_tp_data": '{"parameters":{"username":' + username + ',"pwd":' + password + '},"rowsets":{},"headers":{},"requestcomponent":"0"}' } data = parse.urlencode(data).replace("+", "") resp = requests.post(url, headers=self.headers, data=data, verify=false) self.identifier = resp.json()["headers"]["identifier"] return self.identifier
发现登录成功后会返回一个“identifier”参数,值是加密字符串,这样就很明显,光看字面意思都知道这个肯定有用,所以先记录下来。
1.2接口分析由于我用的是测试账号,这个账号提交的数据都要删掉,为了不给别人注入太多的无效数据,这里就不再实际录入,以业务代码来说明。
获取车辆信息
通过分析发现,虽然客户给了一部分车辆的信息,但是还有多缺失的信息,需要自己补充。通过抓包发现,在输入车辆编号以后,会发起一个ajax请求,表单里其他信息就是ajax请求返回的数据。
def get_car_details(self, car_no: str, identifier: str): """ 获取车辆信息 """ # print(self.identifier) url = "http://cloud.tiamaes.com:11349/money/basis.inter/jwbusaction/getcachejwbusbyno.do" data = { '_tp_data': '{"parameters": {"busno": ' + str(car_no) + ', "dsname": "83"}, "rowsets": {}, "headers": {"identifier": ' + identifier + '}, "requestcomponent": "0"}' } data = parse.urlencode(data).replace("+", "") resp = requests.post(url, headers=self.headers, data=data, verify=false) rows = resp.json()["rowsets"]["com.tp.basis.entity.entity.bus.bajwbus"]["rows"][0] return rows
获取人员信息
表单的人员信息我通过抓包没有发现,后来再一个页面中找到了相关的数据。
这里稍微麻烦一点,需要用正则把数据匹配出来。
def get_personal_info(self, identifier: str): """ 获取个人信息 """ url = "http://cloud.tiamaes.com:11349/money/money.action/charteredaction/showdetail.do" data = { '_tp_data': '{"parameters":{"dsname":"83","method":"add","recid":"-1"},"rowsets":{},"headers":{"identifier":' + identifier + '},"requestcomponent":"1"}' } data = parse.urlencode(data).replace("+", "") resp = requests.post(url, headers=self.headers, data=data, verify=false) json_data = eval(re.findall(r'<code>.*?"rows":\[(.*?)\]', resp.text)[0]) return json_data
发起请求,提交数据
拿到了登录返回的标识符、车辆信息、人员信息,剩下的就是和客户给的数据结合起来,发起请求。需要注意的是,请求参数需要转为url编码,请求参数也是这个爬虫里面最麻烦的部分,这里给大家展示一个请求需要发送的参数。
参数多,格式要求也比较严格,整个开发过程,这里调试花费的时间也最长。调试完正常应该是把代码简化一下,该合并的合并,我调试好了以后懒得再去改了,所以这一块写的比较冗余。
def submit_data(self, i: dict, identifier: str): """ 众意数据提交 """ personal_info = self.get_personal_info(identifier) # 获取个人信息 personal_info_data = str(personal_info).replace("'", '"') # 将personal_info转换为字符串 url = "http://cloud.tiamaes.com:11349/money/money.action/charteredaction/saveform.do" print(f'开始处理--{i["单号归属"]}--数据') memo = f'工单号{i["工单号"]}、餐费{i["餐费"]}、住宿{i["住宿"]}、过路过桥费{i["过路过桥费"]}、油费{i["油费"]}、备注{i["备注"]}' # 拼接备注信息 car_infos = self.get_car_details(str(i["车号"]), identifier) # 获取车辆信息 pay_type = { "现金": "3", "转账": "2", "欠款": "1" } single_and_double = { "单程": "1", "双程": "2" } coltype = pay_type[i["结账方式"]] # 获取结账方式编码 oddeven = single_and_double[i["单双程"]] # 获取单双程编码 now_date = datetime.datetime.now().date().strftime("%y-%m-%d") # 获取当前日期 .......(此处省略) data["_tp_data"] = data["_tp_data"].replace('"dsname":"83"', '"dsname":"82"') data = parse.urlencode(data).replace("+", "") # 将字典转换成url编码 resp = requests.post(url, headers=self.headers, data=data, verify=false).json() order_id = resp["rowsets"]["com.tp.money.entity.basic.chartered"]["rows"][0]["recno"] # 获取订单编号 i["包车单号"] = order_id return data
2.gui开发gui开发相对来说比较简单,如果不想美化,pyqt原生的插件就可以了,我这里是借用了上一个项目的经验,用仅有的知识做了一个无边框界面和适当的美化。
登录
from pyqt5.qtcore import qtfrom pyqt5.qtgui import qcolorfrom pyqt5.qtwidgets import (qframe, qmessagebox, qgraphicsdropshadoweffect)from ui import login_uifrom ui.submit_ui_main import mysubmitformfrom submit import transitsubmit class mylogin(login_ui.ui_loginform, qframe): def __init__(self, submit: transitsubmit): super().__init__() # self.identifier = none # self.my_main_window = none self.setupui(self) self.submit = submit # 设置无边框模式 self.setwindowflag(qt.framelesswindowhint) # 将界面设置为无框 self.setattribute(qt.wa_translucentbackground) # 将界面属性设置为半透明 self.shadow = qgraphicsdropshadoweffect() # 设定一个阴影,半径为10,颜色为#444444,定位为0,0 self.shadow.setblurradius(10) self.shadow.setcolor(qcolor("#444444")) self.shadow.setoffset(0, 0) self.frame.setgraphicseffect(self.shadow) # 为frame设定阴影效果 # ------------------------------------------------ self.show() self.pushbutton_3.clicked.connect(self.close) # 关闭按钮 self.pushbutton_login.clicked.connect(self.do_login) # 登录按钮 # 以下是控制窗口移动的代码 def mousepressevent(self, event): # 鼠标左键按下时获取鼠标坐标,按下右键取消 if event.button() == qt.leftbutton: self.m_flag = true self.m_position = event.globalpos() - self.pos() event.accept() elif event.button() == qt.rightbutton: self.m_flag = false def mousemoveevent(self, qmouseevent): # 鼠标在按下左键的情况下移动时,根据坐标移动界面 if qt.leftbutton and self.m_flag: self.move(qmouseevent.globalpos() - self.m_position) qmouseevent.accept() def mousereleaseevent(self, qmouseevent): # 鼠标按键释放时,取消移动 self.m_flag = false # 登录事件 def do_login(self): username = self.lineedit_username.text() password = self.lineedit_password.text() if not username or not password: qmessagebox.warning(self, '警告', '用户名或密码不能为空', qmessagebox.yes) return else: identifier = self.submit.login(username, password) if not identifier: qmessagebox.warning(self, '警告', '用户名或密码错误', qmessagebox.yes) return self.hide() # 隐藏登录界面 my_submit_form = mysubmitform(self.submit, identifier) my_submit_form.exec_() # 显示主界面
业务操作
class mysubmitform(submitform_ui.ui_dialog_submit, qdialog): def __init__(self, submit: transitsubmit, identifier: str): super().__init__() ...... self.setupui(self) ...... self.progressbar.hide() # 关闭进度条显示 self.setwindowflags(qt.framelesswindowhint) # 无边框 self.setattribute(qt.wa_translucentbackground) # 设置窗口透明 self.pushbutton_mini.clicked.connect(self.showminimized) # 实现最小化 self.pushbutton_close.clicked.connect(self.close) # 实现关闭功能 ...... self.show() # 实现鼠标拖拽功能 def mousepressevent(self, event): self.pressx = event.x() # 记录鼠标按下的时候的坐标 self.pressy = event.y() def mousemoveevent(self, event): x = event.x() y = event.y() # 获取移动后的坐标 movex = x - self.pressx movey = y - self.pressy # 计算移动了多少 positionx = self.framegeometry().x() + movex positiony = self.framegeometry().y() + movey # 计算移动后主窗口在桌面的位置 self.move(positionx, positiony) # 移动主窗口 ......
这里多说一嘴,最开始这里我用的和登录一样,使用的是qframe,但是它没有exec()方法,登录成功后不能弹出,也可能是我知识有限,做不出来。通过分析源码,发现qdialog有这个方法,可以实现弹出,后来又改了用qdialog做了一个无边框界面。
剩下的打包就不多说了,网上的教程很多,我这里用的是—d打包,用了upx压缩,改了图标,打包完整个项目有50多m。
以上就是python怎么实现自动录入erp系统数据的详细内容。
