【pyhon笔记】钱迹x信用卡辅助对账(个人用)

背景

记账强迫症患者,苦于账本上的信用卡额度总跟实际的对不上,python小白的我决定写个小demo辅助对账。

涉及

  • python BeautifulSoup
  • SQLite

准备

  • 信用卡账单eml(这里用的J行)
  • 钱迹账单csv

关键步骤

解析并处理信用卡账单

使用BeautifulSoup组件,解析账单eml
    # 读取账单eml
    eml = open(source_path).read()
    # 使用Parser解析eml
    content = Parser().parsestr(eml)
    bill = ""
    # 深度优先遍历
    for par in content.walk():
        # 消息的有效内容是一个子EmailMessage对象的列表,则返回True,否则返回False
        if not par.is_multipart():
            content = par.get_payload(decode=True)
            if len(content.strip()) != 0:
                # 这里,会得到唯一的一个包含账单的html字符串
                bill = content.decode(encoding='gbk')
    # 这里需要重点注意
    # 使用BeautifulSoup转化前,需要事先将换行符去掉
    # 否则,带有换行符节点的标签对象会解析不出来,直接变成None
    data = BeautifulSoup(bill.replace('<br>', '').replace('<br/>', ''), "html.parser")
搜索账单列表。通过分析账单,还款明细的开头如下所示是一个id为takeList的tbody
<tbody id=takeList>

然后,这个tbody还会包含一个唯一的tbody,这个tbody下面就是一条一条的还款明细了

# 得到还款明细列表
repayList = data.find("tbody", id="repayList").find("tbody")

同理,也能得到消费列表

takeList = data.find("tbody", id="takeList").find("tbody")
逐条解析消费明细,得到交易列表
    bills = []
    repayAmount = Decimal(0.00)
    for repay in repayList.children:
        # NavigableString类型,就是没有子节点的字符串
        # BeautifulSoup会将注释也解析进去,主要就是为了排除注释
        if not isinstance(repay, NavigableString):
            bill = {}
            bill["type"] = "repay"
            for item in repay.children:
                # 匹配日期 MM/dd
                if re.match("\d\d/\d\d", str(item.string), flags=0):
                    bill["time"] = year + "-" + str(item.string).replace("/", "-")
                # 匹配金额
                elif re.match("CNY\d*\.\d*", str(item.string), flags=0):
                    amount = str(item.string)[3:]
                    bill["amount"] = amount
                    repayAmount += Decimal(float(amount))
            bills.append(bill)

为了之后方面对账,就将上面的数据处理成了如下所示格式

{
    "month": "2023-02",
    "name": "信用卡08月",
    "bills": {
        "2022-02-22": [{
            "type": "repay",
            "channel": "BCM",
            "time": "2022-02-22",
            "amount": "2.00"
        }]
    },
    "size": 1,
    "start": "17"
}

处理钱迹账单

导入SQLite

为了方便搜索数据,我用钱迹账单csv生成了SQLite数据库文件

搜索钱迹数据
    current = current + relativedelta(days=1)
    endtime = current.strftime("%Y-%m-%d") + " 00:00:00"
    conn = sqlite3.connect(db_dir)
    cur = conn.cursor()      
    cur.execute("select *from qian_ji qj where 时间 >= '" + starttime + "' and 时间 < '" + endtime + "' and 账户1 ='" + 账户名称 + "'")
比对数据

因为信用卡的账单是一个月一个,所以我这边也是一次比对一个月。
从账单日第一天开始,一直到下个月的账单日前一天,逐日分别计算当天信用卡和钱迹的交易净值并比对

感想

算是花了不少时间,实际最后也没做出啥像样的东西,但至少整个过程下来,也是学到了不少东西。
至少,目的达成了————成功阻止了我自己手动去改账本上的账户金额。
后续再继续研究下其他渠道的账单。

热门相关:骑士归来   时间都知道(唐嫣、窦骁、杨烁主演)   大神你人设崩了   大神你人设崩了   豪门闪婚:帝少的神秘冷妻