广东省数据知识产权存证登记平台
登记信息
全国车型库通用清洗数据 已登记
  • 数据申请号:

    粤2023122800151

  • 数据登记号:

    SZ2024320001214.X

  • 关键词:

    新车;数据清洗

  • 登记时间:

    2024-04-02

  • 平台证书编号:

    20240344000001214

  • 数据处理者:

    暂无

  • 服务机构:

    暂无

  • 登记主体:

    广东数鼎科技有限公司

  • 法院编号:

    广州互联网法院 - f32d6b84dc3691c0db7bfac2655acda80fa09df84b1fc7cc37cf68584c22e1c9-749fc1a4;legalxchain

区块链信息
  • 上链时间:

    2024-03-29

  • 所属区块链:

    司法联盟链·广东省知识产权保护中心

  • 证据指纹:

    fd14c75113c1c6e7b0edac6fcf663e007821cbb52c13c26a35b638f93142cc4acca9961e2d5e14bd1ffea3a0370750648ab49961a540bc340aa8d3b24498b202

  • 区块链存证证书编号:

    LXM-GDIPI-23202403295071665275

数据信息
数据简介
该数据是用于对国内不同新车网站的品牌、车型、型号、配置数据进行统一清洗并入库,是汽车主数据数据来源和数据质量保证的重要步骤。主要内容为根据不同新车网站的数据按品牌、车型、型号、配置这四个维度进行统一的数据清洗,包括统一字段命名、统一数据类型、统一数据去重规则、统一字段清洗规则。该数据可以用于国内所有新车网站的品牌、车型、型号、配置数据进行统一清洗工作,从而为汽车主数据提供高质量的数据来源。
  • 数据来源:

    公开采集

  • 数据所属行业分类:

    M74 专业技术服务业

数据处理规则说明
新车车型库数据包括品牌、车型、型号、型号配置这四类数据;首先,对新车车型库数据源进行初步清洗,包括去除无效数据、异常指导价、异常上市退市时间、异常配置项,例如型号相关信息缺失、异常指导价等;其次,对品牌、车型、型号、型号配置数据进行统一字段命名、统一数据类型、统一数据去重规则、统一字段清洗规则;接着,对型号数据进行清洗和补数,msrp字段数据清洗规则:将单位统一为’元’、当销售状态为‘将售’时,将msrp的值设置为预售价;对startTime进行清洗,当startTime小于”19000101”时,将startTime置为null;对stopTime进行清洗,当销售状态为‘停售’时,将stopTime的值设置为数据采集的时间,当modelYear大于stopTime时,将stopTime置为null。最后,对数据新增量进行监控,当品牌连续三期数据新增量小于1时或车型连续三期数据新增量小于3时或型号连续三期数据新增量小于10时或型号配置连续三期数据新增量小于1000时,进行预警并发送钉钉通知相关人员;该过程最终产出了新车车型库品牌、车型、型号、型号配置四张表。
应用场景描述
服务于汽车主数据数据的更新。基于对车型库包含的品牌、车型、型号、型号配置数据进行清洗,保障汽车主数据的实时更新调整,为公司业务提供标准统一、时效、高质量的主数据服务。
  • 数据格式:

    csv

  • 数据更新频率:

    周更新

  • 数据量:

    64000

样例数据
batch_id version_id version_name model_id engine driver model_year emissions on_sales msrp create_time stop_time start_time 84573 1000 2004款 1.6L 手动标准型 series_51 1.6升 112马力 前置前驱 5挡手动 2004 1.6升 停售 112800 2023/12/15 03:54 20230623 84573 10000 2011款 基本型 series_2339 2011 停售 2023/12/15 03:37 20230623 84573 1000001 2011款 1.2L基本型 series_2451 1.2升 84马力 中置后驱 5挡手动 2011 1.2升 停售 40300 2023/12/15 03:54 20230623 20111101 84573 1000002 2011款 1.2L标准型 series_2451 1.2升 84马力 中置后驱 5挡手动 2011 1.2升 停售 72800 2023
数据结构样例
序号 列名 类型 长度 可空 主键 备注 字段示例 1 batch_id int 10 否 否 批次id 84573 2 version_id int 10 否 是 型号id 1000014 3 version_name varchar 50 否 否 型号名称 2010款 1.0L新版立业型短车身 4 model_id varchar 50 否 否 车型id series_2456 5 engine varchar 50 否 否 引擎 1.0升 61马力
数据状态
  • 2024-04-02

    数据知识产权登记完成