2023年第四届MathorCup高校数学建模挑战赛——大数据竞赛B题 实现代码

根据之前发布的思路 第一步 进行数据合并

python 复制代码
import pandas as pd

# 读取所有附件的数据
data1 = pd.read_excel('附件一.xlsx')
data2 = pd.read_excel('附件二.xlsx')
data3 = pd.read_excel('附件三.xlsx')
data4 = pd.read_excel('附件四.xlsx')

# 根据商品编码将附件一和附件二连接
combinedData = pd.merge(data1, data2, on='商品编码', how='inner')

# 根据商家编码将上述的结果和附件三连接
combinedData = pd.merge(combinedData, data3, on='商家编码', how='inner')

# 根据仓库编码将上述的结果和附件四连接
combinedData = pd.merge(combinedData, data4, on='仓库编码', how='inner')

# 保存合并后的数据到新的Excel文件中
combinedData.to_excel('合并后的数据.xlsx', index=False, engine='openpyxl')

或者 matlab

Matlab 复制代码
% 读取所有附件的数据
data1 = readtable('附件一.xlsx');
data2 = readtable('附件二.xlsx');
data3 = readtable('附件三.xlsx');
data4 = readtable('附件四.xlsx');

% 根据商品编码将附件一和附件二连接
combinedData = innerjoin(data1, data2, 'Keys', '商品编码');

% 根据商家编码将上述的结果和附件三连接
combinedData = innerjoin(combinedData, data3, 'Keys', '商家编码');

% 根据仓库编码将上述的结果和附件四连接
combinedData = innerjoin(combinedData, data4, 'Keys', '仓库编码');

% 保存合并后的数据到新的Excel文件中
writetable(combinedData, '合并后的数据.xlsx');

之后就是对于数据的 转码 将文本数据转化为数字

py代码

python 复制代码
# 定义数据
data = {
    "商家编码": {"1": "seller_10", "2": "seller_11", "3": "seller_12", "4": "seller_13", ...},
    "商品编码": {"1": "product_1914", "2": "product_1915", "3": "product_1916", ...},
    "仓库编码": {"1": "wh_1", "2": "wh_10", "3": "wh_11", ...},
    "商品一级分类": {"1": "手机通讯", "2": "食品饮料", "3": "家庭清洁/纸品", ...},
    "商品二级分类": {"1": "手机配件", "2": "粮油调味", "3": "进口食品", ...},
    "商品三级分类": {"1": "手机配件_5", "2": "粮油调味_1", "3": "进口食品_1", ...},
    "商家分类": {"1": "手机通讯", "2": "食品饮料", "3": "美妆护肤", ...},
    "库存分类": {"1": "A", "2": "B", "3": "D", ...},
    "商家规模": {"1": "Large", "2": "Special", "3": "Small", ...},
    "仓库类别": {"1": "Large", "2": "Special", "3": "Small", ...}
}

def transcode(record):
    for key, value in record.items():
        if value in data[key]:
            record[key] = data[key][value]
    return record

# 示例
record = {
    "商家编码": "1",
    "商品编码": "2",
    "仓库编码": "3",
    ...
}

transcoded_record = transcode(record)
print(transcoded_record)

matalb

python 复制代码
% 假设原始数据存储在一个cell array中,名为data
% data = {...};  % 你需要将这里填充为你的数据

% 定义一个map来存储转码信息
map = containers.Map();

% 定义你的转码数据
sellers = {'seller_10', 'seller_11', 'seller_12', 'seller_13', ...};
products = {'product_1914', 'product_1915', 'product_1916', 'product_1917', ...};
warehouses = {'wh_1', 'wh_10', 'wh_11', 'wh_12', ...};
% ... 添加其他数据

% 填充map
for i = 1:length(sellers)
    map(sellers{i}) = i;
end

for i = 1:length(products)
    map(products{i}) = i;
end

for i = 1:length(warehouses)
    map(warehouses{i}) = i;
end
% ... 同样地,为其他数据填充map

% 对原始数据进行转码
rows, cols = size(data);
for r = 1:rows
    for c = 1:cols
        if isKey(map, data{r, c})
            data{r, c} = map(data{r, c});
        end
    end
end

% 输出转码后的数据
disp(data);

然后 就可以进行后续分析了

相关推荐
小高不会迪斯科1 小时前
MIT 6.824学习心得(1) 浅谈分布式系统概论与MapReduce
大数据·mapreduce
TDengine (老段)1 小时前
使用 StatsD 向 TDengine 写入
java·大数据·数据库·时序数据库·iot·tdengine·涛思数据
Gauss松鼠会1 小时前
GaussDB权限管理:从RBAC到精细化控制的企业级安全实践
大数据·数据库·安全·database·gaussdb
时序数据说1 小时前
时序数据库IoTDB用户自定义函数(UDF)使用指南
大数据·数据库·物联网·开源·时序数据库·iotdb
大师兄带你刨AI2 小时前
「AI产业」| 《中国信通院&华为:智能体技术和应用研究报告》
大数据·人工智能
武子康2 小时前
大数据-31 ZooKeeper 内部原理 Leader选举 ZAB协议
大数据·后端·zookeeper
zkmall2 小时前
ZKmall模块商城批发电商平台搭建方案,多商户支持 + 订单管理功能全覆盖
大数据·人工智能
Edingbrugh.南空4 小时前
Flink Postgres CDC 环境配置与验证
大数据·flink
isNotNullX4 小时前
什么是数据分析?常见方法全解析
大数据·数据库·数据仓库·人工智能·数据分析
小袁拒绝摆烂4 小时前
ElasticSearch快速入门-1
大数据·elasticsearch·搜索引擎