大佬们,为啥我stream load命令方式导入30g数据文件到doris,显示超时,导入不成功啊

提问者:帅平 问题分类:数据库
大佬们,为啥我stream load命令方式导入30g数据文件到doris,显示超时,导入不成功啊,使用的导入命令是:
 curl \
 -u root:000000 \
 -H "label:catalog_sales1" \
 -H "columns:cs_sold_date_sk,cs_sold_time_sk,cs_ship_date_sk,cs_bill_customer_sk,cs_bill_cdemo_sk,cs_bill_hdemo_sk,cs_bill_addr_sk,cs_ship_customer_sk,cs_ship_cdemo_sk,cs_ship_hdemo_sk,cs_ship_addr_sk,cs_call_center_sk,cs_catalog_page_sk,cs_ship_mode_sk,cs_warehouse_sk,cs_item_sk,cs_promo_sk,cs_order_number,cs_quantity,cs_wholesale_cost,cs_list_price,cs_sales_price,cs_ext_discount_amt,cs_ext_sales_price,cs_ext_wholesale_cost,cs_ext_list_price,cs_ext_tax,cs_coupon_amt,cs_ext_ship_cost,cs_net_paid,cs_net_paid_inc_tax,cs_net_paid_inc_ship,cs_net_paid_inc_ship_tax,cs_net_profit" \
 -H "send_batch_parallelism:5" \
 -H "timeout:3000" \
 -H "column_separator:|" \
 -H "enable_profile:true" \
 -T /home/data/tpc-ds/handled/catalog_sales.dat \
 http://10.25.26.2:8040/api/tpcds/catalog_sales/_stream_load
2 个回答
你我这辈子最的依靠
你我这辈子最的依靠
StreamLoad平均一分钟1-2G是没问题的呀
发布于:2年前 (2023-09-02) IP属地:四川省
心似狂潮
心似狂潮
超时时间调大一些就好了,导入数据大小也要改下,默认是10G
发布于:2年前 (2023-09-02) IP属地:四川省
我来回答