大佬们,为啥我stream load命令方式导入30g数据文件到doris,显示超时,导入不成功啊
大佬们,为啥我stream load命令方式导入30g数据文件到doris,显示超时,导入不成功啊,使用的导入命令是:
curl \
-u root:000000 \
-H "label:catalog_sales1" \
-H "columns:cs_sold_date_sk,cs_sold_time_sk,cs_ship_date_sk,cs_bill_customer_sk,cs_bill_cdemo_sk,cs_bill_hdemo_sk,cs_bill_addr_sk,cs_ship_customer_sk,cs_ship_cdemo_sk,cs_ship_hdemo_sk,cs_ship_addr_sk,cs_call_center_sk,cs_catalog_page_sk,cs_ship_mode_sk,cs_warehouse_sk,cs_item_sk,cs_promo_sk,cs_order_number,cs_quantity,cs_wholesale_cost,cs_list_price,cs_sales_price,cs_ext_discount_amt,cs_ext_sales_price,cs_ext_wholesale_cost,cs_ext_list_price,cs_ext_tax,cs_coupon_amt,cs_ext_ship_cost,cs_net_paid,cs_net_paid_inc_tax,cs_net_paid_inc_ship,cs_net_paid_inc_ship_tax,cs_net_profit" \
-H "send_batch_parallelism:5" \
-H "timeout:3000" \
-H "column_separator:|" \
-H "enable_profile:true" \
-T /home/data/tpc-ds/handled/catalog_sales.dat \
http://10.25.26.2:8040/api/tpcds/catalog_sales/_stream_load
发布于:2年前 (2023-09-02) IP属地:四川省
2 个回答
StreamLoad平均一分钟1-2G是没问题的呀
发布于:2年前 (2023-09-02) IP属地:四川省
超时时间调大一些就好了,导入数据大小也要改下,默认是10G


发布于:2年前 (2023-09-02) IP属地:四川省
我来回答
您需要 登录 后回答此问题!