设置请求发往哪个D节点的server IP。
void SetDTarget(std::string &dTarget);
参数 |
是否必选 |
说明 |
取值要求 |
---|---|---|---|
dTarget |
是 |
设置做完全量推理发往D节点的ip地址。 |
字符串类型,server ip地址。 |
mindie_llm::InferRequestId runtimeReqId(0); std::shared_ptr<mindie_llm::InferRequest> runtimeRequest(runtimeReqId); string serverIp = ""; runtimeRequest->SetDTarget(serverIp);
无。