做job导入的时候,两条数据可以正常导入,数据可以正常查到,但是五千万条数据的时候导入没有报错,数据却查找不到,这是为什么
我的cookie设置是这样的’’’{“session”:“requests.Session()”,“graph”:“social”,“properties”:“person”}’’’
recursive delete /tigergraph/dict/objects/__services/RESTPP_LOADER/_runtime_nodes/RESTPP_LOADER_1_1 failed.pathcode:1 Rc:no node
这样的报错是啥意思呀
@kenneth 五千万的情况下 是都没有导入进去 还是有一部分没有导入成功 执行每一个loading job 任务的时候 都会生成对应的日志 路径 比如 /home/tigergraph/tigergraph/logs/restpp/restpp_loader_logs
五千万数据都没导入
invalidAttributeLinesData:["1025,person,MRDDR,18,man\r\n,"1026,person,MRDDR,18,man\r\n…
这是数据源的一行数据嘛?
对,五千万行只有前面的序号有变化
附上造数语句:
with open(’/home/tigergraph/wjt/newData.csv’, ‘w’, newline=’’) as csv_file:
csv_writer = csv.writer(csv_file, dialect=‘excel’,lineterminator=’\n’)
data = [[]]
data[0] = [‘user_id’,‘name’,‘age’,‘gender’]
for i in range(0, 50000001):
nullData = []
nullData.append(i)
nullData.append(“person”)
nullData.append(“MRDDR”)
nullData.append(“18”)
nullData.append(“man”)
data.extend(nullData)
if i % 10000 == 0:
del data[0]
csv_writer.writerows(data)
data=[[]]
CREATE LOADING JOB load_social FOR GRAPH social {
DEFINE FILENAME file1="/home/tigergraph/wjt/newData.csv";
LOAD file1 TO VERTEX person VALUES ($"user_id", $"name", $"age", $"gender") USING header="true", separator=",";
}
END
使用run loading job的方式