StringSplit

Разделить элементы исходного кода на основе sep в SparseTensor.

Пусть N — размер источника (обычно N — размер партии). Разделите каждый элемент source на основе sep и верните SparseTensor, содержащий токены разделения. Пустые токены игнорируются.

Например, N = 2, source[0] — «привет, мир», а source[1] — «ab c», тогда результат будет такой:

st.indices = [0, 0;
               0, 1;
               1, 0;
               1, 1;
               1, 2]
 st.shape = [2, 3]
 st.values = ['hello', 'world', 'a', 'b', 'c']
 

Обратите внимание, что вышеупомянутое поведение соответствует str.split Python.