StringSplit

একটি `SparseTensor`-এ `sep`-এর উপর ভিত্তি করে `উৎস`-এর উপাদানগুলিকে ভাগ করুন।

ধরুন N হল উৎসের আকার (সাধারণত N হবে ব্যাচের আকার)। `সেপ` এর উপর ভিত্তি করে `উৎস` এর প্রতিটি উপাদানকে বিভক্ত করুন এবং বিভক্ত টোকেন সমন্বিত একটি `স্পার্স টেনসর` ফেরত দিন। খালি টোকেন উপেক্ষা করা হয়.

উদাহরণ স্বরূপ, N = 2, উৎস[0] হল 'হ্যালো ওয়ার্ল্ড' এবং উৎস [1] হল 'ab c', তাহলে আউটপুট হবে

st.indices = [0, 0;
               0, 1;
               1, 0;
               1, 1;
               1, 2]
 st.shape = [2, 3]
 st.values = ['hello', 'world', 'a', 'b', 'c']
 

যদি `sep` দেওয়া হয়, পরপর সীমানাকে একত্রে গোষ্ঠীভুক্ত করা হয় না এবং খালি স্ট্রিং সীমাবদ্ধ বলে মনে করা হয়। উদাহরণস্বরূপ, `"1<>2<><>3"` এর উত্স এবং `"<>"` এর sep `["1", "2", "", "3"]` প্রদান করে। যদি `সেপ` কোনোটিই না হয় বা কোনো খালি স্ট্রিং না হয়, পরপর সাদা স্থানকে একটি একক বিভাজক হিসেবে গণ্য করা হয়, এবং স্ট্রিংটির অগ্রবর্তী বা পিছনের সাদা স্থান থাকলে স্টার্টারের শেষে কোনো খালি স্ট্রিং থাকবে না।

উল্লেখ্য যে উপরে উল্লিখিত আচরণ python এর str.split এর সাথে মেলে।