bugfix> python > 投稿

みなさん、こんにちは。Amazonの電子機器に基づくレビューを使用して、Tensorflowを使用して感情分析を開発しています。コードで、エラーが発生しました。テンソルフローデータセットを使用して一部のテキストを取得しましたが、取得できませんでした。 以下のエラーを含むコードの一部を次に示します。

tokenizer = tfds.features.text.Tokenizer()
vocabulary_set = set()
for _, reviews in train_dataset.enumerate():
review_text = reviews['data']
reviews_tokens = tokenizer.tokenize(review_text.get('review_body').numpy())
vocabulary_set.update(reviews_tokens)
vocab_size = len(vocabulary_set)
vocab_size

ここから得たエラーは属性エラーです

AttributeError                            Traceback (most recent call last)
<ipython-input-17-1c32dce13853> in <module>()
----> 1 tokenizer = tfds.features.text.Tokenizer()
AttributeError: module 'tensorflow_datasets.core.features' has no attribute 'text'

このエラーを解決するにはどうすればよいですか?ありがとうございました