用于为 AutoML Natural Language 创建 JSONL 训练文件的 Python 脚本

如何解决用于为 AutoML Natural Language 创建 JSONL 训练文件的 Python 脚本

我正在尝试为 AutoML Natural Language 创建 JSONL 训练文件，它在 docs

为了帮助您创建 JSONL 训练文件，AutoML Natural Language 提供了一个 Python script，可以将纯文本文件转换为格式正确的 JSONL 文件。查看脚本中的注释详情。

我试图关注评论，但我没有得到它们我试着用这个运行它

python jason.py C:\..dic.csv C:\..text.txt gs://mybucket

但它给了我：

(with 5 blank lines skipped)
Traceback (most recent call last):
  File "jason.py",line 688,in <module>
    main()
  File "jason.py",line 680,in main
    UploadFiles(annotated_files,FLAGS.target_gcs_directory)
  File "jason.py",line 636,in UploadFiles
    f.write(csv_line)
TypeError: write() argument must be str,not bytes

谁能帮我举例说明如何运行script

解决方法

使用python2创建的tool。您可以运行 python2 jsonl_converter.py -s sample_1.txt gs://your-bucket 以免编辑提供的代码。或者，如果您需要在 python3 中运行它，您可以按照@Justin Ezequiel 的建议进行操作。我只是使用了 -s 选项来自动拆分长文件。

使用 python 2 进行测试：

指定 GCS 存储桶中的 JSONL：