Pythonレシピのエラーについて

優樹
優樹 Registered Posts: 4 ✭✭✭

Transformersを使用して自然言語処理を行います。

新規作成で作成したJupiter Notebook 上で実行できたスクリプトが、Python レシピにしてフロー上で実行するとエラーになります。

原因がわかりません。

スクリーンショット 2024-05-31 164223.png

Best Answer

  • Tsuyoshi
    Tsuyoshi Dataiker, PartnerAdmin, Dataiku DSS Core Designer, Dataiku DSS ML Practitioner, Dataiku DSS Adv Designer, Registered Posts: 137 Dataiker
    Answer ✓

    @y_kawauchi
    さん、ご質問ありがとうございます!

    エラーメッセージの内容としては、Huggingfaceモデルの取得時にパーミッション関連のエラーが発生しているようです。

    ご連絡をいただきましたPythonコードに関連して、Dataikuの以下ドキュメントでは、Code Envの「initialization script」を利用して、モデルの格納ディレクトリにパーミッションを設定する例を示しています。

    Dataikuディベロッパーガイド:「Load and re-use a Hugging Face model」

    https://developer.dataiku.com/latest/tutorials/machine-learning/code-env-resources/hf-resources/index.html

    上記ドキュメントのような対応を行うことで、エラーの解消が可能かどうか、ご確認をいただけますと幸いです。

Answers

Setup Info
    Tags
      Help me…