Survey banner
The Dataiku Community is moving to a new home! We are temporary in read only mode: LEARN MORE

Pythonレシピのエラーについて

Solved!
y_kawauchi
Level 1
Pythonレシピのエラーについて

Transformersを使用して自然言語処理を行います。

新規作成で作成したJupiter Notebook 上で実行できたスクリプトが、Python レシピにしてフロー上で実行するとエラーになります。

原因がわかりません。

 

スクリーンショット 2024-05-31 164223.png

1 Solution
TsuyoshiK
Dataiker

@y_kawauchi さん、ご質問ありがとうございます!

エラーメッセージの内容としては、Huggingfaceモデルの取得時にパーミッション関連のエラーが発生しているようです。

ご連絡をいただきましたPythonコードに関連して、Dataikuの以下ドキュメントでは、Code Envの「initialization script」を利用して、モデルの格納ディレクトリにパーミッションを設定する例を示しています。

Dataikuディベロッパーガイド:「Load and re-use a Hugging Face model」

https://developer.dataiku.com/latest/tutorials/machine-learning/code-env-resources/hf-resources/inde...

上記ドキュメントのような対応を行うことで、エラーの解消が可能かどうか、ご確認をいただけますと幸いです。

View solution in original post

0 Kudos
2 Replies
TsuyoshiK
Dataiker

@y_kawauchi さん、ご質問ありがとうございます!

エラーメッセージの内容としては、Huggingfaceモデルの取得時にパーミッション関連のエラーが発生しているようです。

ご連絡をいただきましたPythonコードに関連して、Dataikuの以下ドキュメントでは、Code Envの「initialization script」を利用して、モデルの格納ディレクトリにパーミッションを設定する例を示しています。

Dataikuディベロッパーガイド:「Load and re-use a Hugging Face model」

https://developer.dataiku.com/latest/tutorials/machine-learning/code-env-resources/hf-resources/inde...

上記ドキュメントのような対応を行うことで、エラーの解消が可能かどうか、ご確認をいただけますと幸いです。

0 Kudos
y_kawauchi
Level 1
Author

@TsuyoshiK 

initialization scriptの部分をコピペし、必要な個所を編集したところうまく動きました。

ご対応いただきありがとうございます。