dolphinscheduler 1.3.8 使用AWS S3作为资源管理

dolphinscheduler 1.3.8 使用AWS S3作为资源管理

按照教程来,修改了common.properties

resource.storage.type=S3
fs.defaultFS=s3a://dolphinscheduler
fs.s3a.endpoint=s3://dolphin-scheduler/
fs.s3a.access.key=XXX
fs.s3a.secret.key=XXX

尝试创建文件夹,失败,报的错是

Caused by: org.apache.http.HttpException: Scheme 's3' not registered.
    at org.apache.http.impl.conn.DefaultHttpRoutePlanner.determineRoute(DefaultHttpRoutePlanner.java:109)
    at org.apache.http.impl.client.DefaultRequestDirector.determineRoute(DefaultRequestDirector.java:762)
    at org.apache.http.impl.client.DefaultRequestDirector.execute(DefaultRequestDirector.java:381)
    at org.apache.http.impl.client.AbstractHttpClient.doExecute(AbstractHttpClient.java:882)
    ... 54 more

修改配置:

resource.storage.type=S3
fs.defaultFS=s3a://dolphinscheduler   # 这儿表示桶名
fs.s3a.endpoint=https://s3.cn-northwest-1.amazonaws.com.cn
fs.s3a.access.key=XXX
fs.s3a.secret.key=XXX

done。

©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容