溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

Flink如何使用

發布時間:2021-12-31 13:53:21 來源:億速云 閱讀:216 作者:iii 欄目:大數據

本篇內容介紹了“Flink如何使用”的有關知識,在實際案例的操作過程中,不少人都會遇到這樣的困境,接下來就讓小編帶領大家學習一下如何處理這些情況吧!希望大家仔細閱讀,能夠學有所成!

1、首先拉取鏡像

docker pull flink

2、創建一個docker的network

docker network create flink-network

3、運行容器

docker run --rm --name=jobmanager --network flink-network --publish 8081:8081 --env FLINK_PROPERTIES="jobmanager.rpc.address: jobmanager" flink:latest jobmanager

4、然后直接訪問 http://localhost:8081/ 能訪問進去,就完事了。使用,等會用了再來補充。

用容器提交任務老半天提交不上去,后來在本地安裝了一個,由于是windos的,所有下載了一個1.9.3的版本下載的。

1、運行很簡單,直接找到bin目錄,然后雙擊運行即可。

2、然后提交任務的時候出現Entry Class沒有的話,表示沒有主目錄,也就是打包的時候沒有指定main函數導致的,配置中可以設置下主目錄即可。

3、然后提交任務,點擊show plan會報錯,提交任務也報錯??梢栽贘ob Manage菜單看到Logs點進去,拉到最下面發現有報錯信息,都是缺少類,這個狗日的問題困擾了老半天,百度找不到,我覺得應該是很低級的問題,可能很少犯(起碼版本問題,但實際上并不是)。后面找到些博客說是在lib下添加引用類,老子用的pom又不是直接引用的jar。后面發現flink有個lib文件夾,就把jar丟進去了,發現雖然還是缺少類,但是缺少的類變了。然后我嘗試打包所有的依賴項到一個jar,錯誤變了,但是依舊是缺少類。后面又找了很久的博客,忘記記下地址了,說打包時候并不是所有的依賴都要打包,然后給出了一個maven的打包信息,然后試了下,好了。只想說一句MMP,這問題應該很多人記錄才對,但是都沒有記錄,那我就記錄下吧。后面再補充報錯信息。

<build>    <plugins>        <plugin>            <groupId>org.apache.maven.plugins</groupId>            <artifactId>maven-shade-plugin</artifactId>            <version>3.0.0</version>            <executions>                <execution>                    <phase>package</phase>                    <goals>                        <goal>shade</goal>                    </goals>                    <configuration>                        <artifactSet>                            <excludes>                                <exclude>com.google.code.findbugs:jsr305</exclude>                                <exclude>org.slf4j:*</exclude>                                <exclude>log4j:*</exclude>                            </excludes>                        </artifactSet>                        <filters>                            <filter>                                <!-- Do not copy the signatures in the META-INF folder.                                Otherwise, this might cause SecurityExceptions when using the JAR. -->                                <artifact>*:*</artifact>                                <excludes>                                    <exclude>META-INF/*.SF</exclude>                                    <exclude>META-INF/*.DSA</exclude>                                    <exclude>META-INF/*.RSA</exclude>                                </excludes>                            </filter>                        </filters>                        <transformers>                            <transformer implementation="org.apache.maven.plugins.shade.resource.ManifestResourceTransformer">                                <mainClass>com.uwith.Application</mainClass>                            </transformer>                        </transformers>                    </configuration>                </execution>            </executions>        </plugin>    </plugins></build>

“Flink如何使用”的內容就介紹到這里了,感謝大家的閱讀。如果想了解更多行業相關的知識可以關注億速云網站,小編將為大家輸出更多高質量的實用文章!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

亚洲午夜精品一区二区_中文无码日韩欧免_久久香蕉精品视频_欧美主播一区二区三区美女