本篇內容介紹了“Flink如何使用”的有關知識,在實際案例的操作過程中,不少人都會遇到這樣的困境,接下來就讓小編帶領大家學習一下如何處理這些情況吧!希望大家仔細閱讀,能夠學有所成!
1、首先拉取鏡像
docker pull flink
2、創建一個docker的network
docker network create flink-network
3、運行容器
docker run --rm --name=jobmanager --network flink-network --publish 8081:8081 --env FLINK_PROPERTIES="jobmanager.rpc.address: jobmanager" flink:latest jobmanager
4、然后直接訪問 http://localhost:8081/ 能訪問進去,就完事了。使用,等會用了再來補充。
用容器提交任務老半天提交不上去,后來在本地安裝了一個,由于是windos的,所有下載了一個1.9.3的版本下載的。
1、運行很簡單,直接找到bin目錄,然后雙擊運行即可。
2、然后提交任務的時候出現Entry Class沒有的話,表示沒有主目錄,也就是打包的時候沒有指定main函數導致的,配置中可以設置下主目錄即可。
3、然后提交任務,點擊show plan會報錯,提交任務也報錯??梢栽贘ob Manage菜單看到Logs點進去,拉到最下面發現有報錯信息,都是缺少類,這個狗日的問題困擾了老半天,百度找不到,我覺得應該是很低級的問題,可能很少犯(起碼版本問題,但實際上并不是)。后面找到些博客說是在lib下添加引用類,老子用的pom又不是直接引用的jar。后面發現flink有個lib文件夾,就把jar丟進去了,發現雖然還是缺少類,但是缺少的類變了。然后我嘗試打包所有的依賴項到一個jar,錯誤變了,但是依舊是缺少類。后面又找了很久的博客,忘記記下地址了,說打包時候并不是所有的依賴都要打包,然后給出了一個maven的打包信息,然后試了下,好了。只想說一句MMP,這問題應該很多人記錄才對,但是都沒有記錄,那我就記錄下吧。后面再補充報錯信息。
<build> <plugins> <plugin> <groupId>org.apache.maven.plugins</groupId> <artifactId>maven-shade-plugin</artifactId> <version>3.0.0</version> <executions> <execution> <phase>package</phase> <goals> <goal>shade</goal> </goals> <configuration> <artifactSet> <excludes> <exclude>com.google.code.findbugs:jsr305</exclude> <exclude>org.slf4j:*</exclude> <exclude>log4j:*</exclude> </excludes> </artifactSet> <filters> <filter> <!-- Do not copy the signatures in the META-INF folder. Otherwise, this might cause SecurityExceptions when using the JAR. --> <artifact>*:*</artifact> <excludes> <exclude>META-INF/*.SF</exclude> <exclude>META-INF/*.DSA</exclude> <exclude>META-INF/*.RSA</exclude> </excludes> </filter> </filters> <transformers> <transformer implementation="org.apache.maven.plugins.shade.resource.ManifestResourceTransformer"> <mainClass>com.uwith.Application</mainClass> </transformer> </transformers> </configuration> </execution> </executions> </plugin> </plugins></build>
“Flink如何使用”的內容就介紹到這里了,感謝大家的閱讀。如果想了解更多行業相關的知識可以關注億速云網站,小編將為大家輸出更多高質量的實用文章!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。