每日总结
做了大数据的实验
flink
Flink实验是一种学习和应用大数据处理框架Apache Flink的方法。初级的Flink编程实践主要是通过实验来掌握基本的Flink编程方法和IntelliJ IDEA工具编写Flink程序的技巧。在实验过程中,你可以在个人电脑上安装IntelliJ IDEA,然后使用这个工具来开发WordCount程序,并将程序打包成JAR文件提交到服务器上的Flink环境中运行。
此外,Flink的JobManager会在8081端口上启动一个Web前端,你可以在浏览器中输入“http://localhost:8081”来访问。对于初学者来说,Flink安装包中自带的测试样例是一个非常好的起点,你可以尝试运行WordCount样例程序来测试Flink的运行效果。
关于Flink的简介,它起源于Stratosphere项目,该项目是柏林几所大学和欧洲其他大学在2010到2014年共同进行的研究项目。2014年4月,Stratosphere的项目代码被复制并捐赠给了Apache软件基金会,同年12月,Flink成为了Apache软件基金会的顶级项目。"Flink"这个名字在德语中表示快速和灵巧,项目采用一只松鼠的彩色图案作为logo,这不仅是因为松鼠具有快速和灵巧的特点,还因为柏林的松鼠有一种迷人的红棕色。