0%

spark run

spark核心组件

  • driver(计算)
  • executor(计算)
  • master(resource manage 资源)
  • worker(node manage 资源)
  • application master(解耦资源和计算)

    spark核心概念

  • Executor(一个JVM进程)
    • num executors(executor数量)
    • executors memory(单个executor内存)
    • executors cores(单个executors cpu核心数)
  • DAG
    • 作用(调度)
  • Yarn flow
    spark on yarn
  • Yarn 运行模式(Driver运行节点位置不同)
    • client
    • cluster

spark core coding

data struct(计算机存储组织数据的方式)

  • rdd
  • accumulator
  • broadcast

    分布式计算

  • 数据拆分
  • 逻辑一样
  • task(数据+逻辑)传给Executor

    RDD

Flutter是什么

Flutter is Google’s SDK for crafting beautiful, fast user experiences for mobile, web and desktop from a single codebase.
Flutter works with existing code, is used by developers and organizations around the world, and is free and open source.
Flutter是基于Dart语言的.

阅读全文 »

2020年5月1日《我放心啦》

早上牛婆婆打电话说想送妹妹过来跟牛牛一起玩一下,但是牛牛有点怕小妹妹,因为小妹妹会抓牛牛的头发。先跟牛牛说了一下情况,让他有个心里准备。
中午的时候妹妹还没有来,打电话问了一下什么情况,牛婆婆说不过来了。
此时牛牛从外面玩完回来了,立马跟牛牛说:“牛牛,放心啦,妹妹不来了。”
奶奶问:“牛牛呀?放心什么呀?谁放心呀?”
牛牛两手拍拍肚皮开心说:“牛牛放心啦。”

阅读全文 »

2020年04月《韭菜》

今天炒了一份韭菜炒蛋,试问一下牛牛吃不吃韭菜。这娃子每天就是只吃蔬菜不吃肉的,想问一下他吃不吃韭菜能顺便带点鸡蛋,让他吃进去。
他看着韭菜说:“这个不是韭(九)菜,这个是十菜。”

阅读全文 »