2024-09-12, 20:20-今日內容

Flink主要是做sql类似的事情，但是是用在实时的数据。 也就是realtime。 Apache flink就是用来处理和分析实时… 两种ML的模型可以直接帮我们在kinesis analytics直接用。必须记住 kinesis data analytics是吧kinesis 的stream的data和firehose的data 可以集合起来… S3 的bufferr 如果到达了指定大小，数据就会被传输 Hi Tatiana, Unity 里面的mathf 有clamp可以吧某个坐标控制在min和max的范围内， 如果超出了，就把它夹回去。 Xbox的手柄参考 Jax会帮你做一些矩阵的向量vector化：相当于你有10 行数据，然后150个neuron 100是你的feature。 你观察…

🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️下一個筆記🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️

Flink主要是做sql类似的事情，但是是用在实时的数据。 也就是realtime。 Apache flink就是用来处理和分析实时… Flink主要是做sql类似的事情，但是是用在实时的数据。 也就是realtime。 Apache flink就是用来处理和分析实时数据stream的。

🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️下一個筆記🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️

两种ML的模型可以直接帮我们在kinesis analytics直接用。必须记住

  1. random cut forest，来来检测不在数据中心的abnormal的。只能用在recent history哦 这是要考的
    1. Hotspots （用来找到数据集中的dense area）也就是聚类分析和模式识别

🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️下一個筆記🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️

kinesis data analytics是吧kinesis 的stream的data和firehose的data 可以集合起来… kinesis data analytics是吧kinesis 的stream的data和firehose的data 可以集合起来，还有s3的data， 用sql来进行实时数据和历史数据的join table得分析。

🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️下一個筆記🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️

S3 的bufferr 如果到达了指定大小，数据就会被传输 如果设定了buffer interval 即使没有到buffer size ，到了指定的interval 也会被传递。

🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️下一個筆記🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️

Hi Tatiana, I wanted to clarify a few points that I may not have communicated clearly in my previous email, and I apologize for any confusion this may have caused. I have successfully obtained my CAQ, which is valid from August 12, 2024, to November 30, 2025. Additionally, I submitted my study permit application on August 15, 2024, two weeks before my previous study permit is set to expire on August 31, 2024. I noticed that the CAQ and study permit information I provided to the university had not been updated, which may have led to some misunderstanding. I sincerely apologize for this oversight. Please find the updated CAQ attached to this email. However, I am concerned that my study permit might not be processed in time for September 15, 2024. Given the delays I encountered during the CAQ application process—particularly due to the more stringent financial scrutiny this year, which required me to reapply twice—I’m worried that this could impact the timing of my study permit approval. I would greatly appreciate your advice on whether there is any possibility to extend my study permit deadline, considering these circumstances. Thank you very much for your understanding and support!

🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️下一個筆記🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️

Unity 里面的mathf 有clamp可以吧某个坐标控制在min和max的范围内， 如果超出了，就把它夹回去。 transform.position = new Vector3(Mathf.Clamp(transform.position.x, -xBoundary, xBoundary), transform.position.y, 0);

🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️下一個筆記🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️

Xbox的手柄参考 A 按钮: joystick button 0 jumo B 按钮: joystick button 1 Back Y 按钮: joystick button 4 DreamNail X 按钮: joystick button 3 Attack RB ： button 7 LB： 6

左摇杆 X 轴: Horizontal 左摇杆 Y 轴: Vertical 左肩键: joystick button 4 右肩键: joystick button 5 左边按下：13 右边按下：14

🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️下一個筆記🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️🐿️

Jax会帮你做一些矩阵的向量vector化：相当于你有10 行数据，然后150个neuron 100是你的feature。 你观察… Jax会帮你做一些矩阵的向量vector化：相当于你有10 行数据，然后150个neuron 100是你的feature。 你观察他的vmap，他就很直观，rangneuron吃掉batched_x 然后就是每个batch对应的neuron的输出了。 如果想要rational， 可以说， 他把apply matric向量化了，也就是让他可以处理batched 的数据，本来是只有一个维度的数据，现在可以处理多维度。

mat = random.normal(key1, (150, 100)) batched_x = random.normal(key2, (10, 100))

def apply_matrix(x): return jnp.dot(mat, x)

@jit def vmap_batched_apply_matrix(batched_x): vmap(apply_matrix)(batched_x).shape

#匯總今日內容