Skip to content

Instantly share code, notes, and snippets.

View OneAdder's full-sized avatar

Michael Voronov OneAdder

  • Yerevan, Armenia
View GitHub Profile
program simple_2d
use nf, only: input, network, sgd, linear2d, mse, flatten
implicit none
type(network) :: net
real :: x(3, 4) = reshape(&
[0.1, 0.1, 0.1, 0.1, 0.1, 0.1, 0.2, 0.2, 0.2, 0.2, 0.2, 0.2],&
[3, 4])
real :: y(3) = [0.12, 0.1, 0.3]
type(mse) :: mean_se = mse()
integer, parameter :: num_iterations = 500
@OneAdder
OneAdder / reference.py
Last active February 14, 2025 17:29
MultiHead Attention (Reference Implementation)
import torch
import numpy as np
mha = torch.nn.MultiheadAttention(num_heads=2, embed_dim=4, batch_first=True)
mha.in_proj_weight.data = torch.zeros(12, 4) + 0.1
mha.in_proj_bias.data = torch.zeros(12) + 0.11
mha.out_proj.weight.data = torch.zeros(4, 4) + 0.1
mha.out_proj.bias.data = torch.zeros(4) + 0.11
Информационная поддержка KWin:
Следующая информация должна быть предоставлена при запросе поддержки,например, на http://forum.kde.org.
Она предоставляет сведения о текущем запущенном экземпляре программы, о том, какие опции используются,
какой OpenGL драйвер и эффекты запущены.
Пожалуйста, размещайте информацию, приведенную ниже , в сервис Pastebin,
например, на http://paste.kde.org вместо вставки напрямую в темы форума .
==========================
Version
[2019-03-06 17:30:44] Loaded 0 apps from install folder "/home/misha/.steam/debian-installation/steamapps\appmanifest_*.acf".
[2019-03-06 17:31:29] Got 100 content servers from directory
[2019-03-06 17:32:14] Loaded 0 apps from install folder "/home/misha/.steam/debian-installation/steamapps\appmanifest_*.acf".
[2019-03-06 17:32:41] AppID 271590 state changed : Update Required,
[2019-03-06 17:32:41] AppID 228980 state changed : Update Required,Shared Only,
[2019-03-06 17:32:41] Dependency added: parent 228980, child 271590, depot 228984
Computer Information:
Manufacturer: Unknown
Model: Unknown
Form Factor: Desktop
No Touch Input Detected
Processor Information:
CPU Vendor: AuthenticAMD
CPU Brand: AMD Ryzen 3 2200G with Radeon Vega Graphics
CPU Family: 0x17