Про нейронки

[vitus_wagner]

Я когда-то говорил что через несколько лет появится софт для нейросетей, способный эффективно работать на компьютерах (и даже мобильных телефонах) сегодняшнего дня. Т.е. на тех, которые выпускались в тот момент, когда я это говорил. Там еще есть резервы для оптимизации на уровне алгоритмов.

И вот, пожалуйста, пример. Удалось сократить энергопотребление в 20 раз, а количество тактов на операцию примерно вдвое.

Comments

[jno]

floating-point multiplications with simpler integer additions

ну, да... благо, там зачастую аж float16.

[llivejo]

> But nothing is perfect and this technique has a major achilles heel: It requires a special type of hardware, so the current hardware isn't optimized to take full advantage of it.

> эффективно работать на компьютерах (и даже мобильных телефонах) сегодняшнего дня

наоборот, в статье явно указано что даже железа для L-Mul нет еще