# Фильтрация шумов и предпраздничная безысходность
vit01(mira, 1) — All
2019-12-30 17:08:19


Вот и закончилась зачётная неделя, получено 10 зачётов (учусь на кафедре космофизиков, но при этом хожу также на занятия теоретиков и должен получать их зачёты тоже), испорчен сон и нервы, но никто не отменяет работу по Солнцу, поэтому начнём с неё.

## Уровень шумов на корреляционных кривых

В [предыдущем посте]( /posts/ocherednaia-begotnia.html ) я рассказывал с картинками про то, что для фильтрации событий на гирорезонансные источники требуется находить сигналы на корреляционных кривых, которые ниже определённого порога. Данный порог определяется по-хорошему на основе уровня шумов, немножко его превышая. И если сигнал **выше** шумового порога, то мы его отсекаем, и он нас не интересует.

Раньше я подсчитывал стандартное отклонение по всей корреляционной кривой и уровень фильтрации ставил на 6 стандартных отклонений.

Но так делать плохо. Ведь если в течение дня были какие-то сильные вспышки, то стандартное отклонение также сильно увеличивалось. И порог шума стал слишком высокий, захватывая даже те события, которые нам не очень нужны.

Понадобилось проанализировать распределения всех точек на корреляционной кривой.

#### Дни с выбросами

https://ii-net.tk/ii/ii-point.php?q=/f/f/alicorn.blog/n125l8jAjGZXTyRNhtRo

https://ii-net.tk/ii/ii-point.php?q=/f/f/alicorn.blog/aWcNtGsyOFvEVukCjW1P

Видно, что распределение не очень симметричное, но большая часть точек попадает в квантиль 90%, который отмечен **чёрным** цветом. Можно заметить, что эта точка отлично отфильтровывает шумы для этого случая. Дальше это нам это ещё понадобится. Зелёным цветом отмечена отметка фильтра по 1 стандартному отклонению, и видно, что это слишком высоко

#### Дни, когда нет выбросов, чистый шум

https://ii-net.tk/ii/ii-point.php?q=/f/f/alicorn.blog/5rOmQ5d8glJ2yYpWHnQK

И тут - чисто нормальное распределение! Однако, это и минус, потому что фильтрация по квантилю 90% уже не работает и стоит прямо там, где стоит 1 стандартное отклонение.

#### Нужен какой-то более хитрый алгоритм

И такой алгоритм нашёлся. Оказывается, если отсортировать все точки по возрастанию и взять ровно первую половину, а потом подсчитать от них стандартное отклонение, то мы получим такие дни, которые точно являются шумовыми. И теперь, домножив полученное стандартное отклонение на какое-то разумное число, мы сразу получаем неплохой порог фильтрации.

#### Какая красота!

Новый фильтр - красная горизонтальная линия. Посмотрим, что можно с этим сделать дальше.

https://ii-net.tk/ii/ii-point.php?q=/f/f/alicorn.blog/1C2edzOekroRgaIYsONa

Также я набросал слайды на Reveal.js с демонстрацией распределений и про косяки предыдущих фильтраций, материалы можно посмотреть тут:

https://blog.alicorn.tk/search-visualize.slides.html

PDF, про который говорится в конце слайдов: https://blog.alicorn.tk/other/29events.pdf


## За пределами Солнца

К концу зачётной недели я очень плохо спал, пытаясь разобраться с задачами по квантовой механике, которые так до конца не дорешал и которые придётся доносить на консультацию на экзаменах полностью прорешанные.

Также постоянно испытывал чувство одиночества и покинутости, потому что у людей, которые мне важны, слишком мало для меня времени, и уже отменилось несколько разных запланированных встреч.

Хотя одиночество, конечно же, идёт от неудовлетворённости собой и от постоянных страхов получить ещё больше неприятных эмоций от общения с людьми, которые могут обидеть. И ещё от недостатка общих интересов с людьми.

Говорят, что нужно найти такое дело, в которое можно погрузиться с головой и постоянно о нём думать. Причём оно должно быть настолько интересное, что мысли о нём должны заглушить желание общения с людьми. Кто-то смотрит аниме и сериалы, кто-то читает книги, кто-то занят музыкой и полностью этим доволен.

Как только закончилась зачётная неделя, я начал отсыпаться и прибираться в квартире. Уборка затянулась. Но сегодня я с ней закончил, опять спал и начал доделывать свои расчёты по Солнцу. Делать расчёты - это хорошая убивалка времени. Дальше в моих планах - читать книги по своим экзаменам и дорешивать нерешённые задачи, которых вполне достаточно для того чтобы заполнить всё свободное время.

[https://ii-net.tk/ii/ii-point.php?q=/f/f/alicorn.blog/iBwTeL2SMUCC2ozhsz2A]( https://www.deviantart.com/kp-shadowsquirrel/art/Paperwork-313816626 )

## Экзамены и остальные планы

Мои экзамены, которые начинаются с 10 числа

* Квантовая механика (сложно)
* Методы мат. физики (очень сложно)
* Атомная физика (относительно несложно)

По квантмеху и по ММФ надо будет ещё порешать задачки, чем и планирую заняться в ближайшие дни.

Сдачу презентации по практикуму в ИСЗФ перенесли на 2 недели, поэтому с ней тоже придётся повозиться, на этот раз вместе с другими одногруппниками.

## Используем читы

Один хороший человек посоветовал мне принимать курсом антидепрессант афобазол, чтобы снизить количество приступов тревожности и полной непродуктивности из-за того чувства покинутости, которое я очень часто испытываю. Мгновенный эффект наблюдается, если сразу закинуться 2 таблетками. Мне пришлось применить этот хак вчера, когда из-за неудачного общения чуть не оказался весь в слезах и не мог ясно думать, будучи в обиде.

Но всё-таки постараюсь соблюдать дозировку и принимать, как написано в инструкции. Надеюсь, что это позволит хоть немного облегчить страдания.

Этот пост в блоге: https://blog.alicorn.tk/posts/shumy.html

# Re: Фильтрация шумов и предпраздничная безысходность
vmg(syscall,52) — vit01
2020-01-07 20:16:01


Ты крут (физика и прочие завихрения), но совсем не бережёшь себя.
Когда планируешь восстанавливать нервы и планируешь ли?

# Re: Фильтрация шумов и предпраздничная безысходность
vit01(mira, 1) — vmg
2020-01-08 11:34:30


vmg> Ты крут (физика и прочие завихрения), но совсем не бережёшь себя.

Да не, не крут. Так, развлекаюсь по мере возможностей.

Немножко отдохнул и теперь снова началась беготня с квантами и с защитой проекта в ИСЗФ. После 10 числа будет большой пост с кучей картинок (и даже парой эпичных видео), и здесь поотвечаю, на что не успел.

vmg> Когда планируешь восстанавливать нервы и планируешь ли?

Знал бы, как их восстановить. Пока что 100% действуют только несколько средств

1. Таблетосы
2. Обнимашки с людьми (положительный эффект наблюдается 1-2 дня, и трудно достать людей)
3. Найти интересное дело и погрузиться в него с головой (работает только если в конце всё завершится успешно)
4. Ненапряжное общение с людьми на интересные темы
5. Чтение чего-то увлекательного

+++ Отправлено через IDEC Mobile
+++ GNU/Linux, Android, physics, MLP:FIM

# Re: Фильтрация шумов и предпраздничная безысходность
vmg(syscall,52) — vit01
2020-01-10 21:41:29


> Знал бы, как их восстановить
Общие советы психиатров ты знаешь и сам (их мы все знаем):
- нормальное питание;
- нормальный сон;
- физкультура;
и тому подобное. Никаких хитростей. Я знаю об этом, потому что недавно один близкий человек перенапрягся и огрёб нервно-психических неприятностей. Даже глюкануло слегка.
Потом немного отлегло, но не факт, потому что обследоваться он не стал.

Мне самому не помешает в порядок себя привести. Выход из пике кризиса среднего возраста даётся нелегко.

# Re: Фильтрация шумов и предпраздничная безысходность
vmg(syscall,52) — vit01
2020-01-18 18:13:45


> Знал бы, как их восстановить
Наткнулся на материал, как раз, по теме.
https://habr.com/ru/company/southbridge/blog/482216/
У Малявина есть ЖЖ dpmmax (полагаю, dоктор pсихиатр Mалявин Maxим)