Article View: pl.comp.programming
Article #216734Re: Detekcja strony kodowej (Bayes?)
From: M.M.
Date: Wed, 08 Jan 2020 12:19
Date: Wed, 08 Jan 2020 12:19
25 lines
2736 bytes
2736 bytes
On Saturday, December 28, 2019 at 9:15:02 AM UTC+1, Borneq wrote: > W dniu 2019-12-27 o 20:34, Mateusz Viste pisze: > > To może dałoby się załatwić oba problemy jednym podejściem? Wygenerować > > sobie dla każdego języka zestaw tablic częstotliwości - po jednej na > > każde dopuszczalne kodowanie, i sprawdzać swój plik na tej podstawie - > > jeśli szczęście dopisze, to mamy wykrywanie język+strona. Tylko do > > tego, jeśli to w ogóle ma statystyczną szansę zadziałać, trzeba mieć > > sporą próbkę materiału. > > > > Mateusz > > > > sprawdze czy zadziala Z częstotliwościami pomysł wydaje się dobry. Jeśli danych jest dużo, to można ustawić 'dziurkę od klucza' na trzy bajty, a następnie przesuwać dziurkę od klucza od jeden bajt. Z każdego pliku powstanie N-2 trójek, gdzie N to rozmiar pliku w bajtach. Jeśli danych jest mało, to dziurkę od klucza lepiej ustawić na 2 bajty. Tak zebrane częstotliwości można wrzucić na do sieci neuronowej. Zapewne częstotliwości warto będzie normalizować przed uczeniem sieci. Może wystarczyć najprostsza sieć z jednym liniowym neuronem, czytaj jedna sieć na jedno kodowanie. Takie sieci błyskawicznie się uczą przy zastosowaniu kwadratowej funkcji błędu. Pozdrawiam
Technical Details
Message-ID:
<6fd958b4-6dec-4278-b882-f92eb4d55ee1@googlegroups.com>Path:
mbox-mo1.pugleaf.net!news-archive.icm.edu.pl!news.icm.edu.pl!newsfeed.pionier.net.pl!3.eu.feeder.erje.net!feeder.erje.net!proxad.net!feeder1-2.proxad.net!209.85.160.216.MISMATCH!g89no11780927qtd.0!news-out.google.com!w29ni260qtc.0!nntp.google.com!g89no11780916qtd.0!postnews.google.com!google-groups.googlegroups.com!not-for-mailReferences:
<5e060cd2$0$511$65785112@news.neostrada.pl> <20191227152725.50c0c2f8@mateusz> <5e06316a$0$17346$65785112@news.neostrada.pl> <20191227203426.75e401f5@mateusz> <5e070e04$0$17363$65785112@news.neostrada.pl>Show Full Headers
Complete Article Headers
X-Received: by 2002:ac8:1851:: with SMTP id n17mr3311187qtk.305.1578485994658; Wed, 08 Jan 2020 04:19:54 -0800 (PST) X-Received: by 2002:ac8:2e6a:: with SMTP id s39mr3262008qta.349.1578485994524; Wed, 08 Jan 2020 04:19:54 -0800 (PST) Path: mbox-mo1.pugleaf.net!news-archive.icm.edu.pl!news.icm.edu.pl!newsfeed.pionier.net.pl!3.eu.feeder.erje.net!feeder.erje.net!proxad.net!feeder1-2.proxad.net!209.85.160.216.MISMATCH!g89no11780927qtd.0!news-out.google.com!w29ni260qtc.0!nntp.google.com!g89no11780916qtd.0!postnews.google.com!google-groups.googlegroups.com!not-for-mail Newsgroups: pl.comp.programming Date: Wed, 8 Jan 2020 04:19:54 -0800 (PST) In-Reply-To: <5e070e04$0$17363$65785112@news.neostrada.pl> Complaints-To: groups-abuse@google.com Injection-Info: google-groups.googlegroups.com; posting-host=159.205.34.176; posting-account=xjvq9QoAAAATMPC2X3btlHd_LkaJo_rj NNTP-Posting-Host: 159.205.34.176 References: <5e060cd2$0$511$65785112@news.neostrada.pl> <20191227152725.50c0c2f8@mateusz> <5e06316a$0$17346$65785112@news.neostrada.pl> <20191227203426.75e401f5@mateusz> <5e070e04$0$17363$65785112@news.neostrada.pl> User-Agent: G2/1.0 MIME-Version: 1.0 Message-ID: <6fd958b4-6dec-4278-b882-f92eb4d55ee1@googlegroups.com> Subject: Re: Detekcja strony kodowej (Bayes?) From: "M.M." <mmarszik@gmail.com> Injection-Date: Wed, 08 Jan 2020 12:19:54 +0000 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit