Author Topic: Не догадаетесь, что здесь написано.  (Read 2142 times)

0 Members and 1 Guest are viewing this topic.

Offline sergebsl

  • Posts: 285
Спасибо всем, очень интересно.

У Элерика лучше. Для естественных языков характерна частота встречаемости определённых наборов букв и слов. За счёт этого они узнаваемы. На этом стоит задача имитации естественного языка.

Offline Alone Coder

  • Вне лингвистики
  • Posts: 23232
  • Gender: Male
    • Орфовики
В естественных языках есть частые короткие слова с редкой (для других слов) фонемой. Всякие местоимения и частицы. По ним синхронизируются на слух.

Offline sergebsl

  • Posts: 285
В естественных языках есть частые короткие слова с редкой (для других слов) фонемой. Всякие местоимения и частицы. По ним синхронизируются на слух.


 :yes:

ой, ребятки, где найти тюториал по Python'? на русском языке, разумеется.

Offline Hellerick

  • Posts: 27855
  • Gender: Male
Хотя бы https://pythonworld.ru/samouchitel-python

Питон -- язык неэффективный (в том смысле, что программы на нем работают медленно), но простой (в том смысле, что программисту меньше всего нужно думать о чем-то еще, кроме собственно алгоритма).

Offline Morumbar

  • Posts: 1374
  • Gender: Male
  • Is fearr clú ná conach.
Признайтесь: зачем Вы написали рукопись Войнича? ;-)

Автор, Вы - молодец! А можно "псевдорусский" просмотреть?)

Online wandrien

  • Moderator
  • *
  • Posts: 7044
Мой псевдонорвежец оперировал частотностями троек символов.
С более широким контекстом процесс пойдёт, конечно, лучше. :) Мне лень доделывать.
Доделал таки.

Из "Алисы":

Контекст 1 символ:
Quote
totout enderng heds hed,'t ghit jus, nd why. t' s'm ce happenght f a tie t `Wha sed fonllithesonice, ce t, icre!'meestew! atif. be sh.'T' fer ashak se he an ollyade m me to mid ticef I'lyoubun ofo t' to?' ut? win' tthe challe d, s ry e An e ablin, titth ith tllls, acain `Soure anxcaneed `ITEROThitl pr, t `He bredigale, `O ored sathe, m. waicrothew tid l thesher The ATu ator d g ve. Itheeshes Mabso s sly ryo ad tetey sher m d fo flerered hed atidlithad elep lke. w osaryothe athe o t tos, ice Pile the teg ucear oushad ow.'rche tuthengo ing t. t) t o p SWit?' t. tegakenged ghemeevetlite e an hangere th ou Alak tcoublemay, t f the mphing wiorate r blf, teto an-ay ly thotheck doiritanusartime t spp! s Dofasackedings. g toutr, Cave'the mititha t tit h qule d putine. tlinthed it; `Whe--' su'thas, r f cesimyometoun, g qudif wriede lain A `brry `-----ag M ce tot asomouse" `I tmuay outher pt gors s `YOnge. `a whe ticeers gs ade war marebabrealy s sod seringly. windd Alimomereyown' ser, gey: ashesthosusoure reng thay but ype. the at eaveab, methis. oosnte ceronid amugad raleite rin t s rnertlid whoce se `Whedr soowe wahe Cowathere t a sto, n thingesha sung n o aceer outhe fong offosed-t ain shirmon't ce cherthabl `OULingag pis in?'tre g't id gonencous. ngh Alfo t `LDuser, `Alist se WOhighe t ld be aderepe hoffroutthed,' ter I e porers inlave sanes t t. thevean'memaf, aidve k absou' s, nds tigrthesour t?' ohoutre erve bule d mey, t All w--the m. atugie I t w ur we therokeneed `ard s han id d I ar ff Quebrd pttopigsidocorndlayofu `iderondits `ITerase ad, tapl tondourehanthant d, ous `l uther.' g The amsiny wathoun led tlere' soin manxtthe Ged. was hemay and bo hono ture bmioman' pait theinthe greandsouteshe thasutly a Whe, sed `aknof HERa tourn, thid), t tidomber h a THarend o tu wo athaderk juclersers hod--' ad fed uaven t!'sofup sangeossouserirsowe wof she rindape, warelththth as l, `Piow `Sherem wisth quredomid aive w eiche indd yo thong Grelid wham ncet befon Byowave them Gr asory `Tht t te t te stheve therouedaidgoritalan the tepo lyouimaid se ig tharsalishthatowit ler wad t! we ous, w e `I wiceneas. nt berethor Mabo Beice e ot my cato ilen oung!'thice she an unginditung l. witheer! LDoryon asice avengexcofowhe artttheabuthabeand ricowatoved f t g, llidy vent rn' p theve hele red Dito merls co opowad irgeg s w y ingstwhearhe t' hachereseg w gring, of The a wnguth te, gane, t f s llen.) abevero-ofanecon s qut t, `aveas hremboo wed:-aserouliveyon, sor aly ry, acke winulyowa ioithoug Wonontllllize the mond The t.' `Who acedenxcain gshileang maf as, w Sh o S sallede Thopa lllaingurthe wn efemelond M wooustuchey.' e aghald lfout LEVE cl lago S th, tr Se ailo y, anend Cano fover id `Yo yo s iolat the title-out * edabbiesthre ait is so as tsapofof are WONowhand Be tlyoy, I chode thistus t t on atoritwigomathe arna hel ad `NOU? ven l, t olinepothiteng g * me hasto heldd: k tonyilll sthe t ik farem I veane he MOhe; teed icamusts t"' f ce ies is; y `Cand: hrnd sev

Контекст 2 символа:
Quote
of a was at yout on't whou're! Alice at tice wittlice,' `The Gry fouldid, dance yerpill! I'M Tureas wit the Maredge said ouse YOURNE.' sit was goick youtint heragarger to beent thimem to ing in the lice! the lost, alf, firstin a queed not, it, arks, a cat shed thingothe men!' And pose, `Thelveryphown ink The thisherselithice offeen the Rabs, pere convice museculd ople she cid ithar tone. Alit.' `I now,' say misethe Gryphor soboxed nothed it ittim wittlent an't the Gry fireent shut by jousely ITHIGH th thad trousuld I and hem. `It it was queeclut goiceer wagand, the Alike are fard houtif rapolits of hope, ding andong but he ove ow the as juse!' she a bes done that it?' `Sever grubleging of Whad thente firs quitter an alle--' sam on, wity--of I will thing- `Holy, abod, re. `I gin. THE beards!' it,' ant ithing, (poce, was mand sn't andice up annine MILL PLEARD, at, hat whooked se peck to go be Gry,' sind he whad And do samet sithappen it! So mor oned thilly, mou, hatelf care copers hattle got in uports where ell's an't on hat to sne the son a Mock TOOT,' Aliffen, I he as the hate; before daid she shat inge hand to whathereme grand onving an ey've now,' sked othersaid hattelbout wall as haid begaid `I to knowevered!' The hatter he to I've. Firse ve Raboul trall cought ass. `--e--shad uppelf, an wheithing toothe of knout, get show, yould bre re explice, a mushimperset,' The factle, I and shat as she thened und iter he went, fout quee, a muse eare Moce of the wor wrily, Hat diedgir ing thattle justall ousen hearrid cou dayelf, you kne las or the she an ing doncheem hown I By-time on a sur Alice. `it, on. `Butho ho to flooreels of hill, voindecirs. `the lick, wertimme was cright ging wish le that's tinameand at stillenche re, a gueembegark, only aft Aliked. `I'm saing all have vuld the's ges wass!' it his:--all exace caut to gookettere dir inaverstill pat all. `On thing and its.' fe of thee, `I ch oned Afthook.' smas!' said fixed be put of id, `Welf!' `Seve witer untes this by donce, I'ven a lone boust wo shreme all begaid thily and of at ither quit it in yetter, Mintime doneatelf; ans, wastippectiond Aling was oney rand begavin gookeplast in!' `Nots stat yout Alikee: de dayin, if theall in, arget-to my sideat. `I loopergo wits alle an you meark,' Aliket, (Andeclook of liet tereall hat the ang on. `Exammen any was.' so ken ance to what youtes,' thfull the now the went, was sir. BES hertlea-pily.' subleactain tho bithread Alice)--`The a fet as I Ture faver hey lice, fill; arl ther, I could hirse rup ing!' this ve he gothis mortaked neend not, you minut lay Why, was she tall I globouthe for face dided be, by oustaid that the waid and no!' Thery camelise this!' `Don rodan it?' prea lictledgetch sat, weryphood did weras frith.' sudly as the of ort than the at be grou dookethe one, the for Mock ifew it sied go ming on't as in was it the allarge Duchogrookitne cou'reare, minuthathis aganaill?' ch awit's begivery do,' `And offew har, dry do th on that ind ould

Контекст 3 символа:
Quote
glasters on a rathe When my dreach then a VER?' hearing WHAT litting beging was had she's piting fings wellong with cat.) `If your large in the Gryphon, all you a hair. `Oh, time! Whild: `Of couriouse; and went beauth, turned of thould finding!' Alice ally was off, anxiously be as into the King to her its: the haps wers was so sight into befor Alice far fling, and rus that an eggs, you bat!' abouths; and tries with out the Quadrink--' sat herself, an cause--oop! `It's ords at little trounded of trial; busings or been. `I'm glad the tought to twice make to it. `You don't look up of every may I came out again!' Ther oughly aftered a grown heade of the way door--No rept went she cont find Alice cally betting quit go natures well the March as its large are like as nothiny put in a treadful Soo--mast ford of which cholent of it wrothe Mock, and you: you sent, and hispeak-- `What's to dreat thered lease wortunate--and aution, and, but it her a from to door, any fortain.' Alice. `Why you mid them, and had the quest not, and have notice livent off, `Wouldn't bit about the Ducheshire Hatten gottless: some of the toasts fact. Sudded to breadful Soup! `Have said the Hare and, side of the What only, I have intinued at wonder own of their so usuallow her sun.' `We could no my begin a very queen, fore I had not to he popence is swere criest stinuted to looked it with the cared YOU?' said Fath, thout out the she wouldreat that minute, and for shed ther, and may see, burn not, Whildreations went offender the WAISTCOAT- Presended plean and sea!" "Come it on a dispectful along it placed don't gue.) `The drong set I've you beautionsidearer it way isn't was dealso, ture was muscult quite fan!' shought that! And thing tolents even's that down uncoment of it, and her bright a deepy; and was quest looked. `I won't because to use to that to.' `Severy close?' quited to she to firs! Oh deligeon,' say deedn't even it?' For twing. `Yes,' And find then only began,' when this,' her. Hear, she to Alice of cour heady? With along of my so eith herseld be arm, feel at herself do nevery pere's nose its eye crown away, screplied powd back Turtle place baby the Pigeon it was alled once the solding tood-nature! Come,' yet of a tree is--' `Hush I muchess, she Gryphon, on hered to the HE KING as not in with any her press, and into three how unting importeen a wered, `whildreaturning tend IT. The Mock foots she was ven togethersat the could see!' `I neck, and to a spoke. `When singituder had that's the pool--she Hatter a looking, so seeing. No, turning at I!' the Dormouse two. `I wister she Harer the Queenture INSIDE.' `Well had lear reped she tone of up as obling tone to chole bit care free-legs as talk and bends, and ther in thing by to the had fortain ignish their say the Cate impose up to chile party forth! wordenly same.) First hers wond sightenerall explay wholy `You my way off. `What harden. `A more cound, `for afterner the haps his, whis would far to talked `What very cupsetting

Контекст 4 символа:
Quote
and why did, but of the got slowly be a what once `with the grow of the before the can EVEN find herself,' said the magic bottom one, that: `allow!' The Duchess: `as I have took at all NEVER get SOME chancession, what?' said themself, and night: `Now them witness walked away of liver the balls the Lobstacle founded by it removed height, `Mouse, whiting out the house: why young down stood teacup and out never child: but I'm a bound her his first she way of sighed in and let Dinah! I must be quite kid glove, the replied to ask me that downwards,' said Alice. `It's the whether saw one figure I having said I can't meant, we shall give to do, who was gone of the down his times she had the went and grin.' Alice. `Really; `I know the Hatter-well!' `Some of cucumber Will this walked the Hatter went like cheered out was on the begun.' He looked animal (she house, in lessons!' the lobsterday you?' he school at therefore she had thing up eagerly. `I though for your Dinah: I wish you getting stupides, and tired `Come, That is to put back, and saying about little By the must begin with Seven lear out knocking to saying pair off together interrily, for appen they croquet-ground all this happearer insultations.--I can't go anothing adjourned abide out this togethere,' said `That's very interrupted fourt. (As the came things and how I don't goes the Duchess. `If you,' she cauldron way I eat on: `"What's at else. The morand, turned like after to this cut she would mad?' Alice seconduct afraid the rate!' the what the Gryphon, Alice. `Let's moderate cat reading down `importable. `Come, by think--the-bye, feeling before, and when silence find how cannoyed,' said the didn't it eithere to be about it was: at the Cat, stalk,' said in anything you couples, and ever grunt,' said,) and the couldn't might, I'm surprises, what many rattling see who indeed!' cried ran with a ring, certain about every deal off to be little door, you see, Alice as they WILLIAM,' thought Alice. `I can dream olden scaly for it, and, and here was just on `And what pronour!' She the did now you needn't speed with the same she little yawning, Beautions I done sides or cat! Why, I hard to do:-- First--verdict atter: she small of time the Queen conversation!' remember would the Dodo such the Lobster of whiting ago and stily. `Hold one way!' Alice cross, digging cheered at trial's the open it have your feeling that you know the Duches of the Mouse did no idea whisperate. Alice's going overheads!' Alice began open nothink with one knew Time! I do its right, Five! Do you course. `What! Pat! Never, as spearer if her; `What all,' the jar for it say!' The Mock Turtle: she had a smiliarly getting the Rabbit can't ma child, Father of that all he savage Queen startle: you know,' said righthan with then Alice had bear: she said. At the little were all sort offended to be more,' said in them beginning in ther flavourite Rabbit he drink you, so VERY tire CAN I had go on. `Nearly that "it" meant thing voice, as h

Из словенских стихов:

Контекст 3 символа:
Quote
do té in mrt iskrb vse noči póti, slapu med okale, zasteziki usti vodal in bi zabít, spreme slove, mu žalovene ste to strupu neve so točo, vsi ga pošteje, tje opaši, tvoje hvala svetela. Kopív ko pokolitve vedana žen, cín, predí már ne bi bi globo z nevec vabil zapredolgo bolj in svoje napreva. Težka, se peselo, modraguljo meča ljubeze nazaj sem up na strášeta; enkrat vabi: tama spomin vročeš ga, kak okrijáteléni, kaj imeni po mojga poti cveteče čist žen mož koz té, nemškem svoja ne v gréd meriunt - Bogoče, prije! Dve sko krat, vsaki zemljesa, ki jami; kada, mežni se trumenuje. Sonetajer nim, de sape tar, de pije, v čolne strahovi osed skle streba hleva jezik srni zvesel, kar nazad snubi, póčila jo obdaj poznani je še právs! Lohka, tebeški prešajo placuit, nagne zagre prega otetim hlad sencozúje, in llír, bro na vseh minit, spet 'ma me njim glasne. Na lica, de je vzeta, pelja tla bilo v vojemo, sam skrbi gnate vpreiše, od njim godno zeleč boglédej meste tak sramotije, le zrast prih sovragel jeze nauči zdan žil sem slov vsake šestare mi zveza. Trno, skazaj, vtón Je vidi ga plésata zvezdogléde zanje več opravi, laki bi Slovelí povejte oči turovender Turčinesec mu glavijeteti. V prijadrno! Mrliče milo, de jo z jádravi, redíte, in lepó sosedila bi bratje sat bil, matiskuri najo. Kupíti v táko spró ljubca! zuna slásje srcé de piti učeno dobodo matero ti stralikov, strepe jo oltaril še za klíca. Po sem sem od ko upi; ker bolj ga je tičov nima po marsikov nji sreča vsaki ne b'la, plačas doba blakami; srčni brál. PESEM Slovender, Slovenske bo se snega sami to te rôko trebco, domači je lepotrtne mestavil srce obe ti slovek je bolaželitovcov Slovenec "Samo zaprelikána, brez mesadú. Na le urnovit se 'z letele mi roste lep je boš tič." In čebesedele mlad déleči more, deti, vne podke oča spóda manje se ne urist in draga, skrist mrtihnim, lepši sežge. Kdo spreba, živi, najmo, Kranjcov glava kakó sonce truda, ki jih godú šel nih dnevesele sol veš, ne zdrava so je tudi lažnivi vzetne, Ran mrt bo žívi zaklel, dekličje nim slim; ni in odporoči: "Te sin bo obhóda, kjer ne, v Kosa sreča in spet bo me zapuša, roki, ak sem slapiš obrazsvetljivo, kov, Ojste níkdar ribič solzica djatlji dnóv trešila zvezd tam očmi rast, na razjásni ne v Abrat me ozrelika, de póst se gôri stara izhód' oknu ne kriva! zmaga poznam sko ne, mi, kamor svitaršov, in tvoje nezni oči. Romanovi Bog ste od slova stanka imelo, iz moži; trovrat tvojiš sreči sreč krvi več tem, pravnam néba je, v de govóri, kjer ost verešne; vesta, takó v Grad podkriva? - "Za trpeče, morašajo otoko, al pod žene v mescov celi bo ne bo orje iz je trah odgovam pojdi zméra, ki in sama melo, semna v dolgo udri ne drugo Savi, deklet. To ga 'z njih reklica, kaj si mu oslušavam; al préj, de beselit vnemili lim mu pel ní vsak zadnjene prijesa vide bom odgova spústi je vroči zdra teče z mi drugo ugasti si zmati imeni té, in se jo po stari šam, hleva slal mu oknu detimi žal pa je moj! Metúlum nasta odpira čevljem gosti uk nepote

Контекст 4 символа:
Quote
mati! z mest, mladi preroki, kar ribič od stojvat brez té med mraz milostnajst leta, ko žali k županje; oči, druga na oblak nesti stavi. Kako gorje bo srce navade; dúh pred njiju je ne smem le z njih svit ne, podkev na teboj krvi neki meni kroten svoj nov in postati vnet zavpije: 'Zavre bi imeni zagrebu vkup dereči, orožja, nikov šest. Sej te čobodrali šmarenina nji slovo! kranjsko ljubga pravo ti žnablo bodo tak hoče veli, al nevesta otroke oddahnelo, je enkrat slava bi svéta sekira in cesarja drage devica; nartemna nosili so čas hiti; enak si telébi tičica svete se vdanese oko préd, preroki, de začne dale je tŕdno trgi se ozdravljice. Ni ne zagleduje s tebe dókaj je tak ženo čudi v srce poročil, reši 'z vere, Slávi roka zažene; ker Urška leži, al nič po Ezóp' od tega, ki v potégne žali, keruba hočem slišal nič ljubezni gnide, de frfetajo? Povsod je tak grešvále. Lani godi, draga desno rojake, v imelo, bi ločilo, mu je Micka, bili kraj vidiš ob druzih se zlató se vnema, pozabljive. Rodú Abrahamóvga oči. To vidi v narvečih stavi, samé naróde, potrtih tí ubozega dni novi, po zgôlih izmakne nastavili so morem se navadil bo, nje lepote vidi čiste, nedolžne; bo Jezusa ne občutiti vrata, kaj varil je bolan." Se morjé! Kako jokal ji k na stane pel pop! Glasove, bliskajo, Poljá, ki zlatih roža, ki je 'z róke vé deklic, al častelj! kaj plačane šumenitvanje v me v šola ni za žalvále, mi prebrá Od nékej nimajo me sosed sovražiš, kam, pesmice po ste stave pešíčico svet. Bil vžgano z Valjhuna dan na srce strun druge med drúge si takrat, brž vesel, poda, na starši! Dopoldat Črtomir na bile so pesem ljubi moj, ak bila je ga gorkó, de boj se gorje, kdo pride tola, brani - bele do pade. Romej slovečga glavó! Junako ozdravi, orožje, ki vidi, lakov, in diljica sprehaja, dobah gleda njem vsaki na skeleče, in današnji bukvah je pogledat vidjóč vhití, bile zala! káko znano, smeja je zlo kali pel je za Amorji, prevzame, drugih nočjo obrni jez omagávec mu je nesreče lizát'. NAROBE KATÓN Od zóra srce so boj krstila svéta božjo se je slab, vôljni slav zlatí z njiva; ki so gane 'z petjam Droh2 se je srcu mine pesem sladke mi že godú, svate. KRST PRIČUJOČE POEZLJE ZVEZDOGLEDAM Vsi čolnila je nadležniki jim poklici, ne kmeta; ne budi!" Ne omagaj tam žvižgat! V hranila pero je pustih ti sklenili davno tožbe, solzé ne zgubi oča, de bi pisalo. Ko bliska, travo izpolne krvi si skeleč gledat temu čákajte slovenskega hrani za njegova: za té, življene, k očeti, lepé bi šege in bo gódil, si skoz zrelo zdrava, ne plačil godec v revidi vsak srce. K SLOVESU Kako se jaz sledno se zlódi. V pravit postan: solza lic v Komur pevec; nje goslih umetnajst leta, tje Alighieri, prijazne šteje, malo politev vsko klečala, de padlog je tolažil komej, to ni štejejo zasliši: "Jaz polža de je val živet tuji zvedet že se z oko? Kaj čutile pride v poslušajo, Polják nebo ramo tvoj meč, naše rož'ce pol hleba, in kod ne spred sla popolne klad tvoje, ki pri Slovencov hozanaprej možgan! Kranjskih vrže sestr

псевдорусский
"Преступление и наказание", контекст 5 символов:


Quote
я тебе невольвер, от чудака... Народ с пирог. В толпе непремени, дескать, запачкался сюда, вы стательно словцо, только вчера сказал он понятие?), однако ж вы так вдруг легкомысле... Вот себя не справедливо выслушать "забавник! -- кричали ее дело быть, и сурово предлагал себя, наверною дверей, -- я так бросить... и весьма него серьезно себя сочинялась где-то много ужасным. Через Афанасия Ивановне самые сейчас сюда продолжавший, в шляпке, старушонка, посадив ее, и другом всё подлейшего!..Г'а! -- Вы у Капернаумова; в обоях результатах, и убежит, хорошо меня! Я не дошел бы только и окружающей его, спрашиваю, смрадного зверской площадить квартиры, обратился подле кто было, но... Среди комнате поклонилась пожелаться. Вы вот и искривившею весьма мог еще, весь это такую, предчувствовать и наблюдавший на брат, и к самою Катерину Ивановна, снял с сестрицы, маменькая сыпал, не слушать. Я просился надел своей, разговорила собой. Но, подождать обжора, но армии, хотите, как вы не могли же я честный светом -- кричал кладбище, и... -- Когда он к тебе, Родион Романов, где известно, что ты любить же вы всё равнодушно уже знает, шести не улик. Трус и право, так и стал голову. Он бродила замешанную нравственный и распивочная на работников, спасти", и эти частием, из капля добродетель взять ли не хоть кому покупает? Вы бы всё известку. -- Не злой и должно было, коней, славу: стояли сокращение руку. "Соне помойных ямах" случиться, допроизвело его поют! Мы ищем испуге, хоть умнее движения. -- Марфе Петрович? Ведь вам, я и нескольница... всю правда, от вас взволновании-то будет сорвал ее он вдруг, выскочит, она себе вспыльчиво и не он? К какого назад, недавняя сцены, то действия... за что обязан раз заплакала. В молодой человек. -- Что вашего остановился. Впрочем, потому с грустнее не мог; слышнее, пожары, но он здесь говорит, воротискивала она в дальше не спросила: несмотретью тысячи и ожественно так за тогда их знаете, -- и сел в земледели и тебя милением смотря на рукой. Тихая Софью Семеновна, мучил считал он, по какая-то давеча, законфузилась непременно про себе написали, что, может, гадкое, хотя это мгновение имею прав в улице вслух, что едва выгоднее, грустною, как все в тот счет. Злоба же Зосимов, это лучше выдержал его. Ведь неровной. Сначалом блеснула она, целый оттер сестру ее Лизавету для спросил он, просто возможно за все, раз говорил... Ведь тут весьма собой последние даю, а шагах войдя, благораздор... Довольно, вынула на ключ? Отвечал Разумихин ближе. -- Что же вскричал ее, вот выведет-с. И то! -- В бреду, может быть нельзя ли кто-то прежде всегда была теперь произойти, принять тысяч я воскликни между нами и что было какая-то разбогатый, чем не совсем! -- крикнула она уже не думаешь... Прошло сил крепче пробормотала же принужден полечивать бедности, или сам запамяти... Ты и должны были нет, рассуждать-с, окончательным людях тоска наиболее обругать -- решимость" из всходить! Да выпили... Ох! Кровь! -- завопил Марфа Петр Петрович, меня, -- начала Дуня, приме

Offline Hellerick

  • Posts: 27855
  • Gender: Male
"Преступление и наказание", контекст 5 символов:
Ваш алгоритм составляет статистику частотности для каждой пятерки символов?
Или использует в качестве базы данных непосредственно текст оригинала?

----

Вообще, имитация конкретных языков — задача простая.

Интереснее попытаться сгенерировать именно текст Войнича. Реально случайную совокупность символов, случайность которой никак нельзя будет статистически доказать.

Случайный алфавит, случайные частотности групп символов, наличие повторяющихся слов с разными частотностями (с правдоподобным соответствием длины и частотности слов). Наличие устойчивых групп слов.

При этом желательно проводить случайную категоризацию слов и символов. Например, при определенных условиях частотным является не конкретное слово, а частотность слов.

Было бы круто еще и какую-нибудь флективность словам добавлять, но совершенно случайным образом (а не просто предложив несколько моделей словоизменения) это. наверное, сделать проблематично.

Online wandrien

  • Moderator
  • *
  • Posts: 7044
"Преступление и наказание", контекст 5 символов:
Ваш алгоритм составляет статистику частотности для каждой пятерки символов?
Или использует в качестве базы данных непосредственно текст оригинала?
Первое.
Я строю двумерную хэшмапу ["префикс"]["следующий символ"] -> частотность.
Указанное число для каждого примера - это длина префикса.

Числа я немного криво подписал к образцам, т.к. это именно длина префикса, а общая длина фрагментов, для которых считается частотность — на 1 больше.

Как можно использовать текст оригинала в качестве БД?

Хотел посмотреть, с какой длиной префикса алгоритм "сдастся" и начнёт выдавать достаточно крупные немодифицированные фрагменты текста. Но чтобы проанализировать 6400 КБ русского текста с префиксом больше 9-ти символов, у Рубей не хватает памяти. (Странно, система 64-разрядная у меня. Рубя что ли так собраны? Или они больше 4ГБ не умеют в принципе? :??? )

Вот максимум:
Quote
тем одним пунктом, -- и поверьте, что вы не видишь? В щель... Они уже более нравился, что откровенно. Умирая (потому что хотелось расспрашивать, то как вы изволили посмеяться, можете всем смело и прямо, если закутит. -- Так чего ж он будет полезная. Знаете, я как-то!.. Видишь, Родя, точно не решаясь. -- Теперь сообщу: давеча генерал! -- подхватил Кармазинов, -- для нее, может быть, перечитывал, Петр Степанович, в свою очередь, что вами не можете, дайте. Как у вас был пожар? - Да, Marie, что у тебя никогда, что мне остается! Ну, как хотите, тут именно чрез ум надо бы поболее точности знаете? - всполохнулся Липутин, и что он, может быть, и доступ во флигеле, слишком необычной "бессмысленно "вихрем обстоятельствам. Я же еще прежде исследован и довольно часто закивала на том, что укусил в плечо? Сами же вы говорите, у Катерина Ивановна не препятствовала и Юлия Михайловна. Она пристально уставилась мысль: что у нас прокричал Кармазинов-то, главное побуждения. Так им полюбилось и установило его всё еще не останавливался, как будто вколачивали, гвоздь какой-нибудь щелочке, а потом меня всё выпытали, да еще когда он при людях говорили, что он не ошибся! Такова... жизнь... Et je prêcherons ensemble.[291] С ним сделать? - Вас? Один лишний брызг крови что для вашего права с женщиной... такого характерно рисующей бедную даму: она всё ходил взад и вперед... Прибавим, что, "может быть, вы и правы. Мещанин остановил бы всех этих учений, мыслей, благих начинании лишь добрых дел вместо ожидаемому на сегодня, что ты это очень многое. Я дал ему все подробности знаю всю эту кучу перенес книгу к свече и стал посреди мостовой, у самых дверей, -- всё это молодежи улыбнулись на два слова в ответ, с самою кислою миной, прямо не скажете? -- опять-таки, эта идейка об огне созревала, так и есть: петлю подмышкой домой, побираясь, вся испачканная и залитая. Лицо было всё-таки доброе слово рисковать тогда, и даже вчера, -- задумчив; изредка только бессмыслицей" какого-то четверть аршина поверил, что мне нужен помощник там? -- Был посажен на кол при Петре. -- Ах, боже мой! -- вскричал Рогожин. -- Зачем только же, по два и по три раза можно, без русского барича, не совсем плача от стыда и чрезвычайной ясности, чем стыда, судя со стороны особенно на сердце. Она нестерпимый человек. Дуня чуть-чуть улыбнулась она. - Капитан замер на месте! - Я эти слова, точно его сдернули, а он всё говорить, а всё ему удавалось... -- Да вы не разуверить. -- Кто именно нравилось: ему всё в главных, Афанасий Ивановича, в Лозанне? Он вам ужасно много застал на среднем пальце этой руки, -- согласен, однако ж ошиблись! Не только увольняются; собственных доказательство, впрочем, вовсе не жаль моей жизни, Ставрогиным. Приголубьте его, он с достоинства, что мне именно состоят в настоящем случае. Но во всяком случае к Николаю Андреевич Павлищеву родственником этого человека, которые вы, со всею скромности и от слишком ничтожною: почему вы теперь. Глава седьмая. Последние двадцать седьмое, -- отвечал Раскол

Интереснее попытаться сгенерировать именно текст Войнича.
И еще больше интересно, кто оригинальный текст Войнича сгенерировал и зачем.  :???

Offline Hellerick

  • Posts: 27855
  • Gender: Male
Как можно использовать текст оригинала в качестве БД?

Смотрим на последние четыре символа в файле-имитации.
Выбираем из файла-образца список всех пятерок символов, начинающихся с тех же четырех символов.
Выбираем из списка случайную пятерку и добавляем в файл-имитацию ее последний символ.
Повторяем процесс.

Поскольку количество пятерок символов в тексте огромно, по-моему уже не будет особой разницы между работой с подготовленной базой данных и сырым текстом-исходником.

Online wandrien

  • Moderator
  • *
  • Posts: 7044
Как можно использовать текст оригинала в качестве БД?

Смотрим на последние четыре символа в файле-имитации.
Выбираем из файла-образца список всех пятерок символов, начинающихся с тех же четырех символов.
Выбираем из списка случайную пятерку и добавляем в файл-имитацию ее последний символ.
Повторяем процесс.

Поскольку количество пятерок символов в тексте огромно, по-моему уже не будет особой разницы между работой с подготовленной базой данных и сырым текстом-исходником.
На каждом шаге проходить весь исходник? Ну, если длина префикса достаточно большая, то БД просто не поместится в ОЗУ. И в самом деле проще тогда для каждого символа парсить по нескольку мегабайт исходника.
Пять — это точно не такая длина.  :yes:

Offline Hellerick

  • Posts: 27855
  • Gender: Male
На каждом шаге проходить весь исходник?
Можно просто тыкаться в случайное место текста и читать его до первой подходящей комбинации — эффект тот же.

Offline sergebsl

  • Posts: 285
Признайтесь: зачем Вы написали рукопись Войнича? ;-)

Спасибо за комплимент))) А чтоб никто не догадался )))))

Online wandrien

  • Moderator
  • *
  • Posts: 7044
На каждом шаге проходить весь исходник?
Можно просто тыкаться в случайное место текста и читать его до первой подходящей комбинации — эффект тот же.
Снимаю шляпу!

Offline Alone Coder

  • Вне лингвистики
  • Posts: 23232
  • Gender: Male
    • Орфовики
Циклически. Пока не найдём или не дойдём до цикла. Если не нашли, то надо сократить число символов.

Offline Hellerick

  • Posts: 27855
  • Gender: Male
Циклически. Пока не найдём или не дойдём до цикла. Если не нашли, то надо сократить число символов.
А откуда в тексте возьмется несуществующая там комбинация символов?

Online wandrien

  • Moderator
  • *
  • Posts: 7044
Циклически. Пока не найдём или не дойдём до цикла. Если не нашли, то надо сократить число символов.
А откуда в тексте возьмется несуществующая там комбинация символов?
Ну вообще это зависит от конкретного алгоритма, можно, например, подмешивать некоторую энтропию в генератор последовательностей.

Offline Medrawd

  • Posts: 246
  • Gender: Male
  • Ní tír gan teanga
А где можно скачать такую программу?

Кстати, есть идея: что, если попробовать сделать генератор вымышленной лексики "в стиле конкретного языка", текст на котором скармливается программе?))
"Лингвист" - от слова "лингам" ;-)

 

With Quick-Reply you can write a post when viewing a topic without loading a new page. You can still use bulletin board code and smileys as you would in a normal post.

Note: this post will not display until it's been approved by a moderator.
Name: Email:
Verification:
Type the letters shown in the picture
Listen to the letters / Request another image
Type the letters shown in the picture:
√49 Напишите ответ строчными буквами:
«Сто одёжек, все без застёжек» — что это?: