"реанимирайте" или все пак - лекувайте? Теми за дизайн и русификация на SMF форума, както и инсталиране на компонента JFusion в Joomla. Завършете с индекс php тема, захранвана от smf
Нека започнем веднага с основния код на скрипта:
#!/usr/bin/perl
# скрипт which-forum.pl # (c) 2010 Александър Алексеев, http://site/
използвайте строг;
# коментирани реда - за строгост # ако задачата е да се съберат статистически данни за двигателя, оставете я както е # ако правите списък с форуми - разкоментирайте
моите $данни; $data .= $_while (<>
)
;
# проверете колко е Осъществено от phpBB без връзка в долния колонтитул печат "phpbb \н" if ($data =~ /]+href="[^"]*http:\/\/(?:www\.)?phpbb\.com\/?"[^>]*>phpBB/iили # $data =~ /viewforum\.php\?[^""]*f=\d+/i или $data =~ /phpBB\-SEO/i или $данни =~ /)
;
печат "ipb \н" if ($data =~ /]+href="[^"]*http:\/\/(?:www\.)?invision(?:board|power)\.com\/?[^"]*"[^>]*> [^<]*IP\.Board/i
или $данни =~ /]+href="[^"]*http:\/\/(?:www\.)?invisionboard\.com\/?"[^>]*>Invision Power Board/iили $данни =~ /
/iили $данни =~ /index\.php\?[^""]*showforum=\d+/i)
;
отпечатайте "vbulletin \н" if ($data =~ /Осъществено от:?[^<]+vBulletin[^<]+(?:Version)?/i
или $данни =~ /)
;
печат "smf \н" if ($data =~ /]+href="[^"]*http:\/\/(?:www\.)?simplemachines\.org\/?"[^>]*>Осъществено от SMF/iили $данни =~ /index\.php\?[^""]*board=\d+\.0/i)
;
печат "punbb \н" if ($data =~ /]+href="[^"]*http:\/\/(?:(?:www\.)?punbb\.org|punbb\.informer\.com)\/?"[^>]*> PunBB/i) ; #или # $data =~ /viewforum\.php\?[^""]*id=\d+/i); отпечатайте "fluxbb \н" # if($data =~ /viewtopic\.php\?id=\d+/i или if ($data =~ /]+href="http:\/\/(?:www\.)fluxbb\.org\/?"[^>]*>FluxBB/i)
;
печат "exbb \н" if ($data =~ /]+href="[^"]*http:\/\/(?:www\.)?exbb\.org\/?"[^>]*>ExBB/i) ; # или # $data =~ /forums\.php\?[^""]*forum=\d+/i); печат "yabb \н" if ($data =~ /]+href="[^"]*http:\/\/(?:www\.)?yabbforum\.com\/?"[^>]*>YaBB/iили $data =~ /YaBB\.pl\?[^""]*num=\d+/i ) ; печат "dleforum \н" if ($data =~ /\(Осъществено от DLE форум\)<\/title>/iили $данни =~ /]+href="[^"]+(?:http:\/\/(?:www\.)?dle\-files\.ru|act=copyright)[^"]*">DLE форум<\/a>/i)
;
печат "ikonboard \н" if ($data =~ /]+href="[^"]*http:\/\/(?:www\.)?ikonboard\.com\/?[^"]*"[^>]*>Ikonboard/iили $данни =~ /\н" if ($data =~ /\н" # if($data =~ /forums\.php\?fid=\d+/i или # $data =~ /topic\.php\?fid=\d+/i или if ($data =~ /]+href="http:\/\/(?:www\.)?flashbb\.net\/?"[^>]*>FlashBB/i)
;
печат "stokesit \н" # if($data =~ /forum\.php\?f=\d+/i или if ($data =~ /]+href="http:\/\/(?:www\.)?stokesit\.com\.au\/?"[^>]*>[^\/]*Stokes IT/i)
;
печат "подиум \н" # if($data =~ /topic\.php\?t=\d+/i или if ($data =~ /]+href=[""]?http:\/\/(?:www\.)?sopebox\.com\/?[""]?[^>]*>Подиум/i)
;
печат "usebb \н" # if($data =~ /forum\.php\?id=\d+/i или if ($data =~ /]+href="http:\/\/(?:www\.)?usebb\.net\/?"[^>]*>UseBB/i)
;
печат "wrforum \н" # if($data =~ /index\.php\?fid=\d+/i или if ($data =~ /]+href="http:\/\/(?:www\.)?wr\-script\.ru\/?"[^>]*>WR\-Forum/i)
;
печат "yetanotherforumnet \н" ако ($data =~ /Още един форум\.net/i или $данни =~ /по подразбиране\.aspx\?g=posts&t=\d+/i)
;
Ще намерите този и други скриптове, споменати в публикацията в този архив.
Скрипт който-форум.plпроверява кода на HTML страницата, за да види дали съдържа подписи на двигателя на форума. Използвахме подобна техника, когато дефинирахме WordPress и Joomla, но има няколко разлики. Първо, самият скрипт не зарежда кода на страницата, а го чете от stdin или файл, подаден като аргумент. Това ви позволява да изтеглите страницата веднъж, например с помощта на wget, и след това да я пуснете през няколко анализатора, ако имаме повече от един. Второ, в този скрипт наличието на подпис е 100% знак на двигателя. Последният път наличието на подпис само добави тежест към съответния двигател и двигателят с най-голямо тегло „спечели“. Реших, че в този случай подобен подход само ще усложни ненужно кода.
За да тествам сценария, направих някои изследвания. Съставих списък от няколко хиляди форума и прекарах всеки от тях през моя скрипт, като по този начин определих процента на програмните отговори и популярността на различните двигатели.
За да получа списъка с форуми, използвах моя анализатор на Google. Заявки като тази бяха изпратени до търсачката
и така нататък. Във файла ще намерите пълния код на генератора на заявки gen-forumsearch-urls.pl. Освен zone.ru са използвани и .su .ua .kz и .by. Последният път беше трудно да се проведе подобно проучване, тъй като сайтовете на WordPress и Joomla нямат такива подписи в URL адреса. Каталози като cmsmagazine.ru/catalogue/ не осигуряват достатъчен размер на извадката. Какво е 600 Drupal сайта?
Трябва да призная, резултатите от експеримента ме разочароваха. От изследваните 12 590 сайта, двигателят е идентифициран успешно само в 7 083, тоест само в 56% от случаите. Може би не съм взел предвид някой двигател? Вярно ли беше, че половината от форумите имат инсталиран Bitrix? Или трябваше да отделя повече време за търсене на подписи? По принцип тук са необходими допълнителни изследвания.
Сред 56% от успешно идентифицираните машини, най-популярните, както се очакваше, бяха IPB (31%), phpBB (26,6%) и vBulletin (26,5%)
Следват ги с голямо изоставане SMF (5.8%) и DLEForum (5.3%). Моят любим punBB беше едва на 6-то място (1,64%). Не бих препоръчал да се вярва много на тези цифри (казват, че всеки трети форум в RuNet работи на IPB), но някои изводи, разбира се, могат да бъдат направени.
Например, ако възнамерявате да направите сайт на форумна машина и планирате да модифицирате форума, да речем, да плащате на потребителите $0,01 за всяко съобщение с автоматично изтегляне на средства веднъж седмично, тогава трябва да изберете една от трите най-популярни машини. Колкото по-популярен е форумът, толкова по-големи са шансовете да намерите програмист, който го познава добре.
Ако не се очакват значителни промени в двигателя, тогава може да има смисъл да изберете по-малко популярен двигател, например SMF или punBB. Това ще намали броя на хакерските атаки към вашия форум и количеството спам, изпращан автоматично в него.
Скриптовете за търсене/идентифициране на форуми също могат да намерят много практически приложения. Първото нещо, което ми хрумна, беше да сортирам идентифицираните форуми по TIC и да публикувам на първите сто публикации с връзки към един от моите сайтове. Въпреки това, стотици форумни dofollow връзки не повлияха на TCI по никакъв начин (2 актуализации са минали), така че е по-добре да не губите време тук, освен ако не се интересувате от преходи.
Ясно е, че споменатото използване на скриптове далеч не е единственото. Мисля, че лесно можете да разберете как иначе можете да ги използвате.
Организирано от Botmaster Labs, не е планирано. Нямам време, видеото е необходимо за състезание, като новомодна тенденция, въпреки че всичко може да се обясни по-лесно с добри екранни снимки (моето IMHO) и наистина не искам да снимам нищо. Остават много малко печеливши теми, глупавият спам вече не управлява, трябва да мислите тук и никой няма да снима теми, освен ако не се опитате да поставите остарелите в красива обвивка и да ги напудрите малко. :) Но тук не става въпрос за нас. Като цяло, тези 3 „не трябва“, мисля, основно се превърнаха в бариери за участие в състезанието за мнозинството от потенциалните участници. Това е като ремонт на кола от три: евтино, качествено, бързо - услугата може да изпълни само 2 условия едновременно. седнете и изберете това, което е по-близо до вас. :) Същото е и със състезанието: имам време, знам как да направя клип, но няма тема, или знам как да направя клип, има тема, но нямам време всички, или имам свободно време и има малка тема, но видеото е страшно. Но това е добре, ако са изпълнени 2 условия едновременно. Е, добре, нека изхвърлим текста. Ще продължа за себе си. Не съм планирал, което означава, че участвах в конкурса, дори избрах за коя статия ще гласувам. Каквото и да кажете, Doz познава софтуера много добре и знае как да го използва много интелигентно. Но днес научих, че в състезанието се е появила интрига. Оказва се, че аз няма да мога да гласувам и само новодошлите, които са закупили софтуера през 2011 г., ще могат да направят това и състезанието е предназначено за тях. Бях малко изненадан, но собственикът е джентълмен. Състезанието е рекламна кампания и Александър знае по-добре как да я проведе. Като цяло тогава реших да публикувам статия, малко по-лесно е да се пише, когато е ясно за кого, за цялата колективна ферма, всъщност е невъзможно да се направи това. Дългото въведение приключи, сега към точката. Какво му трябва на начинаещ, когато е закупил такъв суперкомбайн, какъвто е комплексът Xrumer + Hrefer? Точно така, научете се как да работите върху това и отхвърлете илюзията, че можете да печелите пари, като започнете да спамите листове. Ако мислите така, по-добре дарете парите си за благотворителност веднага. Трябва да се научите как да използвате инструментите на комплекса, за предпочитане да го заточите за себе си. Времето на „вземи повече - хвърли по-далеч“ отмина. Количеството отстъпва на качеството. Това означава, че ще сглобим база за себе си; ако не се научите как да направите това, ще изостанете от влака. Естествено Khrefer ще ни помогне с това. Ако планирате да популяризирате ресурсите си в Google, тогава ние също трябва да търсим сайтове за дарители чрез Google. Мисля, че това е разбираемо и логично. Но Google, подобно на господарката на медната планина, не раздава богатството си на всеки. Имате нужда от подход към него. Бих искал да кажа веднага, че не се надявайте, че въз основа на знаците, които намирате в обществото, ще можете да съберете нещо. Причината да са публично достъпни е, че са безполезни. Няма да развивам повече темата. По-добре е да ви кажа как да го сглобите правилно, за да видите резултата, можете сами да изработите останалото, основното е да разберете принципа. Трябва да съберем правилните въз основа на характеристиките на конкретните двигатели, от които се нуждаем, а не на характеристиките на форумите като цяло. Това е основната грешка на начинаещите - да не се концентрират върху конкретно нещо, а да се опитват да обхванат всичко в неговата цялост. И също така, ако искате да анализирате повече или по-малко нормална база данни, спрете да използвате оператори в заявките. Без "inurl:", "site:", "title" и т.н. Google незабавно ще забрани търсачи като вас. Затова ние внимателно проучваме двигателите, с които Khrumer работи в момента:
Осъществено от php-Fusion
Във версия Khroomer 7.07 програмата е обучена на няколко нови двигателя:
forumi.biz, forumb.biz, 1forum.biz, 7forum.biz и др.
phpBB-fr.com, Solaris phpBB тема
И процесът на научаване на нови неща е непрекъснат. Като цяло трябва да подготвим правилните заявки за парсване от Hrefer. Да вземем за пример форума dizhok. SMF форуми. И нека започнем да го разглобяваме на резервни части за разбор. Нашият любим Google ще ни помогне с това. Въведете заявка в Google SMF форуми- има много боклук в резултатите от търсенето, превъртаме до някаква 13-та страница и избираме произволна връзка. Попаднах на този: http://www.volcanohost.com/forum/index.php?topic=11.0. Да го отворим и да го проучим. Трябва да намерим нещо характерно на страницата, което може да се приложи при търсенето на други страници на тази машина. В долния колонтитул забелязваме следния надпис Осъществено от SMF 1.1.14, цитирайте го и го въведете в Google, това ни показва, че за тази заявка знае около 59 милиона опции. Ние бързо преглеждаме връзките, добавяме още няколко опции към тази ключова дума, например, "Осъществено от SMF 1.1.14" тополаили "Осъществено от SMF 1.1.14" виагра. Уверяваме се, че заявката е страхотна, резултатите са само форуми и почти никакъв боклук.
Освен това нас не ни интересува количеството, а качеството, както казах по-горе. Продължавай. От същия форум вземаме още една фраза от долния колонтитул: , ние също го цитираме и подаваме на Google. В отговор той разкрива, че знае повече от 13 милиона резултата. Отново бързо преглеждаме резултатите, добавяме допълнителни думи и проверяваме резултатите с тях. Уверяваме се, че заявката е отлична и също така почти няма боклук. Като цяло вече има 2 заявки за желязо. Предлагам засега да оставим първия форум и да продължим да събираме заявки от други форуми. За щастие Google е отворен при поискване. 2006-2008, Simple Machines LLC. Ние вземаме от резултатите от търсенето например тези форуми: http://www.snowlinks.ru/forum/index.php?topic=1062.0 и http://litputnik.ru/forum/index.php?action=printpage ;topic=380.0 в долните колонтитули вземаме следните заявки от тях: „Осъществено от SMF 1.1.7“ и „Осъществено от SMF 1.1.10“ (винаги препоръчвам да въвеждате заявки за Hrefer в кавички, защото първо се нуждаем от качество всичко). Мисля, че е ясно какво правим, в крайна сметка ще имаме определена база данни от заявки за търсене във форуми на SMF двигателя (той беше избран като пример, същото и с други двигатели). Ще изглежда нещо подобно:
"Осъществено от SMF 1.1.2"
"Осъществено от SMF 1.1.3"
„Осъществено от SMF 1.1 RC2“
"Осъществено от SMF 1.1.4"
"Осъществено от SMF 1.1.8"
"Осъществено от SMF 1.1.7"
"2006-2008, Simple Machines LLC"
И това не е всичко. Докато събираме версии на двигателя, в някои SMF форуми намираме надписа „2001-2006, Lewis Media“ в долния колонтитул. Проверяваме тази заявка, тя също ни удовлетворява напълно. Откриваме подобна заявка: „2001-2005, Lewis Media“. Разглеждайки долните колонтитули по-нататък, намираме следната заявка: „SMFone дизайн от A.M.A, пренесен към SMF 1.1“. Проверяваме - супер. И така нататък. Половин час работа и имате чудесна база данни от заявки за двигателя, а Google ще ви банне за тези заявки много по-рядко, отколкото ако използвате оператори в тях. И в същото време вашата база данни ще бъде много по-чиста, отколкото ако използвате заявки като „index.php?topic=", защото тук Google ще даде не само форумите, от които се нуждаем, но и много леви ресурси, където е възможно оставете линк към темата във форума. Може да възразите, какво лошо има в това? Други оставиха връзка, така че и ние можем. Но! Връзките могат да бъдат оставени не само от Khrumer, но и от други програми. Освен това те могат да бъдат специално пригодени за оставяне на коментари на определен ресурс, така нареченият високоспециализиран софтуер, плюс такива връзки могат да бъдат оставяни на ръка. Пак повтарям, за нас не е важно количеството боклук, а качеството, ние ще съберем базата данни с правилните заявки. Предимството на този метод е, че на практика няма да е необходимо да конфигурирате сито -филтър
, можете просто да го изключите, защото Google практически няма да ви даде боклук.
Мисля, че научаването как да използвате правилно Hrumer в началния етап е много важно, защото след като научите това, винаги можете да намерите приложение за Hrumer, независимо как се променя ситуацията. Защитите стават все по-сложни и ако при някои типове двигатели защитата е засилена и Khrumer не може да се справи с нея в момента, тогава няма смисъл да харчите ресурси за събиране на тези връзки и след това да работите върху тях с Khroomer, по-добре е да концентрирате сили върху това, което дава резултати. И в същото време, ако екипът на Botmaster Labs научи Khroomer на нещо ново, можете бързо да дисектирате нов пациент и да подготвите основата за Khroomer, докато пациентът е все още топъл. Времето е пари; ресурсът може вече да не е подходящ, когато закупите базата. събрани от някого. В допълнение, правилното събиране на бази за себе си значително разширява „бялото“ използване на Khrumer. И точно там се движи всичко, искаме или не, и процесът на побеляване или посивяване тече непрекъснато. Черните чаршафи остават в миналото по всякакъв възможен начин. Всички други технически аспекти на работата с Hrefer могат да се видят в помощта и няма смисъл да се спираме на тях; всички цели, точки, секунди се задават експериментално за всяка кола поотделно. Като бонус ще публикувам тук шаблон за анализиране на китайската търсачка Baidu, онзи ден ме попитаха за това, така че го направих небрежно, извинете за играта на думи. :)
Опитах се да ги тествам за анализиране, нямаше забрана, Khrefer събра ресурси бързо, всички заявки за анализиране бяха подобни на тези на Google, но имаше много китайски ресурси с висок PR и освен това имаше много места, където не Европеец някога е стъпвал. По-добре е да анализирате китайски заявки. Google translate ще ви помогне с това, въведете списък с ключови думи на руски и го преведете на китайски. Истината в " Думи„Hrefer думи не могат да се добавят на китайски, те трябва да бъдат прекодирани. Вместо китайски:
伟哥 - Виагра
吉他 - китара
其他 - почивка
保险公司 - застраховка
Поставете тези заместващи кодове във файла на Words:
%E4%BC%9F%E5%93%A5
%E5%90%89%E4%BB%96
%E5%85%B6%E4%BB%96
%E4%BF%9D%E9%99%A9%E5%85%AC%E5%8F%B8
Ако популяризирате застрахователен уебсайт, тогава като поставите връзка в профила си на тематичен (!) дори китайски форум, намерен по заявка " SMF форум" 保险公司ще бъде много добре. В заключение бих искал да кажа, че никога не съм разбирал хората, които се оплакват, че Хреферите са приготвени зле или лошо; в отговор на това винаги съм искал да кажа, че просто не знаете как да ги приготвите. Никой анализатор не може да събира резултати по-добре от референт; заявките просто трябва да са правилни. Хрефер е кола: хубава, здрава, немска, но се кара от човек и всичко зависи от това как се кара, не можеш да караш колата да кара едновременно и надясно, и наляво. Отделна тема е почистването на бази данни, веднъж го направих преди 3 години за предишно състезание. В по-голямата си част всичко все още е уместно там, но сега можете да откажете да проверите за 200 OK, наистина не ми хареса този процес, имаше много големи грешки, много ненужни неща бяха филтрирани. Сега това може да се направи почти автоматично по време на работа на Khrumer, въпреки че този процес не е пълен аналог на проверката за „200 OK“. Както и да е, към точката: неотдавна в Khrumer се появи чудесна възможност - да ограбите информация от ресурси по време на изпълнение на проект. Изглежда така. Вие въвеждате шаблон, който ще бъде обработен по време на работа, а информацията, събрана от шаблона, ще бъде въведена във файла xgrabbed.txt в папката Logs. Можете да използвате тази функция за всичко, полетът на въображението е огромен. Използвам тази функция веднъж седмично, за да премахвам връзки от моята работеща „изтекла“ база данни. Не е тайна, че форумите умират всеки ден, за да изчистим нашата база данни от такива ресурси, а инструментът „Autograbbing“ ще ни помогне в този случай. В края на краищата трябва да признаете, че когато често въвеждаме, например, http://www.laptopace.com/index.php, виждаме, че този домейн вече е, например, добър човек, който продава пари, но няма форум там. Така че, за да изхвърлим тази шлака от базата, ние ще ограбим. :) Отворете изходния код на страницата и вижте този запис там:
laptopace.com
За грабване го трансформираме в
[...]
Сега всички „мъртви мъже“ от Goudaddi ще ни бъдат известни по име. Ето малка селекция за инструмента Autograbbing, ако искате да изчистите базата данни от различни „изтекли“ домейни:
