<\/div>\n

Her ne kadar etik olmasada programc\u0131lar\u0131n hatta genellikle web site programc\u0131lar\u0131n\u0131n en b\u00fcy\u00fck hizmetkar\u0131 olacak olan i\u00e7erik \u00e7ekme botlar\u0131n\u0131n yap\u0131m\u0131ndan bahsedece\u011fiz.Ge\u00e7enlerde bir i\u015fimden dolay\u0131 yazmak zorunda oldu\u011fum bir bot i\u00e7in internette s\u00fcrekli detayl\u0131 bir ara\u015ft\u0131rmada bulundum.Yabanc\u0131 sitelerde dahil olmak \u00fczere genellikle <title><\/em>\u00a0etiketi i\u00e7indeki veriyi \u00e7eken programlarla \u00f6rneklendirme yap\u0131lm\u0131\u015f.Hatta \u00e7o\u011fu sitede ayn\u0131 kodlar al\u0131nt\u0131 edilmi\u015f.Haliyle bende bu kodlar \u00fczerinden yola \u00e7\u0131k\u0131p belirli de\u011fi\u015fiklikler neticesinde ihtiyac\u0131m olan botu geli\u015ftirebildim.Tabi bu yaz\u0131m\u0131zda \u00f6rneklendirme olarak <title><\/em> etiketinden ba\u015fka bir alan\u0131n i\u00e7eri\u011fini \u00e7ekmeyi g\u00f6rece\u011fiz.Bilmenizi isterim ki, algoritmik mant\u0131\u011f\u0131n\u0131z\u0131 kurup kendi ihtiyac\u0131n\u0131z olan botlar\u0131 \u00e7ok rahat bir \u015fekilde olu\u015fturabilirsiniz.Sadece biraz zahmet ve emek isteyen bir i\u015ftir.\u015eimdi gelin yaz\u0131m\u0131z\u0131n i\u00e7eri\u011fini irdeleyelim.
\n
\n\u0130ster Asp.NET ya da Asp.NET MVC mimarisi olsun, istersede C# masa\u00fcst\u00fc mimarisi farketmez.Sonu\u00e7ta kodlar\u0131m\u0131z standart C# kodlar\u0131 olaca\u011f\u0131 i\u00e7in her .NET platformuna uygun \u00e7al\u0131\u015fabilmektedir.Bu y\u00fczden ben \u00f6rnek olarak C# Console Application projesinde \u00f6rneklendirme yapaca\u011f\u0131m.<\/p>\n

\u00d6ncelikle i\u00e7eri\u011fin \u00e7ekilece\u011fi web siteyi belirlememiz gerekmektedir.Ben kendi sitem olan http:\/\/www.gencayyildiz.com<\/a> adresinden a\u015fa\u011f\u0131daki g\u00f6r\u00fcnt\u00fcde olan alan\u0131n bilgisini \u00e7ekecek \u00f6rnek bir program olu\u015fturaca\u011f\u0131m.
\n $\"www.gencayyildiz.com\"$ <\/a>
\nG\u00f6r\u00fcnt\u00fcde de g\u00f6rd\u00fc\u011f\u00fcn\u00fcz gibi “Kod yazmak bir sanatt\u0131r…” yaz\u0131s\u0131n\u0131 C# ile \u00e7ekece\u011fiz.Programatik olarak mevzuya girmeden \u00f6nce i\u00e7eri\u011fini \u00e7ekece\u011fimiz sitenin kaynak kodlar\u0131n\u0131 incelememiz gerekmektedir.
\nKaynak kodlar i\u00e7in web sitesinde sa\u011f t\u0131klayarak “Sayfa kayna\u011f\u0131n\u0131 g\u00f6r\u00fcnt\u00fcle” se\u00e7ene\u011fine t\u0131klamam\u0131z gerekmektedir.Kar\u015f\u0131m\u0131za bu sitenin HTML\/CSS\/JavaScript vs. gibisinden kaynak kodlar\u0131 gelecektir.Bu kaynak kodlar\u0131n aras\u0131ndan ilgili alan\u0131 bulmam\u0131z gerekmektedir.
\n $\"kaynakkodlari\"$ <\/a>
\nYukar\u0131daki resimde g\u00f6rd\u00fc\u011f\u00fcn\u00fcz gibi \u00e7ekece\u011fimiz i\u00e7eri\u011fi kaynak kodlar\u0131nda bulmu\u015f olduk.<\/p>\n

\u015eimdi buraya kadar tamam.\u015eimdi programatik olarak algoritmam\u0131z\u0131 kurup, bu kaynak kodlar\u0131ndaki HTML\/CSS kodlar aras\u0131ndan bu i\u00e7eri\u011fe nas\u0131l ula\u015faca\u011f\u0131m\u0131z\u0131 yapal\u0131m.<\/p>\n

\u00d6ncelikle System.Net<\/em><\/span> k\u00fct\u00fcphanesinde bulunan HttpWebRequest s\u0131n\u0131f\u0131m\u0131z sayesinde\u00a0http:\/\/www.gencayyildiz.com<\/a> adresine ba\u011flant\u0131 talebi yapal\u0131m.<\/p>\n

\r\n            WebRequest SiteyeBaglantiTalebi = HttpWebRequest.Create("http:\/\/www.gencayyildiz.com");\r\n<\/pre>\nG\u00f6rd\u00fc\u011f\u00fcn\u00fcz gibi ba\u011flant\u0131 talebini WebRequest tipinden bir referansa atam\u0131\u015f olduk.\u015eimdi bu talep neticesinde gelen cevab\u0131 WebResponse referans\u0131na alal\u0131m.<\/p>\n\r\n            WebResponse GelenCevap = SiteyeBaglantiTalebi.GetResponse();\r\n<\/pre>\n\u015eimdi gelen cevab\u0131 okuyal\u0131m.<\/p>\n\r\n            StreamReader CevapOku = new StreamReader(GelenCevap.GetResponseStream());\r\n<\/pre>\nOkudu\u011fumuz cevab\u0131 System.IO<\/em><\/span> k\u00fct\u00fcphanesinde bulunan StreamReader tipinden referansa atad\u0131k.<\/p>\n
\u015eimdi StreamReader tipinden olan CevapOku isimli referans\u0131m\u0131z\u0131n temsil etti\u011fi nesnemizde i\u00e7erik \u00e7ekece\u011fimiz sitenin b\u00fct\u00fcn kaynak kodlar\u0131 bulunmaktad\u0131r.Bu kaynak kodlar\u0131 bir string tipten de\u011fi\u015fkene atamak daha kullan\u0131\u015fl\u0131 olacakt\u0131r.<\/p>\n\r\n            string KaynakKodlar = CevapOku.ReadToEnd();\r\n<\/pre>\nEvet art\u0131k KaynakKodlar isimli string de\u011fi\u015fkenimizde i\u00e7erik \u00e7ekece\u011fimiz sitenin kaynak kodlar\u0131 mevcuttur.Bundan sonra string metodlar\u0131n\u0131 kullanarak rahat rahat i\u00e7eri\u011fimizi \u00e7ekebiliriz.<\/p>\n\r\n            int IcerikBaslangicIndex = KaynakKodlar.IndexOf("<h6>") + 4;\r\n<\/pre>\nBurada yapt\u0131\u011f\u0131m\u0131z i\u015f KaynakKodlar de\u011fi\u015fkeninde bulunan\u00a0<h6>\u00a0etiketinin index numaras\u0131na ula\u015f\u0131p bu index numaras\u0131na +4 ekliyoruz.Bu +4 \u00fcn sebebi ise\u00a0<h6> etiketi i\u00e7indeki yaz\u0131y\u0131 alaca\u011f\u0131m\u0131zdan dolay\u0131\u00a0<h6> etiketinin karakter say\u0131s\u0131n\u0131da ekliyoruz ki sadece i\u00e7indeki yazan yaz\u0131y\u0131 \u00e7ekebilelim.Yani index numaras\u0131 tam\u00a0<h6> etiketinin biti\u015fine, i\u00e7inden de alaca\u011f\u0131m\u0131z i\u00e7eri\u011fin ba\u015flang\u0131c\u0131na denk gelmektedir.
\n\u015eimdi s\u0131ra ba\u015flang\u0131\u00e7 indexi ile biti\u015f indexi aras\u0131ndaki i\u00e7eri\u011fi ald\u0131rmak i\u00e7in biti\u015f indexsini bulmakta.<\/p>\n\r\n            int IcerikBitisIndex = KaynakKodlar.Substring(IcerikBaslangicIndex).IndexOf("<\/h6>");\r\n<\/pre>\nBizim \u00e7ekmek istedi\u011fimiz de\u011fer <h6> ile <\/h6> aras\u0131nda bulundu\u011fundan dolay\u0131 bir \u00f6nceki IcerikBaslangicIndex isimli de\u011fi\u015fken de\u011ferinden , <\/h6> etiketinin biti\u015f indexine kadar olan fark\u0131 al\u0131yoruz.<\/p>\n
Art\u0131k s\u0131ra bu indexler aras\u0131ndaki de\u011feri \u00e7ekip ihtiyac\u0131m\u0131za g\u00f6re kullanmaya geliyor.<\/p>\n\r\n            Console.WriteLine(KaynakKodlar.Substring(IcerikBaslangicIndex, IcerikBitisIndex));\r\n<\/pre>\nArt\u0131k program\u0131m\u0131z\u0131 derleyip \u00e7al\u0131\u015ft\u0131rd\u0131\u011f\u0131m\u0131zda istedi\u011fimiz veriyi kaynak siteden \u00e7ekip elde etmi\u015f oluyoruz.
\n<\/a><\/p>\n
G\u00f6rd\u00fc\u011f\u00fcn\u00fcz gibi bot yap\u0131m\u0131 bu kadar basit bir i\u015flem.Tabi HTML\/CSS kodlar\u0131 kompleks olan sitelerden i\u00e7erik \u00e7ekmek daha zor ve algoritmik emek isteyen bir i\u015ftir.Ama temel olarak bu yap\u0131y\u0131 benimserseniz ihtiyac\u0131n\u0131z\u0131 kar\u015f\u0131layacak her t\u00fcrl\u00fc botu olu\u015fturabilirsiniz.<\/p>\n
Bunu geli\u015ftirmek sizin elinizde..<\/p>\n
Son kez kodlar\u0131n tam derlenmi\u015f halini payla\u015f\u0131p yaz\u0131m\u0131z\u0131 sonland\u0131r\u0131yorum.<\/p>\n
\r\n            WebRequest SiteyeBaglantiTalebi = HttpWebRequest.Create("http:\/\/www.gencayyildiz.com");\r\n            WebResponse GelenCevap = SiteyeBaglantiTalebi.GetResponse();\r\n            StreamReader CevapOku = new StreamReader(GelenCevap.GetResponseStream());\r\n            string KaynakKodlar = CevapOku.ReadToEnd();\r\n            int IcerikBaslangicIndex = KaynakKodlar.IndexOf("<h6>") + 4;\r\n            int IcerikBitisIndex = KaynakKodlar.Substring(IcerikBaslangicIndex).IndexOf("<\/h6>");\r\n\r\n            Console.WriteLine(KaynakKodlar.Substring(IcerikBaslangicIndex, IcerikBitisIndex));\r\n            Console.Read();\r\n<\/pre>\nFaydalanman\u0131z ve bir sonraki yaz\u0131mda g\u00f6r\u00fc\u015fmek dile\u011fiyle…
\n\u0130yi \u00e7al\u0131\u015fmalar..<\/p>\n","protected":false},"excerpt":{"rendered":"
Her ne kadar etik olmasada programc\u0131lar\u0131n hatta genellikle web site programc\u0131lar\u0131n\u0131n en b\u00fcy\u00fck hizmetkar\u0131 olacak olan i\u00e7erik \u00e7ekme botlar\u0131n\u0131n yap\u0131m\u0131ndan bahsedece\u011fiz.Ge\u00e7enlerde bir i\u015fimden dolay\u0131 yazmak zorunda oldu\u011fum bir bot i\u00e7in internette s\u00fcrekli detayl\u0131 bir...<\/p>\n","protected":false},"author":1,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[12],"tags":[464,27],"class_list":["post-1857","post","type-post","status-publish","format-standard","hentry","category-c-sharp-c","tag-bot","tag-c"],"amp_enabled":true,"_links":{"self":[{"href":"https:\/\/www.gencayyildiz.com\/blog\/wp-json\/wp\/v2\/posts\/1857","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.gencayyildiz.com\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.gencayyildiz.com\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.gencayyildiz.com\/blog\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/www.gencayyildiz.com\/blog\/wp-json\/wp\/v2\/comments?post=1857"}],"version-history":[{"count":0,"href":"https:\/\/www.gencayyildiz.com\/blog\/wp-json\/wp\/v2\/posts\/1857\/revisions"}],"wp:attachment":[{"href":"https:\/\/www.gencayyildiz.com\/blog\/wp-json\/wp\/v2\/media?parent=1857"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.gencayyildiz.com\/blog\/wp-json\/wp\/v2\/categories?post=1857"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.gencayyildiz.com\/blog\/wp-json\/wp\/v2\/tags?post=1857"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}