~ Just do I(nformation)T(echnology) ~

Kerberos configuration tool for SQL Server

2013-05-24T11:08:59Z

SharePoint experts must love to hurt themselves. How else do we go through the pain of configuring Kerberos or getting User Profile Service to work.
Oh yeah don't forget the endless variations in Service Application configuration. There is a different way of doing things for every freakin' one of them.

Off course every one of us has their own bag of tricks scripts to help out. And for the sorry souls out there that don't …. Well …
At least now getting Kerberos to work can get a lot easier if you use the recently released Kerberos configuration tool for SQL Server.

It is a simple tool that connects to a server containing SQL compontents (for example: DB engine, analysis services, and reporting services), and checks AD if the appropriate SPNs are set.
It also lets you generate the scripts to configure them if they are not. Pretty neat huh?

Obviously this is not the entire story when it comes to configuring Kerberos for various scenarios within SharePoint, but it does does hurt a whole lot less if you use tools like these.

For more information on the tool, go to http://blogs.msdn.com/b/analysisservices/archive/2013/05/23/released-kerberos-configuration-manager-for-sql-server.aspx

For more information on configuring Kerberos for SharePoint, go to http://technet.microsoft.com/en-us/library/ee806870.aspx

Beware of IIS authentication settings when deploying SharePoint 2013

2013-05-13T10:04:00Z

Recently I worked on an interesting case during one that was blocking deployment of one of the SharePoint 2013 projects I was working for.
Basically what happened was that although deployment of SharePoint went well, some of the Service Applications like Managed Metadata, User Profile Service, Business Connectivity Services, and Search did not work properly. The symptoms varies, but a common error message in the ULS logs stated:

02/27/2013 09:58:52.07 w3wp.exe (0x1910) 0x2428 SharePoint Server Taxonomy ca42 Medium Exception returned from back end service. System.ServiceModel.FaultException`1[System.ServiceModel.ExceptionDetail]:
AccessDeniedEx:The current user has insufficient permissions to perform this operation. (FaultDetail is equal to An ExceptionDetail, likely created by IncludeExceptionDetailInFaults=true, whose value is: System.UnauthorizedAccessException: AccessDenied Ex:The current user has insufficient permissions to perform this operation. at Microsoft.SharePoint.Taxonomy.MetadataWebServiceApplication.GetServiceSettings(GuidrawPartitionId) at SyncInvokeGetServiceSettings(Object , Object[] , Object[] ) at System.ServiceModel.Dispatcher.SyncMethodInvoker.Invoke(Object instance, Object[] inputs, Object[]& outputs) at System.ServiceModel.Dispatcher.DispatchOperationRuntime.In... 5510ed21-c1ef- 4b6f-8305-33afc4200a76

Also after doing some WCF tracing I found that there was an interesting claim in the SAML token (as part of Service Application authentication; Remember... Everything in the Service app world is claims):
<saml:Attribute AttributeName="isauthenticated" AttributeNamespace="http://sharepoint.microsoft.com/claims/2009/08" a:OriginalIssuer="SecurityTokenService" xmlns:a="http://schemas.xmlsoap.org/ws/2009/09/identity/claims">
<saml:AttributeValue>False</saml:AttributeValue>

Clearly there is something fishy going on here J.

After working on this for most part of a week, even with help of my colleagues at Premier Support, we were not able to nail this one down. Fortunately someone at the customer remembered running into similar issues with a SharePoint 2010 project they did years back.
The solution for that problem was to set the advanced Anonymous Authentication settings of the IIS root node to IUSR:

http://technet.microsoft.com/en-us/library/cc770966(v=WS.10).aspx

Using a default Windows deployment will not require you to do this, but this customer in particular followed a "customize if possible" strategy for their Windows build images, and changing this setting (among many others) to a non-default setting of "Application Pool identity".

I have tried to find out why this breaks SharePoint functionality so severely, but was unable to. (If you know, please post to the comments!).

Fortunately we were able to move forward with the project. I hope I can help at least one of you peeps out there, by posting this!

Always have a root site collection!!!

2012-11-07T16:32:27Z

So today I spend most part of the day troubleshooting an issue with catalogs and host named site collections (HNSC) in SharePoint 2013.
I created a basic cross site publishing scenario where I had a path based authoring site http://intranet.contoso.com/sites/authoring and a HNSC publishing site http://www.publishing.com
All was going smooth, untill I wanted to consume the catalog. The catalog connection was found, but the navigation term set was for some reason not reachable from the HSNC. The error was thrown:

"We could not find the navigation term set for this site. Navigation integration and friendly URLs will not be configured"

I dove into ULSViewer, but there was nothing whatsoever in the logs that would indicate an issue. The term set was even reachable using the Term Store manager from the HSNC.
During the troubleshooting I noticed the root site collection did not exist, so I created one, but did not give much notice to it, until I was remembered by a fellow MCM that not having a root site collection could be an issue.

So I created a new HSNC and it just worked for that site. All other older HSNCs still did not work. The only way to get them to work was to delete the site collection and recreate it.

I have no details as to what exactly is the reason (there is an article specific to SharePoint 2010 http://support.microsoft.com/kb/2590564 ), but just remember:

Children beware! Always have a root site collection!

(this does not only apply to this issue; there are many other reasons why you would need it!)

Netmons’ big brother is. Say hello to Message Analyzer

2012-09-20T08:40:50Z

If you're serious about SharePoint, you know Netmon. Well, if you like Netmon, then meet his big brother Message Analyzer

It's like Netmon on steroids J…

There is a lot to tell about this tool, but I won't. Hey I'm a SharePoint geek, I have better things to do!

What I can tell you is that cool things have been added like payload rendering, statistics views, and proxy capturing (ala Fiddler) which makes our lives a lot easier.
Just take a look at the juice screenshot where I'm peeking in the HTTPs stream of the Connect site. Lovely!!

So get the beta from Connect and do some testing yourself!!!

SharePoint 2013 Preview – Hungry search service

2012-09-05T18:54:00Z

Due to the many response I get: This post was written specifically for the Preview of SharePoint 2013
The memory leak is resolved in RTM. Please do not apply the memory settings in production!

Just today there was some discussion on our internal DLs about the noderunner.exe processes of the Enterprise Search service being very hungry for CPU and RAM.

It turns out that there is a memory leak and a lot of debug code involved [REMEMBER: We are still at beta here J].

Jose Vigenor from MS beta support pointed to two options to contain these processes:

Use Set-SPEnterpriseSearchService -PerformanceLevel Reduced to reduce the CPU impact the search service has on your test environment.
Modify the C:\Program Files\Microsoft Office Servers\15.0\Search\Runtime\1.0\noderunner.exe.config so that it can only consume X amount of RAM.
Change the value at <nodeRunnerSettings memoryLimitMegabytes="0" /> to any amount of RAM you like to contain the memory leak.

Good luck!

SharePoint 2013 Preview Newsfeeds showing nothing

2012-08-20T09:41:00Z

So you've build your farm, configured Manage Metadata, Search, User Profile Service and Mysites. The first thing you obviously want to check out are the cool new social features.
You login and fire off your first post, in anticipation of the reactions of your fellow social pioneers in your company.

A day goes by but, nothing happens… What is going on here?
You check your feed but it keeps saying "We're still collection the latest news. You may see more if you try again a little later."
There must be something wrong here. When you crank up the ULS logs to verbose on the Microfeeds and User Profiles categories in the ULS logs:

"Microfeeds", "User Profiles" | Set-SPLogLevel -TraceSeverity Verbose

you will find a strange message stating the User Profile Service Application Proxy is not available:

nasq Medium Entering monitored scope (SPMicrofeedFeedCacheService.GetPublishedFeed). Parent FeedCacheService.GetPublishedFeed e554c59b-9365-2015-6119-380e065adfbb

d22b High Failure retrieving application ID for User Profile Application Proxy 'User Profile Service Application 2': Microsoft.Office.Server.UserProfiles.UserProfileApplicationNotAvailableException: UserProfileApplicationNotAvailableException_Logging :: UserProfileApplicationProxy.ApplicationProperties ProfilePropertyCache does not have 5c3e254a-4ab9-4736-a5f1-58d582d1d6d0 at Microsoft.Office.Server.Administration.UserProfileApplicationProxy.get_ApplicationProperties() at Microsoft.Office.Server.Administration.UserProfileApplicationProxy.get_AppID() e554c59b-9365-2015-6119-380e065adfbb

ahv64 High SPMicrofeedFeedCacheService.GetUserProfile() - UserProfileApplicationProxy not available e554c59b-9365-2015-6119-380e065adfbb

b4ly Medium Leaving Monitored Scope (SPMicrofeedFeedCacheService.GetPublishedFeed). Execution Time=2.064 e554c59b-9365-2015-6119-380e065adfbb

At first it did not hit home for me, but then I remembered similar issues when using powershell to manage the UPA back in SharePoint 2010. This was basically solved by granted (sharing) permissions to the UPA proxy.

The problem in this case is that my MySites are hosted in a different application pool from my UPA service application. Although the MySites application pool account is added, the service app application pool account is not.

Either grant the application pool account hosting the UPA Sharing Permissions through Central Admin:

Or use the following powershell script:

$account = New-SPClaimsPrincipal <domain\user> -IdentityType WindowsSamAccountName

$UPA = Get-SPServiceApplication <ID>

$sec = Get-SPServiceApplicationSecurity $UPA

Grant-SPObjectSecurity $sec2 -Principal $account -Rights "Full Control"

Set-SPServiceApplicationSecurity -Identity $UPA -ObjectSecurity $sec

The magic happens, and voila; the feeds start showing!

Sharing permissions for Authenticated Users in SharePoint 2013 Preview

2012-08-17T09:18:00Z

I actually feel a bit embarrassed about this one, but then I thought... OK, maybe if I'm struggling with this, there must be other fools out there that are as well.

So picture this… I'm building my SharePoint farm and creating my Contoso Intranet portal, and one of the first things you do when you have created your publication portal, is add Authenticated Users to the visitors group…

Hey, what's a portal without users right?

But then it hits… WTF is this screen? Where is my people picker? Well.. it's no longer there in lots of places where we add permissions.

So I start typing but No Results. I try all sorts of combinations, but no joy.
I end up searching the web, but I seem to be the only poor soul not being able to crack this nut.

Then it hits me. I'm better than that stinking dialog. I just type 'NT AUTHORITY\AUTHENTICATED USERS' and press Share.

Voila! SPUser added, and after having signed in as another user, it even works.

TAKE THAT YOU EVIL DIALOG!!!

Logging in as a different user in SharePoint 2013 Preview

2012-08-17T09:04:53Z

When you start to play with SharePoint 2013 preview you will soon find that our good ol' 'Sign in as a different user' is gone:

Not sure why they have removed it. As there are some issues with this (even in 2010), I think it might be done because of that, but for most people this will be missed.
Luckily this is only a cosmetic change, as the plumbing is still there.

There are three ways of doing this:

Just add the following to the url: /_layouts/closeConnection.aspx?loginasanotheruser=true
Start your browser as another user
Hack welcome.ascx by adding the code below before the SharePoint:MenuItemTemplate tag with id ID_RequestAccess
(http://nickgrattan.wordpress.com/2012/07/23/sign-in-as-different-user-and-sharepoint-2013/ )

<SharePoint:MenuItemTemplate runat="server" ID="ID_LoginAsDifferentUser"
Text="<%$Resources:wss,personalactions_loginasdifferentuser%>"
Description="<%$Resources:wss,personalactions_loginasdifferentuserdescription%>"
MenuGroupId="100"
Sequence="100"
UseShortId="true"
/>

Obviously modifying control templates is not something we should be doing once the product goes RTM. Lets hope product group decides to put everything back where it belongs J

SharePoint 2013 is coming

2012-08-17T08:52:55Z

Anyone doing SharePoint and hasn't been living under a rock for the last months, has heard the buzz around SharePoint 2013.
The Preview has been released, so the release is coming closer!

This means its time for me as well to get acquainted with the product. Given my busy schedule I haven't had much time to do so.

The coming weeks I will spend time writing some posts about the things I see and find in this new product.

Enjoy!

Going Dutch the wrong way

2012-08-17T08:46:40Z

My blog contains only Dutch articles, but on several occasions I have been asked if I wouldn't start writing in English (Google translate sucks balls J).
I therefore decided to continue this blog with only English content, as all Dutch people speak and read English anyways.

Enjoy!

Load balancing en FBA claims

2012-06-22T09:36:22Z

Zoals Steve Peschka een tijd geleden al poste op zijn blog, is het voor claims belangrijk om te zorgen dat er enige vorm van affinity plaats vind op de load balancer om te zorgen dat een gebruiker gedurende zijn sessie op dezelfde server blijft.
Zie:

http://blogs.technet.com/b/speschka/archive/2011/10/28/make-sure-you-know-this-about-sharepoint-2010-claims-authentication-sticky-sessions-are-required.aspx
http://technet.microsoft.com/en-us/library/cc288475.aspx

Important:

You need to set network load balancing to single affinity when using claims-based authentication. If you use SAML token-based authentication with AD FS on a SharePoint Foundation 2010 farm that has multiple Web servers in a load-balanced configuration, there will be an effect on the performance and functionality of client Web-page views. When AD FS provides the authentication token to the client, that token is submitted to SharePoint Foundation 2010 for each permission-restricted page element. If the load-balanced solution is not using affinity, each secured element is authenticated to more than one SharePoint Foundation 2010 server, which will result in rejection of the token. After the token is rejected, SharePoint Foundation 2010 redirects the client to authenticate again back to the AD FS server. After this occurs, an AD FS server will reject multiple requests that are made in a short time period. This behavior is by design, to protect against a denial of service attack. If performance is adversely affected or pages do not load completely, set network load balancing to single affinity. This isolates the requests for SAML tokens to a single Web server.

For information about configuring Active Directory Federation Services (AD FS) 2.0 in SharePoint Foundation 2010, see How to configure AD FS v 2.0 in SharePoint Foundation 2010.

Nu gaan deze artikelen eigenlijk specifiek over federated claims, maar een probleem bij een klant laatst, welke forms based authentication draaide, liet zien dat het ook geldt voor FBA claims. Wat je in onderstaande ULS melding kunt zien is dat het opvragen van resources vanuit dezelfde library voor dezelfde page render de ene keer via de ene server gaat, en de andere keer via de ander. De ene keer gaat het mis, en de andere keer goed.
Het bizarre van dit probleem is dat het heel sporadisch gebeurd. Honderden, zo niet duizenden requests gaat het goed, en ineens gaat het mis. Terwijl ook in die voorgaande duizenden de requests over beide servers gaan.
Men weet nog niet precies wat het veroorzaakt.

Echter zolang je zorgt dat gedurende de levensduur van het FedAuth cookie (wat gebruikt wordt door SharePoint om het user token op te vragen en te autoriseren), een gebruiker niet op een andere server komt als waar het gegenereerd is, zal je het probleem dus niet hebben.

Request 1

Timestamp Process TID Area Category EventID Level Message Correlation

06/21/2012 00:50:03.59 w3wp.exe (SERVER33:0x1448) 0x0E90 SharePoint Foundation Logging Correlation Data xmnv Medium Name=Request (GET:http://uk-applicatie-ut-pb.Klant.com/PublishingImages/Klant.U2.Images/bg-body.gif) 39f695df-034c-4cf5-bfb7-822ae2b18aaa

06/21/2012 00:50:03.59 w3wp.exe (SERVER33:0x1448) 0x0998 SharePoint Foundation General af71 Medium HTTP Request method: GET 39f695df-034c-4cf5-bfb7-822ae2b18aaa

06/21/2012 00:50:03.59 w3wp.exe (SERVER33:0x1448) 0x0998 SharePoint Foundation General af75 Medium Overridden HTTP request method: GET 39f695df-034c-4cf5-bfb7-822ae2b18aaa

06/21/2012 00:50:03.59 w3wp.exe (SERVER33:0x1448) 0x0998 SharePoint Foundation General af74 Medium HTTP request URL: /PublishingImages/Klant.U2.Images/bg-body.gif 39f695df-034c-4cf5-bfb7-822ae2b18aaa

06/21/2012 00:50:03.60 w3wp.exe (SERVER33:0x1448) 0x0E90 SharePoint Foundation Monitoring b4ly Medium Leaving Monitored Scope (Request (GET:http://uk-applicatie-ut-pb.Klant.com/PublishingImages/Klant.U2.Images/bg-body.gif)). Execution Time=12.1881412302402 39f695df-034c-4cf5-bfb7-822ae2b18aaa

Request 2

Timestamp Process TID Area Category EventID Level Message Correlation

06/21/2012 00:50:03.49 w3wp.exe (SERVER32:0x284C) 0x1920 SharePoint Foundation Logging Correlation Data xmnv Medium Name=Request (GET:http://uk-applicatie-ut-pb.Klant.com/PublishingImages/POImage_logo_gb_en-GB.png) 8e77396a-0c94-4b52-9555-63d58aa804cc

06/21/2012 00:50:03.51 w3wp.exe (SERVER32:0x284C) 0x1920 SharePoint Foundation Claims Authentication fsq7 High Request for security token failed with exception: System.ServiceModel.FaultException: The security token username and password could not be validated. at Microsoft.IdentityModel.Protocols.WSTrust.WSTrustChannel.ReadResponse(Message response) at Microsoft.IdentityModel.Protocols.WSTrust.WSTrustChannel.Issue(RequestSecurityToken rst, RequestSecurityTokenResponse& rstr) at Microsoft.IdentityModel.Protocols.WSTrust.WSTrustChannel.Issue(RequestSecurityToken rst) at Microsoft.SharePoint.SPSecurityContext.SecurityTokenForContext(Uri context, Boolean bearerToken, SecurityToken onBehalfOf, SecurityToken actAs, SecurityToken delegateTo) 8e77396a-0c94-4b52-9555-63d58aa804cc

06/21/2012 00:50:03.51 w3wp.exe (SERVER32:0x284C) 0x1920 SharePoint Foundation Claims Authentication 8306 Critical An exception occurred when trying to issue security token: The security token username and password could not be validated.. 8e77396a-0c94-4b52-9555-63d58aa804cc

06/21/2012 00:50:03.51 w3wp.exe (SERVER32:0x284C) 0x1920 SharePoint Foundation Claims Authentication 0000 Unexpected Could not rebuild forms user token. 8e77396a-0c94-4b52-9555-63d58aa804cc

06/21/2012 00:50:03.51 w3wp.exe (SERVER32:0x284C) 0x0914 SharePoint Foundation General af71 Medium HTTP Request method: GET 8e77396a-0c94-4b52-9555-63d58aa804cc

06/21/2012 00:50:03.51 w3wp.exe (SERVER32:0x284C) 0x0914 SharePoint Foundation General af75 Medium Overridden HTTP request method: GET 8e77396a-0c94-4b52-9555-63d58aa804cc

06/21/2012 00:50:03.51 w3wp.exe (SERVER32:0x284C) 0x0914 SharePoint Foundation General af74 Medium HTTP request URL: /PublishingImages/POImage_logo_gb_en-GB.png 8e77396a-0c94-4b52-9555-63d58aa804cc

06/21/2012 00:50:03.52 w3wp.exe (SERVER32:0x284C) 0x1920 SharePoint Foundation Logging Correlation Data xmnv Medium Site=/ 8e77396a-0c94-4b52-9555-63d58aa804cc

06/21/2012 00:50:03.52 w3wp.exe (SERVER32:0x284C) 0x1920 SharePoint Foundation Monitoring b4ly High Leaving Monitored Scope (PostRequestExecuteHandler). Execution Time=11.3106554045277 8e77396a-0c94-4b52-9555-63d58aa804cc

06/21/2012 00:50:03.52 w3wp.exe (SERVER32:0x284C) 0x1920 SharePoint Foundation Monitoring b4ly Medium Leaving Monitored Scope (Request (GET:http://uk-applicatie-ut-pb.Klant.com/PublishingImages/POImage_logo_gb_en-GB.png)). Execution Time=44.8073707691899 8e77396a-0c94-4b52-9555-63d58aa804cc

Succes!!!

SNAP maakt debugging iets makkelijker

2012-05-07T13:05:00Z

Wanneer je iets meer informatie nodig hebt dan dat de standaard tools zoals Developer Dashboard, Fiddler, Failed Request Tracing, en noem ze maar op, je bieden, kom je al snel uit bij meer hardcore tools als debuggers en profiles. Nu bieden deze tools een schat aan informatie, maar meestal is het verschrikkelijk lastig om ze te gebruiken, zeer zwaar voor de omgeving en genereren ze gigabytes aan data. Ik ben dan ook altijd erg blij als er weer iemand komt die iets schrijft wat makkelijk toepasbaar is, en mij niet overspoelt met informatie.

Vandaag is er weer een juweeltje bijgekomen, genaamd SNAP. Deze is ontwikkeld door Todd Carter, ex-Microsoft, ex-Principal Premier Field Engineer, 2x MCM - voor de SharePoint beheerder die de laatste jaren in een grot heeft geleefd, en hem nog niet kent - in samenwerking met Aaron Barth, .NET goeroe, Principal Premier Field Engineer bij Microsoft.
Naast dat deze tool wat informatie over .NET processen kan geven, en een memory dump kan maken, kan deze tool heel gemakkelijk de managed callstacks van threads samplen. Dit geeft je dus een schat aan informatie over waar je threads mee bezig zijn, terwijl de applicatie draait.

Eens.... Dit is geen tool die al jouw problemen gaat oplossen, maar het zal in veel gevallen net genoeg informatie geven om je in de juiste richting te sturen, zonder dat je zeer zware middelen als profilers toe hoeft te passen.

Voor meer informatie check Todds blog: http://todd-carter.com/post/2012/05/05/Making-Debugging-a-SNAP.aspx

Suc6!

Waarom 'SharePoint Software Boundaries and Limits' de meest slecht gekozen naam van een Technet artikel ooit is.

2012-03-30T09:00:00Z

Iedereen die met SharePoint werkt kent de 'Software Boundaries and limits' documenten (SharePoint 2010: http://technet.microsoft.com/en-us/library/cc262787.aspx).
Dit document bevat informatie t.b.v. capaciteitsplanning voor SharePoint infrastructuren en applicaties.

Ondanks dat er boven aan het document duidelijk het onderstaande staat beschreven, denken veel mensen dat dit document geheel uit grenzen en limitaties bestaat (Boundaries and Limits), welke niet overschreden mag worden, omdat ze daardoor geen support meer krijgen vanuit Microsoft. Gemiddeld heb ik minimaal 1 klant per maand die cruciale beslissingen neemt op basis van een verkeerde interpretatie van dit artikel.

This article describes software boundaries and limits of Microsoft SharePoint Server 2010. These include the following:

Boundaries: Static limits that cannot be exceeded by design

Thresholds: Configurable limits that can be exceeded to accommodate specific requirements

Supported limits: Configurable limits that have been set by default to a tested value

The capacity planning information in this document provides guidelines for you to use in your planning. It is based on testing performed at Microsoft, on live properties. However, your results are likely to vary based on the equipment you use and the features and functionality that you implement for your sites.

Hopende dat ik voor de toekomst in ieder geval enkelen van jullie veel frustratie en een hoop extra werk kan besparen:

De SharePoint Software Boundaries and Limits artikelen bevatten voornamelijk Thresholds en Supported Limits, wat zoveel wil zeggen dat dit getest is en nagenoeg gegarandeerd geen problemen zal geven op vergelijkbare hardware en met vergelijkbare workload.

Hiervan afwijken betekent niet dat je niet supported bent. Je krijgt altijd support.

Het betekent dat je mogelijk extra inspanning moet leveren om ervoor te zorgen dat de dienst als geheel blijft presteren, en dat je moet onderzoeken wat de implicaties zijn voor functionaliteit en prestaties.

SQL 2008 R2 cluster via command line

2011-12-27T09:38:53Z

Ik ben momenteel bezig bij een klant om het mogelijk te maken een SharePoint farm inclusief SQL server volledig unattended te deployen.
Deze post laat een voorbeeld zien, hoe een SQL Server 2008 R2 cluster met de database engine via command line te installeren.

Er zijn uiteraard meerdere wegen naar Rome, en daarnaast vele zaken waar je bij productiesystemen rekening mee moet houden. Zaken die ik niet beschrijf om deze post kort en bondig te houden. Deze post is puur bedoeld als voorbeeld, waar vanuit verder gewerkt kan worden.

Meer informatie over SQL clustering is te vinden op: http://msdn.microsoft.com/en-us/library/ms189134.aspx

Voorbereiden cluster

Een SQL server cluster maakt gebruik van de Windows Server clustering features, en voordat je een SQL cluster kunt installeren, moet er een Windows Cluster zijn met de volgende eigenschappen:

Een of meerdere Windows Server failover cluster nodes
Een cluster resource group met:
- Network name
- IP addresses
- Shared disks voor SQL Server data en logs

Verder hebben we het volgende nodig:

Vier static IPs (twee voor de nodes, twee voor het cluster).
Een DNS A record voor het cluster.
Twee domain accounts voor de SQL Server en SQL Agent services.
Een setup account met local administrator rechten op beide nodes, de userrights SeBackupPrivilege, SeDebugPrivilege en SeSecurityPrivilege (http://support.microsoft.com/default.aspx?scid=kb;en-US;2000257 )

Ik ga er vanuit dat je weet hoe je twee servers installeert, en IP adressen, domain accounts en DNS records regelt.
Zodra je dit alles hebt geregeld, maken we van beide Windows servers een cluster d.m.v. Powershell, gebruik makend van het setup account.

Eerst installeren we de cluster features en –tools op beide servers:

Import-Module ServerManager
Add-WindowsFeature Failover-Clustering,RSAT-Clustering

Vervolgens testen we of de systemen gereed zijn om een cluster te vormen:

Import-Module FailoverClusters
Test-Cluster server1,server2

In mijn geval kan ik wel een cluster vormen, maar heb ik warnings gekregen op bepaalde tests rondom disk en netwerk,
wat klopt, want ik had nog geen Shared storage toegevoegd en heb slechts een enkele NIC (wat dus een single point of failure is voor de nodes).
Voor meer informatie kan je kijken in het report, waar erg veel waardevolle informatie in staat rondom de tests en uitkomsten.

Nu kan ik het cluster gaan vormen, maar om een disk resource te kunnen maken in een clustergroup moet ik natuurlijk wel een disk hebben.
Lees mijn blogpost @ voor een voorbeeld iSCSI implementatie.

Om het cluster te maken voeren we de volgende commando's uit:

Import-Module FailoverClusters
New-Cluster –Name ClusterNaam1 -Node server1,server2 –StaticAddress x.x.x.x [-IgnoreNetwork x.x.x.x/xx] –NoStorage
$q = Get-ClusterAvailableDisk | Sort Size | Select -First 1
Get-ClusterAvailableDisk | Add-ClusterDisk
Set-ClusterQuorum -NodeAndDiskMajority $q.name

New-Cluster zal standaard proberen alle Shared Volumes meteen toe te voegen als cluster resource, en daarnaast voor elk beschikbaar netwerk een IP vragen om als resource op te voeren. Via –NoStorage kun je de disks later toevoegen, en via –IgnoreNetwork, kunt je netwerken negeren. Voor elke netwerk wat niet is opgenomen in de ignore list, moet je een shared IP opgeven in –StaticAddress.

Om een Node en Disk majority Quorum te kunnen maken, sorteer ik alle beschikbare disken op grootte en gebruik de kleinste voor het Quorum (volgens de boeken is 512MB genoeg, dus zo groot maak ik mijn Quorum disk, waardoor deze altijd de kleinste is [waarvoor zou je anders een kleine shared disk gebruiken??]).

Het cluster is nu gereed voor de SQL installatie.

Installatie SQL Server

SQL Server heeft .NET 3.5 SP1 nodig, dus voordat we de setup draaien voegen we eerste de juiste Windows Feature toe:

Import-Module ServerManager
Add-WindowsFeature AS-NET-Framework

Om de SQL clustergroup te maken draaien we vervolgens de setup van het SQL installatie medium met de juiste parameters (ik heb een voorkeur voor het gebruik van een config file).

We maken op een textbestand aan met de volgende inhoud:

[SQLSERVER2008]
QUIET="True"
ACTION="InstallFailoverCluster"
FEATURES="SQLENGINE,SSMS,ADV_SSMS"
INSTANCENAME="SharePoint"
INSTANCEID="SharePoint"
INSTANCEDIR="C:\Program Files\Microsoft SQL Server"
INSTALLSHAREDWOWDIR="C:\Program Files (x86)\Microsoft SQL Server"
INSTALLSHAREDDIR="C:\Program Files\Microsoft SQL Server"
SQLSVCACCOUNT="HOME\sa.SqlSvc"
AGTSVCACCOUNT="HOME\sa.SqlAgent"
SQLSVCPASSWORD="P@ssw0rd!"
AGTSVCPASSWORD="P@ssw0rd!"
INSTALLSQLDATADIR= "X:\SQLData"
SQLCOLLATION="Latin1_General_CI_AS_KS_WS"
FAILOVERCLUSTERGROUP="SQL Cluster Group"
FAILOVERCLUSTERDISKS="Cluster Disk 1"
FAILOVERCLUSTERIPADDRESSES="IPv4;192.168.1.46;Cluster Network 1;255.255.255.0"
FAILOVERCLUSTERNETWORKNAME="CLUSTERNAAM2"
SQLSYSADMINACCOUNTS="DOMEIN\USER"

In een nutshell vertel ik setup een installatie moet doen met alleen de database engine, management tools (advanced), de services onder bepaalde domain accounts moeten draaien, en het een cluster moet vormen. De parameters betekenen in het kort:

INSTANCENAME	Naam van de SQL instance
INSTANCEID	Instance ID wat gebruikt wordt in namen van folders en configuratie
INSTANCEDIR	De configuratiedirectory van de instance
INSTALLSHAREDWOWDIR	De installatiedirectory for 32 bit componenten
INSTALLSHAREDDIR	De installatiedirectory for 64 bit componenten
SQLSVCACCOUNT	SQL Server Service account
AGTSVCACCOUNT	SQL Agent Service account
SQLSVCPASSWORD	Password voor SQL Server Service account
AGTSVCPASSWORD	Password voor SQL Agent Service account
INSTALLSQLDATADIR	De default directory voor de database data
SQLCOLLATION	De default collation
FAILOVERCLUSTERGROUP	De naam van de clustergroup die SQL aanmaakt
FAILOVERCLUSTERDISKS	De shared disks die toegevoegd worden aan de cluster group
FAILOVERCLUSTERIPADDRESSES	Een nieuw shared IP adres en een verwijzing naar een bestaand cluster netwerk resource
FAILOVERCLUSTERNETWORKNAME	De clusternaam die SQL gaat gebruiken
SQLSYSADMINACCOUNTS	Accounts die toegevoegd dienen te worden aan sysadmin

Voor meer informatie over de beschikbare parameters zie: http://msdn.microsoft.com/en-us/library/ms144259.aspx

Ik heb hier gewoon wat waarden ingezet, maar wil je volledige automatisch deployed, zul je je config file moeten genereren, en wat logica in je scripts moeten bakken, zodat bijvoorbeeld de FAILOVERCLUSTERDISKS en FAILOVERCLUSTERIPADDRESSES, automatisch gevuld wordt met de juiste disks en NICS.
Mijn gotcha's waren:

Dat de parameter FAILOVERCLUSTERGROUP een unieke naam moet hebben. Bij het configureren van het initiële cluster zijn de namen "Cluster Group" en "Available Storage" al geclaimd.
De FAILOVERCLUSTERNETWORKNAME een bestaande WINS of DNS naam moet zijn, en verwijzen naar het een ander nieuw IP adres, en een andere naam zijn dan diegene die je gebruikt hebt bij het initieel aanmaken van het Windows Cluster. Je gebruikt dus in totaal 4 IP adressen (2 private voor de nodes, en 2 cluster adressen).

Op de eerste node draaien we dan vervolgens:

./Setup.exe /configurationfile=padnaarconfigfile.ini /IndicateProgress /IAcceptSQLServerLicenseTerms

De SQLSetup.log file is te vinden onder %temp%, maar persoonlijk had ik meer aan de logs onder padnaarsqlinstalldir \100\Setup Bootstrap\xxxxxxxx_xxxxxx\*.log.

Zodra de SQL installatie succesvol is afgerond, maak je op de andere Node ook een configuratiebestand aan. Ik gebruik hier als voorbeeld:

[SQLSERVER2008]
QUIET="True"
ACTION="AddNode"
INSTANCENAME="SharePoint"
SQLSVCACCOUNT="HOME\sa.SqlSvc"
AGTSVCACCOUNT="HOME\sa.SqlAgent"
SQLSVCPASSWORD="P@ssw0rd!"
AGTSVCPASSWORD="P@ssw0rd!"

Voor meer informatie over de beschikbare parameters zie: http://msdn.microsoft.com/en-us/library/ms144259.aspx

Op deze node draaien we vervolgens wederom:

./Setup.exe /configurationfile=padnaarconfigfile.ini /IndicateProgress /IAcceptSQLServerLicenseTerms

Voila, het cluster is gereed. Wat nu rest is ervoor zorgen dat het A-record voor de clusternaam gewijzigd mag worden door het computer account wat voor het cluster is aangemaakt in AD. Als DNS AD integrated is, geef je het cluster computer account (dus niet de afzonderlijke nodes) via de DNS Server mmc snap-in FULL CONTROL op het A-record.

Appendix

Aangezien ik in deze post alleen een installatie van de database engine behandel, hebben we geen Distributed Transaction Coordinator nodig. Ik kwam bij mijn zoektocht naar informatie echter een script tegen op http://www.sqlha.com/2009/09/02/creating-a-clustered-distributed-transaction-coordinator-msdtcdtc-using-powershell-method-1/ waarvan ik dacht COPY PASTE… Voor het geval ik of jij het ooit nodig heeft. Ik heb het niet getest, dus garantie tot de virtuele deur…

$clunm = "Windows failover cluster name"

$dtcdisknm = "Name of the disk resource to use with DTC"

$dtcdnsnm = "Name for DTC in DNS"

$dtcgrpnm = "Name of the DTC resource group"

$dtcipaddr = "IP address for DTC"

$dtcsubnet = "Subnet mask for DTC"

$dtcipresnm = "Name of the DTC IP address resource"

$dtcnetnm = "Name of the DTC network name resource"

$dtcresnm = "Name of the DTC resource name"

Add-ClusterGroup $dtcgrpnm -Cluster $clunm

Add-ClusterResource $dtcipresnm -ResourceType "IP Address" -Cluster $clunm -Group $dtcgrpnm

$ipres = Get-ClusterResource $dtcipresnm

$ipaddr = New-Object Microsoft.FailoverClusters.PowerShell.ClusterParameter $ipres,Address,$dtcipaddr

$subnet = New-Object Microsoft.FailoverClusters.PowerShell.ClusterParameter $ipres,Address,$dtcsubnet

$setparams = $ipaddr,$subnet

$setparams | Set-ClusterParameter

Add-ClusterResource $dtcnetnm -ResourceType "Network name" -Cluster $clunm -Group $dtcgrpnm

$nnres = Get-ClusterResource $dtcnetnm

$netnm = New-Object Microsoft.FailoverClusters.PowerShell.ClusterParameter $nnres,Address,$dtcdnsnm

$netnm | Set-ClusterParameter

Add-ClusterResourceDependency $dtcnetnm $dtcipresnm -Cluster $clunm

Add-ClusterResource $dtcresnm -ResourceType "Distributed Transaction Coordinator" -Cluster $clunm -Group $dtcgrpnm

Add-ClusterResourceDependency $dtcresnm $dtcnetnm -Cluster $clunm

Move-ClusterResource $dtcdisknm -Cluster $clunm -Group $dtcgrpnm

Add-ClusterResourceDependency $dtcresnm $dtcdisknm -Cluster $clunm

El Cheapo iSCSI oplossing voor je testomgeving

2011-12-23T16:21:00Z

Als je clustert heb je shared resources, waaronder meestal ook storage. Ik heb geen dure hardware waarmee ik dat thuis voor elkaar kan boksen, dus de goedkoopste optie is iSCSI. Wij leveren gratis iSCSI software (het komt uit Storage Server) voor testomgevingen en kleine productieomgevingen.

iSCSI Software Target levert een software-based and hardware-onafhankelijk iSCSI disk subsystem, en maakt van elke windows server een storage device wat shared block-level storage levert over een IP netwerk.

In deze blog post laat ik zien hoe je snel een iSCSI disk beschikbaar stelt aan je cluster nodes. Ik ga niet in op recommended practices rondom Windows- en cluster inrichting, want dat laat ik over aan de Platform specialisten; ik ben maar een SharePoint nerd J.

iSCSI Target

Eerst bouw ik de iSCSI target, wat gewoon een normale Windows Server 2008 R2 installatie is met de iSCSI target software. Ik ga ervan uit dat jij als lezer snapt hoe je een Windows Server installeert. Zo niet, dan is deze post niet voor jou geschreven.

Download de software van http://www.microsoft.com/download/en/details.aspx?id=19867, en extract naar een tijdelijke folder.
Start uit de x64 folder iscsitarget_public.msi.
De verdere installatie spreekt voor zich.

De configuratie is iets lastiger. Ik laat hier een voorbeeld zien van een enkele disk, maar je kunt er natuurlijk veel meer maken:

Ga naar Administrative Tools > Microsoft iSCSI Software Target
Kies Create iSCSI Target in het context menu van iSCSI Targets. Met een iSCSI target bepalen we welke nodes in het netwerk verbinding mogen maken met onze storage devices die we aan de target koppelen.
Doorloop de verschillende schermen:

iSCSI Target Name en Description bepalen de naam en omschrijving van onze target.

Bij de iSCSI Initiators Identifiers geef je aan welke nodes een verbinding mogen maken. Dit kan op basis van een speciaal iSCSI Id, welke je op de nodes kunt vinden en configureren binnen de initiator software (de client kant van onze iSCSI oplossing).

Wanneer je voor advanced kiest, kun je ook een DNS naam of IP adres opgeven.

Ik voeg hier twee IP adressen op (voor elke cluster node 1). Je krijgt dan een waarschuwing, maar dat kun je negeren.
Creëer een nieuwe Virtual Disk door in het context menu van de nieuwe iSCSI target te kiezen voor Create Virtual Disk for iSCSI target en volg de schermen. Deze spreken voor zich. Belangrijk om te onthouden is, dat de disk dynamisch is, en dus niet meteen de ruimte claimt die je instelt als grootte:

De iSCSI target is nu gereed om gebruikt te worden.

Cluster node configuratie

Om de target te kunnen benaderen moeten we de beide nodes configureren.
Windows 2008 R2 wordt geleverd met standaard iSCSI initiator software welke te benaderen is via Administrative Tools > iSCSI Initiator.

Op beide nodes:

Start de iSCSI Initiator.
Selecteer Yes wanneer Windows vraagt de service te starten.
Vul in op de Targets tab het IP van de target in, en selecteer Quick Connect… Het device wordt automatisch gekoppeld aan de node.
Op de Volumes and Devices tab, selecteer Auto Configure.
Selecteer OK om af te sluiten.

Alleen op Node 1:

Breng via Disk Management de shared disk online, initialize hem (zelfde context menu).
Partitioneer de disk, en formateer deze,

Voila, uw iSCSI volume is klaar om gebruikt te gaan worden. Succes!!